Organizado por:

Evaluación cualitativa en las dinámicas de innovación e investigación docente: exploración de nuevos instrumentos Resumen: 117 wds.

Se pretende explorar nuevos instrumentos de análisis textual, aplicado al análisis de la percepción de utilidad de una dinámica docente valorada por una muestra de estudiantes. La dinámica docente a evaluar consistió en la creación de historias aplicadas a conceptos teóricos de la disciplina de la psicología social, como método de aprendizaje activo. Así, estudiantes de Trabajo Social (N = 91) valoraron cualitativamente el mencionado ejercicio. Los resultados obtenidos señalaron principalmente una valoración positiva en cuanto a comprensión de conceptos teóricos a partir del ejercicio docente, enfatizando su potencialidad como aprendizaje activo. Respecto al instrumento de análisis textual, representa una herramienta potente para la detección y visualización de patrones y relaciones subyacentes dentro de textos y narrativas. Palabras clave:

Estudio de caso, psicología social, aprendizaje activo, análisis textual, voyant-tools

1. Objetivos o propósitos:

El propósito de este estudio es realizar un abordaje exploratorio de análisis textual a partir de las valoraciones cualitativas de estudiantes realizadas a una dinámica docente en asignaturas de psicología social, en el Grado de Trabajo Social de la Universidad de Zaragoza. La actividad docente consistió en la construcción de un caso o historia, en el cual los estudiantes deben contextualizar contenidos teóricos de la asignatura. La exploración de los datos se realizó mediante la plataforma gratuita de análisis textual y minería de texto basada en web Voyant-tools (Sinclair y Rockwell, 2012; Sinclair y Rockwell, 2016).

2. Marco teórico:

Las áreas de conocimiento centradas en la conducta humana, como la Psicología Social, pueden ser ámbitos que representen un reto para el aprendizaje del alumnado y para el proceso de enseñanza del profesorado. Esto sucede, al menos en parte, debido al elevado nivel de abstracción y volumen de conceptos necesarios para explicar la conducta humana en interacción. Algunos temas clásicos en psicología social son por ejemplo la percepción y cognición social, las actitudes y la persuasión, las relaciones interpersonales, la conducta altruista, los

Organizado por:

prejuicios y el rechazo social, la agresión y violencia, o la psicología de los grupos, entre otros. Cada uno de los cuales, agrupa un número alto de conceptos a comprender y aprender. Dentro de un modelo que se caracterice por la implicación del estudiante en el proceso de aprendizaje, la creación de casos o historias se ha visto como de utilidad en aquellos ámbitos en los cuales, las relaciones humanas son relevantes. En este sentido, varios estudios desarrollados en el entorno universitario han puesto en marcha este tipo de dinámica docente (Escartín et al., 2015; Fernández-Campo y Martin-Peña, 2017). En la Figura 1 se muestra el procedimiento general para desarrollar la mencionada dinámica docente. Algunos primeros resultados han mostrado, por un lado, la existencia de una relación entre la construcción del ejercicio y el rendimiento obtenido en forma de la calificación resultante de los estudiantes en la asignatura correspondiente. Por otro lado, algunos de estos estudios apuntan también a una valoración buena en lo que se refiere a la percepción de utilidad del ejercicio por parte del alumnado (e.g., Fernández-Campo y Martin-Peña, 2017).

Organizado por:

Figura 1. Descripción general de las fases del procedimiento del ejercicio docente construcción de una historia (Fernández-Campo y Martin-Peña, 2017) Sin embargo, a nivel cualitativo, se ha analizado únicamente a nivel superficial la percepción de utilidad del alumnado sobre esta dinámica docente. Así, un análisis más sistemático de las valoraciones cualitativas de los estudiantes puede ayudar a configurar un mejor mapa del ejercicio docente. Es aquí donde aplicaciones de análisis textual y minería de texto pueden jugar un rol importante, especialmente, cuando las valoraciones de los estudiantes empiezan a ser numerosas, y donde un análisis de contenido de tipo cualitativo puede ser insuficiente o de gran complejidad. Para ello, el análisis textual y la minería de texto pueden ser herramientas de interés para el abordaje de un gran número de datos, favoreciendo la detección de palabras y frases clave, patrones gramaticales y visualizar frecuencias de palabras (Hodhod y Fleenor, 2017; Miles and Huberman, 1994).

3. Metodología:

Participantes: Han participado estudiantes (N = 91) de 3 asignaturas del área de Psicología Social del Grado de Trabajo Social de la Universidad de Zaragoza, de los cursos: Desarrollo humano en el ciclo vital y en el medio social (1º curso), Procesos de interacción: el individuo en el grupo y en su contexto social (2º curso), Trabajo social con grupos (2º curso). La muestra de estudiantes fue seleccionada por haber

Organizado por:

aportado su valoración cualitativa sobre la experiencia de haber realizado el ejercicio de construcción de historias. Como se trata de una investigación en curso, en el congreso pretendemos disponer de más datos cualitativos. Medidas. Percepción cualitativa de la utilidad del ejercicio por parte del alumnado. Para poder recopilar de forma cualitativa la experiencia de los estudiantes respecto al ejercicio de construcción de historias, se les pidió que contribuyeran por escrito sobre ello. Análisis El análisis cualitativo fue realizado mediante las herramientas puestas a disposición por la plataforma Voyant-Tools (Sinclair y Rockwell, 2012) que son un conjunto de aplicaciones web de análisis textual en entorno digital. A partir de ellas, se obtiene un resultado de explotación visual de los datos. Así, el análisis textual puede utilizarse para propósitos de interpretación de un texto, para extraer palabras distintivas o clave, ayudando a identificar conexiones y enlaces subyacentes en el texto. Sirve también para el análisis de su significado en relación a palabras que preceden y siguen a otro término clave determinado. Toma relevancia aquí la frecuencia de aparición de esos términos mediante su recuento en el texto. Este recuento se fundamenta sobre la creencia de que las personas tienen un vocabulario distintivo y patrones de uso de palabras (Leech y Onwuegbuzie, 2007). Aunque esta herramienta puede ser especialmente óptima para valorar grandes cantidades de texto, la dimensión de este estudio es exploratoria. Dentro de las múltiples herramientas que provee Voyant-Tools, se han seleccionado las que mejor facilitan el hecho de dar respuesta a los objetivos planteados, esto es, conocer la valoración del alumnado sobre el ejercicio docente planteado. Para ello, a modo de procedimiento de selección de herramientas de análisis con esta plataforma, se han elegido en primer lugar aplicaciones que aporten información genérica sobre el conjunto del texto a analizar (e.g., frecuencia de cada palabra), para posteriormente utilizar otras aplicaciones que permiten visualizar información más específica (e.g., interacción-relación entre palabras). Las aplicaciones elegidas y sus resultados se muestran a continuación.

Organizado por:

4. Discusión de los datos, evidencias, objetos o materiales:

En primer lugar, se utilizó la aplicación “Resumen”, con la cual se obtiene el recuento de palabras del documento a analizar. El documento utilizado con las valoraciones del alumnado consta de 2874 palabras. En la Figura 2 se muestran las palabras más frecuentes. Este recuento permite crear listas de exclusión de diversos términos, como por ejemplo, artículos, que no contribuyen a la pregunta de investigación. Así, términos como “a” o “me” fueron incluidas en dicha lista de exclusión.

Figura 2. Resumen y recuento de palabras. En segundo lugar, se utilizó la aplicación “nube de palabras”, con el propósito de obtener un primera exploración visual (ver Figura 3).

Figura 3. Visualización “nube de palabras” para la visualización de las mayores frecuencias de palabras. En tercer lugar, se realizó el análisis mediante la aplicación “enlaces”. Esta herramienta

permite visualizar una figura en red con los términos más frecuentes y otros que están

en proximidad. Las palabras clave se muestran en color azul y las que están en

proximidad en color naranja. La aplicación permite realizar búsquedas sintácticas de

palabras clave que se quieran investigar de forma concreta, obteniendo las palabras en

proximidad. Se comprobaron los términos “entretener” y “comprender” como palabras

clave, así como sus derivados para obtener sus interacciones de palabras en proximidad

Organizado por:

(ver Figura 4). Se comprobó, por un lado, la relación de términos que comenzaran con

la palabra compren*, (incluye comprender, comprensión, comprendido…etc.), con el

propósito de valorar las mencionadas interacciones. Así la palabra clave comprensión se

vincula con la ayuda, comprensión de conceptos, mejor comprensión. Por otro lado, la

palabra entreten* (incluye entretenido, entretenidas…etc.) mostró proximidad con

términos como amena, práctica o aprender.

Figura 4. Visualización de aplicación “Enlaces”.

Organizado por:

En tercer y último lugar, se aplicó la herramienta Contextos o palabras clave en contexto. Esta aplicación muestra cada ocurrencia de una palabra clave con un poco de texto de alrededor o contexto, lo cual es útil para estudiar cómo se usan los términos en esos entornos concretos textuales. Así, primero se encuentra “Término”, la palabra clave que coincide con la consulta de término predeterminada o proporcionada por el usuario. A la izquierda aparecen las palabras contextuales a la izquierda de la palabra clave (la ordenación por esta columna trata las palabras en orden inverso, de derecha a izquierda desde la palabra clave). A la derecha se muestran las palabras contextuales a la derecha de la palabra clave. La cantidad de contexto a la izquierda y derecha es modificable por el usuario. Tabla 1. Herramienta “contexto” con los términos aprendizaje (aprend*).

Organizado por:

5. Resultados y/o conclusiones:

En primer lugar, los resultados obtenidos del análisis de las valoraciones de los estudiantes muestran que el ejercicio de construcción de un caso o historia puede ser de utilidad para un aprendizaje de conceptos más ameno y entretenido. En segundo lugar, la plataforma Voyant-tools y las herramientas concretas utilizadas para el análisis permiten una exploración inicial del texto, que más allá de la mera cuantificación de palabras permite una visualización de palabras clave e interacciones entre términos. Esto permite obtener unos resultados óptimos sobre las valoraciones aportadas.

6. Contribuciones y significación científica de este trabajo:

Este trabajo contribuye a: Conocer mejor y divulgar instrumentos de análisis textuales y minería de

textos aplicados al ámbito de la investigación e innovación docente en educación superior.

Mostrar su eficacia de análisis, lo cual se pone de manifiesto a través de la

detección de patrones y relaciones dentro del texto y a una visualización, rápida y dinámica de las mismas.

Realizar un análisis textual con mayor profundidad en cuanto a la percepción

de utilidad del alumnado sobre la construcción de un caso o historia. Mostrar mediante dicho análisis una percepción positiva por parte de una

muestra de estudiantes del ejercicio, percibido como una práctica que favorece el aprendizaje dentro de un entorno entretenido.

7. Bibliografía: Escartín, J., Saldaña, O., Martín-Peña, J., Varela-Rey, A., Jiménez, Y., Vidal, y T., Rodríguez-

Carballeira, A. (2015). The Impact of Writing Case Studies: Benefits for Students’

Success and Well-being. Procedia-Social and Behavioral Sciences, 196, 47-51.

Leech, N. L., y Onwuegbuzie, A. J. (2007). An array of qualitative data analysis tools: A call

for data analysis triangulation. School Psychology Quarterly, 22(4), 557.

Sinclair, S., Rockwell, G. y Voyant Tools Team. (2012). Voyant tools (web application).

http://voyant-tools.org/.

Organizado por:

Sinclair, S., y Rockwell, G. (2016). Text Analysis and Visualization: Making Meaning Count.

En Schreibman, S., Siemens, R., y Unsworth, J. (Eds.), A New Companion to Digital

Humanities (pp. 275-290). Canada: Wiley Blackwell.

Miles, M. B., y Huberman, A. M. (1994). Qualitative data analysis: An expanded sourcebook.

Sage.

Fernández-Campo, A. y Martin-Peña, J. (2017). “Déjame que te cuente”: los estudios de caso

como herramienta de aprendizaje activo en Psicología Social. CIMIE17-VI Congreso

Internacional Multidisciplinar de Investigación Educativa. Universidad de Deusto,

Bilbao.

https://www.researchgate.net/publication/318707978_Dejame_que_te_cuente_los_estu

dios_de_caso_como_herramienta_de_aprendizaje_activo_en_Psicologia_Social.

Hodhod, R. y Fleenor, H. (2017). A Text Mining Based Literature Analysis for Learning

Theories and Computer Science Education. Conference on Advanced Intelligent

Systems and Informatics 2017, Advances in Intelligent Systems and Computing 639,

DOI 10.1007/978-3-319-64861-3_52.