ISSN: 2711-175X (En línea) No. 13 de 2022 (I Trimestre) Boletín SIEA Santiago de Cali
SIEA
Editora Sonia Cadena Castillo Universidad Autónoma de Occidente Colombia
B O L E TÍN DE L SIST E MA INSTITUC ION AL DE EVA LUA C IÓN DE LOS A PR E NDIZA J E S
Comité Editorial Claudia Alexandra Roldán Morales Universidad Autónoma de Occidente Colombia
El Boletín del SIEA es un medio de divulgación de resultados de investigación, con periodicidad trimestral y está incluido en bases bibliográficas.
Oswaldo Rodríguez Díaz Universidad Autónoma de Occidente Colombia Dulfay Astrid González Jiménez Universidad Autónoma de Occidente Colombia Fabio Jurado Valencia Universidad Nacional de Colombia Colombia Daniel Bogoya Maldonado Consultor Nacional e Internacional Colombia
Autores: Karina Galeano-Martínez. Andrés Camilo Osorio Sánchez, Fredy Eduardo Vásquez Rizo. Isabel Cristina Paz Romero, María Fernanda Navarro Patiño Apoyaron la producción del Boletín No. 12 Dulfay Astrid Gonzalez y Sonia Cadena Castillo Diseño: Pablo Andrés Sánchez. Página web: https://sitios.uao.edu.co/docentes/boletines-siea
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES
1. El proceso inicial El programa de Comunicación Social-Periodismo, adscrito a la Facultad de Comunicación y Ciencias Sociales de la Universidad Autónoma de Occidente [UAO], desde el 2015 hace parte del Sistema Institucional de Evaluación de Aprendizajes [SIEA], estrategia de desarrollo y fortalecimiento académico de la Vicerrectoría Académica, por medio de la cual se aporta al ecosistema de excelencia académica institucional. En el marco de esta apuesta, se construyó el Marco Conceptual de Comunicación que soporta las pruebas estandarizadas del área para valorar las competencias y desempeños cognitivos, con los que, los estudiantes inician y culminan las asignaturas asociadas a este campo del conocimiento. El área de Comunicación integra cinco asignaturas: Introducción a la Comunicación Social-Periodismo, Comunicación I, Comunicación II, Comunicación III y Teoría de la Comunicación Digital, las cuales hacen parte del ciclo de fundamentación de los estudiantes del programa de Comunicación Social-Periodismo. Cuatro de estas asignaturas también son ofrecidas para los estudiantes de los programas de Diseño de la Comunicación Gráfica, Cine, y Publicidad en Medios Digitales1, que para el año 2018 hacían parte de la misma Facultad, y que posteriormente pasaron a constituir la Facultad de Humanidades y Artes de la Universidad, ajuste que no afectó la proyección de competencias, ni de dominios cognitivos evaluados en los cursos en mención.
1 Estos programas, en el año 2021, cambiaron su denominación en el proceso de la renovación de registro calificado y de ajuste a la multimodalidad.
1
SIEA
U N I V E R S I DA D A U TÓ N O M A D E O C C I D E N T E
Las asignaturas del área se cursan en los primeros tres semestres del plan de estudios, hacen parte del ciclo de formación básica en Comunicación y aportan de manera decidida a una fase formativa que privilegia el estudio y análisis crítico de perspectivas, escuelas y autores que han permitido el desarrollo del campo de la Comunicación. El instrumento de evaluación del área de comunicación se configuró a partir de lineamientos institucionales acordes con lo declarado en la Política Curricular, en la que se expresa la apuesta institucional de fundamentar el desarrollo meso y microcurricular a partir de la taxonomía SOLO (Biggs y Collis, 1982), y a partir de los procesos cognitivos detallados en el cubo del aprendizaje (UAO, 2012) en el que se explicitan para el nivel uniestructural, multiestructural, relacional y abstracto ampliado, los dominios cognitivos y los ejes de acción-actuación-creación. Los tres campos de conocimiento para perfilar la prueba en ítems, contextos y bloques fueron: el proceso de comunicación en prácticas culturales, las acciones de mediación social y la comunicación intercultural.
BOLETÍN Nro.13
A continuación, algunos detalles sobre las asignaturas del área, sus objetivos y carreras en las cuales se oferta:
Asignatura
Objetivo de la Asignatura
Ofrecido a
Introducción a la Comunicación SocialPeriodismo
Identificar los diferentes campos laborales en los que se desempeña el profesional de la Comunicación SocialPeriodismo, para distinguir los diversos procesos en que interviene, según una lectura del contexto en que estos se desarrollan.
Comunicación SocialPeriodismo.
Inducir al estudiante en la experiencia de identificación y reconocimiento de la comunicación como diversos procesos de interacción social entre diferentes actores, quienes producen a su vez sistemas de significación como origen de la cultura, en tanto fuente de identidad social.
Diseño de la Comunicación Gráfica, Publicidad en Medios Digitales, Comunicación Social– Periodismo, Cine.
Describir los momentos más trascendentales de la historia de la comunicación de masas y aplicar las diversas perspectivas teóricas sobre los medios en el análisis de un medio de comunicación particular. Reflexionar sobre el concepto de consumo cultural con el propósito de comprender su significado simbólico.
Diseño de la Comunicación Gráfica, Publicidad en Medios Digitales, Comunicación Social– Periodismo, Cine.
Comunicación I
Comunicación II
U N I V E R S I DA D A U TÓ N O M A D E O C C I D E N T E
Comunicación III
Identificar diversas formas de producción simbólica en el ámbito de las prácticas culturales para comprender, a través del uso de la etnografía, la manera como los ciudadanos producen, negocian sentidos y establecen relaciones en contextos interculturales urbanos.
Diseño de la Comunicación Gráfica, Publicidad en Medios Digitales, Comunicación Social– Periodismo.
Teoría de la Comunicación Digital
Reflexionar acerca de los procesos de interacción, mediación, hipermediación y construcción simbólica en los entornos digitales para la comprensión de fenómenos de convergencia cultural y digital actual.
Comunicación Social– Periodismo, Cine.
Tabla 1 Especificaciones de las asignaturas del área.
2. Asignaturas que conforman el Área de Comunicación El área de Comunicación es de fundamentación conceptual, tiene como objetivo familiarizar al estudiante con las bases teóricas y de investigación que caracterizan al campo de la Comunicación, teniendo en cuenta diversos enfoques disciplinares, escuelas y autores. Los problemas específicos abordados en las asignaturas y sus diversas formas de evaluación, priorizan el análisis de prácticas culturales, en las cuales, además de estudiar sus procesos de producción, circulación y apropiación de sentidos, se trabajan tópicos inherentes al campo, tales como: comunicación intercultural, comunicación interpersonal, comunicación mediatizada, procesos de mediación, comunicación y ciudad, comunicación e identidades, comunicación para el cambio social y comunicación digital, entre otros.
BOLETÍN Nro.13
Fuente: Elaboración propia.
3. El marco conceptual Para el proceso de construcción del instrumento de evaluación en el área de Comunicación, se realizó la revisión y análisis de conceptos y aportes de comunidades académicas, a partir de los cuales se construyó el marco teórico y conceptual que sentó las bases para el documento presentado en el año 2020 por el equipo de trabajo SIEA del Área titulado: Marco Conceptual. Enfoques y estructura de la prueba de comunicación. En dicho Marco se presenta el estado del arte de la evaluación en el campo, se describe la manera en que se ha concebido la evaluación en el área de Comunicación, teniendo como referente los documentos producidos por la Asociación Colombiana de Facultades de Comunicación [AFACOM] y el Instituto Colombiano para la Evaluación de la Educación [ICFES], además de los documentos institucionales relacionados con
2
SIEA
el tema. También documenta el recorrido histórico de la evaluación en el área, así como los antecedentes para evaluar por competencias. Posteriormente, revisa el concepto de competencia y la importancia del instrumento evaluativo en las decisiones didácticas y pedagógicas. Respecto del concepto de competencia, el instrumento se soporta en lo que se declara en el PEI (UAO, 2019, p.17): “…las competencias son procesos complejos que las personas ponen en acción-actuación-creación, para resolver problemas y realizar actividades de la vida cotidiana en contextos múltiples y diversos, aportando a la construcción y transformación de la realidad, para lo cual, integran el saber ser, el saber convivir, el saber conocer y el saber hacer, teniendo en cuenta los requerimientos específicos del entorno, las necesidades personales y los procesos de incertidumbre, con autonomía intelectual, conciencia crítica, creatividad y espíritu de reto, asumiendo las consecuencias de los actos y buscando el bienestar humano”. Desde el área, se amplía la definición de competencia concibiéndola como “la capacidad de comprender procesos de comunicación evidenciados en prácticas culturales, en las cuales se construyen experiencias de producción, distribución y apropiación o consumo de sentidos, y de diseñar, por intermedio de acciones de mediación social, estrategias y productos comunicativos, los cuales se implementan considerando los contextos sociales e interculturales con sus problemáticas y demandas respectivas” (Navarro et al., 2020, p.12), que se evidencia en dimensiones del saber, hacer, convivir y ser del profesional en Comunicación. Para llegar a esa conceptualización, los docentes del equipo revisaron las definiciones de competencia desde la Lingüística, Antropología y Psicología, entre otros campos del conocimiento, para detenerse en las aproximaciones y críticas de Barnett (2001), en razón a que sus investigaciones se centran en la educación superior. Y es que para el autor, las características de la sociedad actual demanda a los profesionales adap-
3
SIEA
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES
SIEA
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES
SIEA
U N I V E R S I DA D A U TÓ N O M A D E O C C I D E N T E
tarse rapidamente y buscar nuevas maneras para reorientar su carrera: “los profesionales competentes no sólo deben sobrellevar los cambios, sino que deben ser capaces de participar en ellos activamente... no se trata de poseer simplemente «competencias», se trata también de tener la capacidad para conversar acerca de ellas, para evaluarlas, para adquirir otras nuevas y actualizar las viejas” (p.111). Delimitada la aproximación conceptual sobre competencias en el área de Comunicación, se pasó a la articulación conceptual de la taxonomía SOLO con la que se construyó el instrumento de evaluación, y que es coherente con las determinaciones institucionales, ya que es una herramienta útil que permite generar una gradación de desempeños cognitivos con diferentes niveles de complejidad, todos ellos asociados a resultados de aprendizaje de los estudiantes. La taxonomía SOLO introduce niveles que se caracterizan por el grado de complejidad que los estudiantes enfrentan al abordar actividades de aprendizaje que tienen un grado de dificultad progresivo. El primer nivel, es denominado como uniestructural, y para el caso de la prueba del área de Comunicación, evalúa que los estudiantes sepan responder preguntas definidas en contextos sociales, relacionen datos explícitos y sepan extraer información pertinente de una sola fuente. En el segundo nivel, el multiestructural, los estudiantes demuestran que saben reconocer elementos relevantes de un concepto y los reportan como una lista o enumeración. El tercer nivel es el relacional, y evidencia que los estudiantes saben formular modelos, identificar condicionantes, supuestos, a la vez que desarrollan y aplican diferentes estrategias de solución, así como evaluar procedimientos, explicar, argumentar y establecer relaciones. El cuarto nivel, denominado abstracto ampliado, determina que los estudiantes pueden trabajar con modelos explícitos en situaciones complejas y concretas que pueden conllevar condicionantes o formulación de supuestos.
BOLETÍN Nro.13
BOLETÍN Nro.13
4. Del marco conceptual a la construcción de ítems, contextos y bloques
SIEA
U N I V E R S I DA D A U TÓ N O M A D E O C C I D E N T E
Tabla 2. Tabla de especificaciones del instrumento para el área de Comunicación Niveles de competencia (dominios cognitivos de la taxonomía SOLO)
Para la elaboración de los ítems, contextos y bloques en el área de Comunicación se tuvo en cuenta la tabla de especificaciones construida a partir de tres campos conceptuales definidos con base en la revisión de la literatura: proceso de comunicación en prácticas culturales, acciones de mediación social y comunicación intercultural. Dichos campos se establecieron a partir de situaciones que involucran distintos niveles o procesos de comunicación que los estudiantes deben reconocer y analizar desde sus conocimientos adquiridos. A continuación, en la Tabla 2 algunos detalles:
Campo
Total ítems
Uniestructural
Multiestructural
Relacional
Abstracto Ampliado
Proceso de comunicación en prácticas culturales.
Reconoce un elemento de las formas de producción de sentido (1 ítem).
Describe cualquiera de los tres momentos del proceso comunicativo: producción, distribución y apropiación de sentido (1 o 2 ítems).
Analiza y contrasta las relaciones de la producción, distribución y apropiación de sentido en prácticas culturales (1 o 2 ítems).
Critica, justifica o teoriza acerca de nuevas estrategias y productos 5 ítems comunicativos que dan cuenta de un proceso de comunicación (1 ítem).
Acciones de mediación social.
Reconoce y lista Identifica un categorías de análisis elemento del proceso en un proceso de de mediación social (1 mediación social (1 o ítem). 2 ítems).
Establece y jerarquiza criterios para llevar a cabo un proceso de mediación social (1 o 2 ítems).
Produce nuevos textos mediatizados y no mediatizados en distintos formatos para contribuir a la construcción de sentido social (1 ítem).
5 ítems
Comunicación intercultural.
Define y explica un modelo de análisis Identifica un elemento Enumera comunicativo de la experiencia características de una que permite una de comunicación situación intercultural intervención en un intercultural (1 ítem). (1 o 2 ítems). contexto intercultural determinado (1 o 2 ítems).
Formula posibles soluciones novedosas y creativas a problemas de comunicación intercultural por medio de la intervención comunicativa (1 ítem).
5 ítems
Fuente: Elaboración propia.
5. Una implementación inicial Desde el área de Comunicación se decidió aplicar solo la prueba de salida en los periodos 2019-1, 2019-3 y 20201, sin los resultados fueran tenidos en consideración para la nota final de la asignatura. La presentación de hizo en línea y desde casa. Se aplicó en los cursos Introducción a la Comunicación Social-Periodismo, Comunicación I, Comunicación II, Comunicación III y Teoría de la Comunicación Digital. La Figura 1 muestra la cantidad de estudiantes que presentaron la prueba de salida durante los periodos señalados:
4
5
SIEA
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES
SIEA
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES
SIEA
U N I V E R S I DA D A U TÓ N O M A D E O C C I D E N T E
Figura 1. Estudiantes que presentaron la prueba. 591
571
531
BOLETÍN Nro.13
BOLETÍN Nro.13
La población evaluada mostró una prevalencia en los niveles multiestructural y relacional: 96,6% en 2019-1; 97,7% en 2019-3 y 95,9% en 2020-1. A continuación detalles de la proporción: Figura 2. Proporción de estudiantes en cada uno de los niveles de la taxonomía SOLO. 100
1,7%
1,2%
3,6%
y Comunicación III) se pudo evidenciar que en cada periodo se presentó un incremento en la media lo que permite afirmar que se logra el desarrollo y fortalecimiento de competencias de los cursos y se aporta desde los mismos, al avance en los dominios cognitivos perfilados desde la taxonomia SOLO y desde el campo base de la Comunicación. A continuación algunos detalles: Tabla 3 Puntajes promedio en las asignaturas secuenciales de Comunicación
90 80 49,9%
48,2%
53,6%
70 2019-1
2019-3
2020-1
Fuente: Elaboración propia.
U N I V E R S I DA D A U TÓ N O M A D E O C C I D E N T E
60
Asignatura
2019-1
2019-3
2020-1
Comunicación I
2,98
2,99
3,00
Comunicación II
2,99
3,01
3,07
Comunicación III
3,06
3,02
3,12
50
La nota promedio fue: 3,04 para 2019-1; 2,99, para 2019-3, y 3,0, para 2020-1. Los resultados muestran un comportamiento similar en los ítems que conforman el instrumento y un desempeño con relativamente homogéneo en la población evaluada.
Fuente: Elaboración propia. 40 30 46,7%
49,6%
42,3%
1,7%
1,1%
0,6%
20 10 0
2019-1
2019-3
2020-1
Finalmente, se evidencia que el constructo teórico descrito en apartados anteriores, así como el detalle señalado en la elaboración de los ítems, contextos y bloques, y la tabla de especificaciones, posibilitan, con niveles de validez y confiabilidad esperados, la evaluación de competencias en el área de Comunicación. 6. Conclusiones
Abstracto ampliado Relacional Multiestructural Uniestructural Fuente: Elaboración propia.
A su vez, el número de estudiantes con correlación negativa no muestra incidencia significativo, máxime el total de estudiantes que presentaron la prueba durante cada periodo, dicha correlación fue: 0,7% en 2019-1, 0,9% en 2019-3 y 1,1% para el 2020-1. Respecto del análisis del desempeño promedio en las asignaturas que conforman el área que son prerrequisitos entre sí (Comunicación I, Comunicación II
En el ejercicio comparativo entre tres cohortes que presentan la misma prueba de salida en condiciones similares, se observan algunos logros tales como: La cohorte que presentó la prueba en el 2020-1 obtiene un mejor promedio, avance a nivel de dominio cognitivo y un mayor promedio para una mayor habilidad. Se observa un aumento en el número de estudiantes que culmina el curso en un dominio cognitivo relacional de acuerdo con la taxonomía SOLO, lo que es una importante evidencia de la incidencia y los desarrollos cognitivos que posibilita el área en los estudiantes de las carreras asociadas. También se evidencia que los estudiantes matriculados en las asignaturas del área sobrepasan el nivel
6
SIEA
uniestructural, el más básico de los niveles cognitivos de la taxonomía SOLO, aunque no llegan, en su mayoría, al nivel más alto, es decir al abstracto ampliado. Cabe señalar que la heterogeneidad poblacional que presenta la prueba por estar en semestres diversos, que van desde primer año hasta final de carrera, limita ejercicios de comparación entre estudiantes (de niveles, de atribución de la evolución a lo aportado al curso, entre otros). Los estudiantes que matriculan el curso pueden estar en semestres iniciales o finales y los dominios cognitivos de partida están condicionados por el trayecto, capital cultural, edad y estructuración cognitiva. Por tanto, pareciera que uno de los desafíos a corto plazo es focalizar la presentación de la prueba en aquellos estudiantes que estén en el primer año de la carrera. Dicho lo anterior, para una futura implementación de la prueba de comunicación, se podría aplicar el instrumento en una sola asignatura, asumiendo cambios sustanciales en el proceso realizado y descrito: revisión de tabla de especificaciones, determinación de competencias, ajuste de ítems, contextos y bloques. Situación que no estaría muy distante de las variaciones estructurales que se han venido promoviendo en la Facultad, de acuerdo con lineamientos institucionales sobre los núcleos académicos, que resignifican la evaluación estandarizada de competencias en un área, teniendo el desafío de lograr su articulación con los resultados de aprendizaje y las integraciones dinamizadas en la reforma curricular del programa de Comunicación Social-Periodismo; condiciones que constituyen todo un reto para el proceso descrito y para la implementación del SIEA en el campo de la Comunicación. Algunas preguntas que orbitan en el área son: ¿Qué transformaciones o actualizaciones se tienen que realizar a corto plazo en la prueba de Comunicación para avanzar hacia la articulación con los núcleos académicos que se tejen en la Facultad?, ¿Si los núcleos académicos son cada vez más interdisciplinares y conectados con los resultados de aprendizaje, qué adecuaciones o resignificaciones hacer a
7
SIEA
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES
SIEA
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES
SIEA
U N I V E R S I DA D A U TÓ N O M A D E O C C I D E N T E
nivel de Marco, tabla de especificaciones y construcción de ítems, para favorecer la mayor convergencia e integración?, ¿Si cada vez más hay una ejecución curricular desde los resultados de aprendizaje, cómo integrar los logros entre evaluación estandarizada y evaluación de aula para favorecer una visión sistemica de los avances cognitivos del estudiante? Los cambios institucionales permean la planificación del área y la conformación de los conocimientos que se construyen con los estudiantes, lo que invita al fortalecimiento cognitivo y pedagógico de los equipos profesorales encargados de orientar el área y a la concientización de la transición en el estudiantado y en otros actores de la Institución.
BOLETÍN Nro.13
Universidad Autónoma de Occidente [UAO]. (2019). Proyecto Educativo Institucional [PEI]. Santiago de Cali: Universidad Autónoma de Occidente [UAO]. Recuperado de: https://sitios.uao.edu.co/docentes/ wp-content/uploads/sites/26/2020/09/DOCUMENTO_PEI-UAO-2020_.pdf?x73514&x45625
Referencias Barnett, R. (2001). Los límites de la competencia. El conocimiento, la educación superior y la sociedad. Barcelona: Editorial Gedisa. Biggs, J. y Collis, K. (1982). Evaluating the quality of learning: The SOLO taxonomy. New York: Academic Press. Navarro-Patiño, M. F., Vásquez-Rizo, F. E., Paz-Romero, I. C., Galeano-Martínez, M. K., Agudelo-González, L. E. y Calero-Cruz, S. A. (2020). Marco Teórico. Sistema Institucional de Evaluación de los Aprendizajes para los estudiantes del ÁREA DE COMUNICACIÓN de la Facultad de Comunicación y Ciencias Sociales. Santiago de Cali: Universidad Autónoma de Occidente [UAO]. Universidad Autónoma de Occidente [UAO]. (2012). El cubo del aprendizaje. Una caja de herramientas para el oficio. Guía práctica para el diseño microcurricular en la UAO. Santiago de Cali: Universidad Autónoma de Occidente [UAO]. Recuperado de: https://sitios.uao.edu.co/wp-content/uploads/ sites/26/2016/09/Cartilla-El-Cubo-de-Aprendizaje. pdf?x73514&x45625&x45625
Consulte en línea nuestros tres últimos boletines: https://sitios.uao.edu.co/docentes/boletines-siea
8
SIEA
SISTEMA INSTITUCIONAL DE EVALUACIÓN DE LOS APRENDIZAJES