Enfoque
La tecnología, está transformando la gestión, investigación y docencia universitaria. Su incorporación ha desencadenado una redefinición de los procesos universitarios. La digitalización de la enseñanza, derivada de la incorporación de Sistemas de Gestión de Aprendizaje (LMS), Moodle en el caso de la Universidad de Málaga, ha venido facilitando la gestión de contenidos y calificaciones de las actividades docentes, presenciales y/o online. Estos sistemas (LMS) continúan evolucionando, progresivamente incorporan nuevas herramientas docentes digitales que facilitan la enseñanza, al tiempo que complican el proceso de evaluación.
La tecnología ofrece herramientas para fomentar la participación y el compromiso en una generación de estudiantes que demandan una formación experiencial y personalizada, basada en el uso de las nuevas tecnologías y en la flexibilidad espacial, tales como Wooclap o Blackboard Collaborate. Los docentes universitarios generamos códigos QR para controlar la asistencia, usamos sondeos y encuestas de diversas plataformas para tomar el pulso de nuestras clases (presenciales y/o online), emails y participación en foros, disponemos de informes de actividad generados por nuestros LMS. Además, seguimos anotando manual o digitalmente digital las participaciones de nuestros alumnos.
En nuestra continua búsqueda de innovación y mejora en la calidad docente, aprovechamos los recursos de las universidades, generando una gran cantidad de datos que complican la evaluación. Una evaluación universitaria objetiva y justa, donde la evaluación continua tiene gran peso, nos obliga a procesar muchos datos dispersos, de múltiples formatos y procedencias. La gestión de calificaciones se complica y vuelve especialmente difícil para el profesorado ajeno a la Ciencia de los Datos. Nuestros ingenieros deben trabajar en esta integración. Mientras tanto, los docentes nos encontramos ante el reto de gestionarlos.
Presentamos los sistemas de inteligencia empresarial y sus capas de inteligencia artificial como una solución viable para resolver el problema de integración y procesamiento de una gran cantidad de datos calificables, generados por múltiples plataformas y recursos digitales aplicados en la docencia, y en definitiva, para automatizar la evaluación docente.
El software de inteligencia empresarial, como Power BI, es uno de los recursos de nuestras universidades para afrontarlo. Power BI es una herramienta de procesamiento, análisis y visualización de datos muy extendida en el ámbito empresarial. Permite integrar y automatizar el tratamiento de gran cantidad de datos, liberándonos de tareas rutinarias y ahorra tiempo en la gestión de calificaciones. Además, integra capas de Inteligencia Artificial para la realización de análisis de sentimientos y previsiones.
El análisis de sentimientos, muy extendido en el ámbito del comportamiento del consumidor, permitirá analizar las emociones, actitudes y opiniones de los alumnos sobre nuestra actividad docente. Se configura como una herramienta de inteligencia artificial útil y accesible para la autoevaluación y mejora de nuestras clases, a partir del análisis de las conversaciones en el chat, en los foros o emails. El análisis predictivo, mostraría la evolución global y/o por criterios de evaluación (asistencia, participación, tareas, controles) de nuestros alumnos; resultaría de gran utilidad en su seguimiento, el diseño de actividades complementarias que personalicen y faciliten su proceso de aprendizaje, resulten motivadoras y mejoren su experiencia educativa.
Mónica López Sieben
Comentó el 13/04/2024 a las 00:15:48
Muy interesante vuestra ponencia María, Francisco, Rocío y Águeda.
Es claro el uso de las herramientas de inteligencia de datos o negocios en el análisis y visualización de grandes cantidades de datos.
Sin embargo, la elaboración de un modelo que reúna los resultados de tantas fuentes distintas requiere un conocimiento elevado en todas estas herramientas, manipulación y conexiones a distintas fuentes y tipos de datos que no está al alcance de la mayoría de profesores.
En caso de crear un modelo estándar de conexiones a fuentes y análisis de resultados, por ejemplo, en una asignatura o programa restaría flexibilidad a cambios los criterios de evaluación en distintas ediciones. En definitiva, se requiere de un expertise elevado del docente en todas estas herramientas para poder dominarlas y contextualizarlas a su materia.
Trabajos como el vuestro puede ayudar a generar buenas prácticas en ese tipo de metodología de evaluación que ayude a obtener esos conocimientos. Gracias.
María Paz Andrés Reina
Comentó el 13/04/2024 a las 12:49:09
Muchas gracias Mónica.
El modelo es totalmente flexible. Se puede adaptar a cambios en criterios de evaluación, añadir o eliminar parámetros en cualquier momento.
Lo cierto es que con la digitalización, la carga administrativa del profesorado es cada vez mayor, y también la necesidad de competencias digitales. Nuestra propuesta pretende simplificar y ahorrar tiempo en la evaluación y mostrar una de las múltiples posibilidades que tenemos a nuestro alcance. Somos conscientes de la necesidad de formar al profesorado en esta herramienta, en primer lugar para mostrar sus bondades y en segundo lugar para capacitarlos en su uso.
Silvia Rodriguez-Donaire
Comentó el 12/04/2024 a las 20:45:34
Gracias María Paz!! Una ponencia muy interesante :-) ¿Qué criterio utilizáis para realizar el análisis de sentimiento del alumnado?
Muchas gracias!!!
María Paz Andrés Reina
Comentó el 13/04/2024 a las 12:43:37
Nosotros no somos expertos en la materia, por lo que hasta este momento sólo hemos aplicado el análisis básico de sentimientos de Power BI, que detecta sentimientos positivos y negativos, y muestra las frases que corresponden a cada grupo. Tenemos que avanzar en este tipo de análisis.
María Vázquez Fariñas
Comentó el 12/04/2024 a las 17:55:02
Buenas tardes:
Enhorabuena por el trabajo y por la presentación. Me parece una propuesta muy interesante que podría aplicarse, además, a diferentes áreas de conocimiento. Me gustaría saber cuál es la principal dificultad que os habéis encontrado a la hora de automatizar la evaluación y si pensáis que sería igual en otras áreas diferentes a la vuestra.
Gracias de antemano.
Un saludo.
María Paz Andrés Reina
Comentó el 13/04/2024 a las 12:41:52
Muchas gracias María.
La principal dificultad, que no es tal, podría ser la elaboración con DAX de las fórmulas para el cálculo de medidas. Sin embargo, la página de Power BI es muy completa y de gran ayuda. Además se puede usar ChatGPT como apoyo.
Como has comprobado, nuestra propuesta es extensible y adaptable a cualquier área y asignatura.
Jose-Luis Poza-Lujan
Comentó el 12/04/2024 a las 17:17:49
Excelente ponencia. Una pregunta ¿Cómo pueden los sistemas de inteligencia empresarial y capas de inteligencia artificial, como Power BI, ser aplicados de manera que mejoren la equidad en los procesos de evaluación académica?
María Paz Andrés Reina
Comentó el 12/04/2024 a las 17:32:41
En nuestra opinión, al contemplar muchos más datos de actividad diaria en clase, la evaluación es más justa y completa. Permite identificaraquellos alumnos que, a pesar de poder ser mas reacios a dar su opinión públicamente por diversos motivos, mantienen una actitud activa en toda la sesión. Una evaluación justa y equitativa debe tener esto en cuenta.
José Morelos Gómez
Comentó el 12/04/2024 a las 13:56:17
Muy buena investigación aplicada al mejoramiento de formación universitaria. Mi inquietud va dirigida a la preocupación en torno a la dependencia de las herramientas digitales en el aula de clases, al tiempo que se desplaza casi que la participación del docente, ¿Cómo podríamos generar estos espacios de coparticipación conjunta, de manera tal que se mantenga la motivación y atención en los educandos?
María Paz Andrés Reina
Comentó el 12/04/2024 a las 16:56:27
Muchas gracias José.
En el modelo propuesto la tecnología es una herramienta de apoyo a la docencia que permite clases más dinámicas, donde la participación puede ser colectiva y no de unos pocos por cuestiones de tiempo. En nuestro modelo, el profesor y la materia tienen un papel central y la tecnología es la ayuda para mantener la atención y motivar al alumnado.
Ana Martín-Caraballo
Comentó el 12/04/2024 a las 09:55:04
Enhorabuena por el trabajo, me parece muy interesante ya que como decís en él todos utilizamos diferentes plataformas para obtener datos para nuestras evaluaciones continuas, los recursos LMS que permiten incorporar la mayoría de los resultados de tales plataformas en los centros de calificaciones en el aula virtual de nuestras universidades nos permitirían jugar y disponer de muchísimos datos. Mi pregunta es si en la plataforma de enseñanza virtual de vuestra universidad os permiten incorporar los LMS, ya que yo llevo intentado que me los permitan introducir en la plataforma de la universidad pero los responsables del aula virtual se niegan a hacerlo por lo que son datos que finalmente debo tratar por separado y se hace tedioso. Por ello me planteo dejar de utilizar ciertos recursos que considero son muy útiles en mi proceso de enseñanza-aprendizaje.
Francisco Muñoz Torres
Comentó el 12/04/2024 a las 11:52:57
Hola Ana. Power Bi te permite incorporar datos de diferentes plataformas, ya sean LMS, bases de datos en la nube o incluso archivos locales, relacionarlos entre sí e integrarlos en un cuadro de mando integral. Una vez hecha esta automatización, cuando haya nuevos datos, Power Bi los incorpora y actualiza las visualizaciones sin tener que volver a hacer todo el trabajo. Además, podemos incorporar herramientas de IA integradas, como regresiones lineales para hacer previsión de notas por ejemplo, o incluso vincular con scripts de python o R si necesitamos datos más complejos
Fernando Maldonado Salazar
Comentó el 12/04/2024 a las 02:44:51
María Paz, felicitaciones por su trabajo de investigación. Es una realidad que el trabajo de la evaluación docente cada vez se vuelve más complejo y conocer de estas posibilidades de automatización es algo muy gratificante. Mi consulta es: ¿Cómo se puede facilitar la adopción de la automatización de la evaluación docente por parte de los profesores, considerando las posibles resistencias al cambio? ¿Han tenido experiencias en ese sentido? Muchas gracias.
María Paz Andrés Reina
Comentó el 12/04/2024 a las 09:52:26
Gracias Fernando. En nuestra opinión, las sesiones formativas dirigidas al profesorado serían esenciales para facilitar la adopción de esta automatización.
Como comenté anteriormente, nuestra experiencia con esta herramienta es en la elaboración de cuadros de mando de recursos humanos, pero como habéis comprobado es perfectamente aplicable a la evaluación docente. Tenemos previsto implantarlo en la evaluación a finales de este curso y el próximo.
Francisco Muñoz Torres
Comentó el 12/04/2024 a las 12:02:22
Muchas gracias Fernando. La adopción de una nueva herramienta suele ser un tema complicado, ya que cambiamos por completo la metodología de trabajo del equipo. En este caso, al ser una herramienta de informes, es un poco más sencillo. Una buena forma de ayudar a la adopción es evitar la sustitución de la herramienta actual con la nueva, sino tener un tiempo ambas herramientas activas y que el propio usuario elija usar la nueva. Para ello, como es lógico, debería cubrir las funcionalidades de la antigua y aportar alguna más que no tenga actualmente
Francisco Cabrera-Gallardo
Comentó el 11/04/2024 a las 23:52:03
Enhorabuena por la interesante ponencia. ¿Que app de IA destacarían ustedes para facilitarnos a los docentes nuestra labor de evaluación/corrección? Gracias.
María Paz Andrés Reina
Comentó el 12/04/2024 a las 09:47:57
Proponemos Power BI, que tiene incorporadas las capas de inteligencia artificial que permiten realizar análisis de sentimientos y previsiones. También tiene conexión con Python. Todo desde el mismo programa.
Elizabeth Esther Vergel Parejo
Comentó el 11/04/2024 a las 21:48:23
Interesate la propuesta de trabajo de este grupo de investigadores. Me gustaria conocer desde el punto de vista técnico e intrumental ¿Cómo se logra integrar la herramienta en el contexto educativo de las Ciencias Sociales con criterios de evaluación de corte cualitativo?
Muchas gracias.
María Paz Andrés Reina
Comentó el 12/04/2024 a las 09:45:44
Muchas gracias Eslizabeth.
Por muy cualitativos que sean los criterios de evaluación, tenemos que calificar con una cifra a nuestros alumnos. La participación es un criterio cualitativo que los profesores cuantificamos y valoramos, ya sea en número de intervenciones o en calidad de intervenciones, también usamos rúbricas, que al final traducimos en una puntuación.
Lo mismo ocurre con la asistencia, se puede asignar un peso dependiendo si se ha asistido a todas las sesiones, a una gran parte, o a pocas.
Silvia María González Fernández
Comentó el 11/04/2024 a las 12:47:37
Enhorabuena por este gran trabajo de investigación. Ha resultado muy interesante. Has dicho en el video que las medidas que se pueden extraer es, por ejemplo, el número de intervenciones en actividades interactivas. ¿Qué programas recomiendas? ¿Qué otros tipos de estrategias para el aprendizaje tienen éxito entre los estudiantes? Muchas gracias.
María Paz Andrés Reina
Comentó el 12/04/2024 a las 09:25:05
Muchas gracias Silvia,
Recientemente la Uma ha introducido la herramienta participativa Wooclap en Moodle. Entre otros, permite realizar en vivo nubes de palabras, preguntas de distintos tipos, sondeos accesibles desde los teléfonos móviles. La dinámica de la clase va determinando las preguntas que el profesor puede improvisar. De este modo el estudiante se implica más, mantiene más atención y está motivado al saber que todos tienen la misma oportunidad de participar, y su participación no es un dato correspondiente a un momento puntual, sino que será valorada por en función de su intervención en una serie de actividades actividades que se producirán en momentos intederminados a lo largo de cada clase.
Mi experiencia en con esta herramienta ha sido muy satisfactoria. El problema llegó al evaluarla, hay que procesar los datos descargables sobre la participación en cada sesión. Por eso nuestra propuesta de automatización.
Eulalia Romero Palacios
Comentó el 10/04/2024 a las 22:43:39
Felicidades por el trabajo y la presentación.
Me surgen 2 dudas, Power By es de pago ¿es accesible para todo el PDI de la universidad de Málaga o es un proyecto experimental vuestro? Por otra parte, no me queda claro si la transformación de datos es manual o la hace Power Query. Por último me gustaría saber qué resultados reseñables habéis obtenido con el análisis de sentimientos. Gracias.
María Paz Andrés Reina
Comentó el 11/04/2024 a las 17:04:53
Muchas gracias Eulalia.
Power BI es una de las aplicaciones de Microsoft accesible para los miembros de la UMA. Además, dispone de una versión gratuita: Power BI Desktop. Generalmente, se utiliza para elaborar cuadros de mando, pero su potencial es tan alto que, como proponemos, lo convierte en una herramienta muy útil para automatizar y simplificar la gestión de las calificaciones.
Power BI tiene una herramienta que es Power Query (también disponible para Excel), con ella realizaremos la depuración de datos (manualmente) de modo muy simple y rápido.
Hasta ahora no hemos aplicado análisis de sentimientos. Lo tenemos previsto implantar este cuatrimestre.
Alfredo Juan Grau Grau
Comentó el 10/04/2024 a las 16:37:00
Antes que nada, felicitar a los autores de esta comunicación la cual me ha parecido muy interesante a la par que útil, principalmente para los docentes . Mi duda es si tenéis ya experiencia previa sobre el software de inteligencia empresarial Power BI y sobre todo, ¿cómo véis una posible implantación a nivel global a la hora de generar recursos para los docentes universitarios con el fin de facilitar esa evaluación cada vez más compleja? Gracias.
María Paz Andrés Reina
Comentó el 11/04/2024 a las 17:16:40
Muchas gracias Alfredo.
Tenemos experiencia en Power BI, pero en el ámbito empresarial. Más concretamente, aplicado a la elaboración de cuadros de mando de recursos humanos. A finales de este curso y principios del próximo, tenemos previsto implantar nuestra propuesta de automatización en la evaluación de las asignaturas que impartimos.
A nivel de Universidad es más complejo. Sería viable a partir de propuestas derivadas de los resultados obtenidos en experiencias del profesorado.
Deja tu comentario
Lo siento, debes estar conectado para publicar un comentario.
Organizan
Colaboran
Configuración de Cookies
Utilizamos cookies para mejorar su experiencia y las funcionalidades de esta web. Ver política de cookies