2. Com avaluar utilitzant les analítiques de l'aprenentatge

2.4. El cas de la Open University: Eina EAI d’anàlisi predictiva

L’Open University (OU) del Regne Unit també ha implementat un sistema d’analítiques de l’aprenentatge basat en un quadre de comandament, però en aquest cas, van aplicar l’analítica predictiva, ja que el sistema facilita la visualització dels itineraris dels estudiants per predir, amb les dades capturades, el futur desenvolupament de l’estudiant d’acord amb les evidències.

L’eina d’analítiques de l’aprenentatge que l’OU va dissenyar es va denominar EAI (Early Alerts Indicators), i la seva aparença és la d’un quadre de comandament que presenta al professorat la probabilitat que un estudiant no aconsegueixi els objectius proposats en l’assignatura (figura 11). Per això, el sistema utilitza aprenentatge automàtic (machine learning) per efectuar prediccions setmanals sobre el risc que un estudiant superi o no la següent activitat d’aprenentatge de l’assignatura.

Figura 11. Quadre de comandament de l’eina EAI
Font: Open University

D’altra banda, l’eina EAI implementa també un model matemàtic regressiu que mostra prediccions a llarg termini sobre l’índex d’abandonament o nivell d’acompliment de l’estudiant.

Els resultats, després de la posada en pràctica de l’eina d’analítiques de l’aprenentatge, van ser molt positius. El professorat, que mai havia utilitzat l’eina, va mostrar índexs de satisfacció superiors a aquells que sí que l’utilitzaven, la qual cosa redunda en la gran aportació que realitzen les analítiques de l’aprenentatge en el camp de l’avaluació en línia. Aquesta percepció es basa en una mostra de 366 docents que van utilitzar EAI durant més de tres anys, per realitzar el seguiment dels estudiants i incrementar-ne la retenció basant-se en models predictius.

Cal destacar que un número significatiu de professorat no va usar l’eina EAI a causa de diversos factors, entre els quals destaca la falta de formació sobre l’ús de l’eina. És per això que és important que el professorat rebi una adequada capacitació sobre l’ús de les analítiques de l’aprenentatge i la manera d’interpretar-les. Una revisió més profunda dels factors que van influir l’adopció de l’eina EAI d’anàlisi predictiva per part del professorat va revelar que estava directament influenciada per una clara identificació i explicació del valor afegit que ofereixen les analítiques de l’aprenentatge, el disseny comprensiu dels quadres de comandament i el suport tècnic i metodològic que s’ofereix al professorat.