Summary

Tecnologia di tracciamento oculare e tecniche di data mining utilizzate per un'analisi comportamentale degli adulti impegnati nei processi di apprendimento

Published: June 10, 2021
doi:

Summary

Presentiamo un protocollo per un’analisi comportamentale degli adulti (dai 18 ai 70 anni) impegnati in processi di apprendimento, svolgendo compiti progettati per l’apprendimento autoregolato (SRL). I partecipanti, i docenti universitari e gli studenti, e gli adulti dell’Università dell’Esperienza, sono stati monitorati con dispositivi di tracciamento oculare e i dati sono stati analizzati con tecniche di data mining.

Abstract

L’analisi comportamentale degli adulti impegnati in compiti di apprendimento è una sfida importante nel campo dell’educazione degli adulti. Al giorno d’oggi, in un mondo di continui cambiamenti tecnologici e progressi scientifici, c’è bisogno di apprendimento e istruzione per tutta la vita in ambienti educativi sia formali che non formali. In risposta a questa sfida, l’uso della tecnologia di tracciamento oculare e delle tecniche di data mining, rispettivamente, per l’apprendimento supervisionato (principalmente previsione) e non supervisionato (in particolare l’analisi dei cluster), fornisce metodi per il rilevamento di forme di apprendimento tra gli utenti e / o la classificazione dei loro stili di apprendimento. In questo studio, viene proposto un protocollo per lo studio degli stili di apprendimento tra adulti con e senza conoscenze precedenti a diverse età (dai 18 ai 69 anni) e in diversi punti durante tutto il processo di apprendimento (inizio e fine). Le tecniche di analisi statistica della varianza fanno sì che possano essere rilevate differenze tra i partecipanti per tipo di discente e conoscenza precedente del compito. Allo stesso modo, l’uso di tecniche di clustering di apprendimento non supervisionate getta luce su forme simili di apprendimento tra i partecipanti in diversi gruppi. Tutti questi dati faciliteranno le proposte personalizzate del docente per la presentazione di ogni compito in diversi punti della catena del trattamento delle informazioni. Sarà inoltre più facile per il docente adattare il materiale didattico alle esigenze di apprendimento di ogni studente o gruppo di studenti con caratteristiche simili.

Introduction

Metodologia di tracciamento oculare applicata all’analisi comportamentale nell’apprendimento
La metodologia di tracciamento oculare, tra gli altri usi funzionali, viene applicata allo studio del comportamento umano, in particolare durante la risoluzione delle attività. Questa tecnica facilita il monitoraggio e l’analisi durante il completamento dei compiti di apprendimento1. Nello specifico, i livelli di attenzione degli studenti in diversi punti del processo di apprendimento (inizio, sviluppo e fine) in diverse materie (Storia, Matematica, Scienze, ecc.) possono essere studiati con l’uso della tecnologia di tracciamento oculare. Inoltre, se l’attività include l’uso di video con una voce che guida il processo di apprendimento, l’apprendimento autoregolato (SRL) è facilitato. Pertanto, l’implementazione della tecnologia di eye-tracking nell’analisi dei compiti a cui SRL (che include l’uso di video) viene proposta come risorsa significativa per capire come viene sviluppatol’apprendimento 2,3,4. Questa combinazione significherà anche che le differenze tra i metodi didattici (con o senza SRL, ecc.) possono essere verificate con diversi tipi di studenti (con o senza conoscenze precedenti, ecc.) 5. Al contrario, la presentazione di informazioni multicanale (presentazione simultanea di informazioni sia uditivo che visive, verbali, scritte o pittoriche) può facilitare sia la registrazione che l’analisi di informazioni pertinenti rispetto a quelle non pertinenti delle variabili sopra menzionate6. Gli studenti con conoscenze precedenti esposte ai canali di apprendimento multimediale sembrano imparare in modo più efficace rispetto a quelli con poca o nessuna conoscenza precedente. Gli studenti con alti livelli di conoscenza preliminare della materia integreranno più efficacemente le informazioni testuali e grafiche7. Questa funzionalità è stata osservata nell’apprendimento dei testi8 che includono immagini9. La tecnologia di tracciamento oculare offre informazioni su dove si concentra l’attenzione e per quanto tempo. Questi dati forniscono informazioni sullo sviluppo di un processo di apprendimento in modo più preciso che attraverso la semplice osservazione del processo di risoluzione durante il completamento di un compito. Inoltre, l’analisi di questi indicatori facilita lo studio se lo studente sviluppa un apprendimento profondo o superficiale. Inoltre, il rapporto tra questi dati e i risultati di apprendimento facilita la validazione delle informazioni ottenute con la tecnologia ditracciamento oculare 4,10. Infatti, questa tecnica insieme a SRL sono sempre più utilizzate nell’Istruzione Superiore e negliambienti di apprendimento dell’Educazione degli Adulti 11, sia sui corsi regolamentati che su corsi nonregolamentati 12.

La tecnologia di tracciamento oculare offre diverse metriche: distanza, velocità, accelerazione, densità, dispersione, velocità angolare, transizioni tra aree di interesse (AOI), ordine sequenziale di AOI, visite nelle fissazioni, saccadi, percorso di scansione e parametri della mappa termica. Tuttavia, l’interpretazione di questi dati è complessa e richiede l’uso di supervisionati (regressione, alberi decisionali, ecc.) e non supervisionati (tecniche di cluster k-means, ecc.) 13,14 tecniche di data mining. Queste metriche possono essere applicate per monitorare il comportamento dello stesso soggetto nel tempo o per un confronto tra più soggetti e le loro prestazioni con lastessa attività 15, analizzando la differenza tra partecipanti con conoscenze precedenti rispetto a nessuna conoscenzaprecedente 16. Recenti ricerche11,17 hanno rivelato che gli apprendisti alle prime armi si fissano più a lungo sugli stimoli (cioè, c’è una maggiore frequenza di fissazione mentre vengono registrati modelli di percorso di scansione simili). La durata media della fissazione è stata più lunga per gli esperti che per i principianti. Gli esperti hanno presentato il loro focus di attenzione sui punti centrali delle informazioni (prossimali e centrali), differenze che possono essere viste anche nei punti di visualizzazione all’interno dell’AOI sulle mappe di calore.

Interpretazione delle metriche nel tracciamento oculare
Recenti studi18 hanno indicato che l’acquisizione di informazioni è correlata al numero di fissazioni oculari sugli stimoli. Un’altra metrica importante è la saccade, che è definita come il movimento rapido e improvviso di una fissazione con un intervallo di [10 ms, 100 ms]. (2015)18 hanno riscontrato differenze nel numero di saccadi, a seconda della fase di codifica delle informazioni dello studente. Un altro parametro rilevante è il percorso di scansione, una metrica che acquisisce l’ordine cronologico dei passaggi che il partecipante esegue per la risoluzione dell’attività di apprendimento all’interno dell’AOI definito dal ricercatore18. Allo stesso modo, la tecnologia di tracciamento oculare può essere utilizzata per prevedere il livello di comprensione del partecipante, che sembra essere correlato al numero di fissazioni. Studi recenti hanno indicato che la variabilità nel comportamento dello sguardo è determinata dalle proprietà dell’immagine (posizione, intensità, colore e orientamento), dalle istruzioni per eseguire l’attività e dal tipo di elaborazione delle informazioni (stile di apprendimento) del partecipante. Queste differenze vengono rilevate analizzando l’interazione dello studente con i diversi AOI19. Letecniche quantitative 20 (analisi delle frequenze) e/o qualitativeo dinamiche 21 (percorso di scansione) possono essere utilizzate per analizzare i dati raccolti dalle diverse metriche. Le prime tecniche vengono analizzate con tecniche statistiche tradizionali (analisi delle frequenze, differenza media, differenza di varianza, ecc.) e le ultime vengono analizzate con tecniche di Machine Learning (distanze euclidee con metodi di modificadelle stringhe 21,22e clustering17). L’applicazione di queste tecniche facilita il raggruppamento, considerando le diverse caratteristiche dei soggetti. Uno studio17 ha rilevato che più lo studente è esperto, più efficace è la strategia di elaborazione delle informazioni spaziali e temporali implementata. Una tabella descrittiva dei parametri di misurazione utilizzati nel presente studio può essere consultata qui di seguito nella tabella 1.

Tabella 1: Parametri più rappresentativi che possono essere ottenuti con la tecnica di tracciamento oculare, adattati da Sáiz, Zaparaín, Marticorena e Velasco (2019). 20 di cui: La commissione per l’   Clicca qui per scaricare questa Tabella.

Applicazione della metodologia di tracciamento oculare allo studio del processo di apprendimento
L’uso dei progressi tecnologici e delle tecniche di analisi dei dati sopradescritte 5 aggiungerà maggiore precisione all’analisi comportamentale degli studenti durante la risoluzione dei problemi nelle diverse fasi dell’elaborazione delle informazioni (avvio delle attività, elaborazione delle informazioni e risoluzione delle attività). Tutto faciliterà l’analisi comportamentale individuale, che a sua volta consentirà il raggruppamento di studenti con caratteristiche simili24. Allo stesso modo, tecniche predittive (alberi decisionali, tecniche di regressione, ecc.) 25 può essere applicato all’apprendimento, relativo sia al numero di fissazioni che ai risultati di risoluzione delle attività di ogni studente. Questa funzionalità è un progresso molto importante nella conoscenza di come ogni studente impara e per la proposta di programmi di apprendimento personalizzati all’interno di diversi gruppi (persone con o senza difficoltà di apprendimento26). Pertanto, l’uso di questa tecnica contribuirà al raggiungimento della personalizzazione e dell’ottimizzazionedell’apprendimento 27. L’apprendimento lungo tutto l’arco della vita deve essere inteso come un ciclo di miglioramento continuo, poiché la conoscenza della società avanza e progredisce costantemente. La psicologia evolutiva indica che le capacità di risoluzione e l’efficacia nell’elaborazione delle informazioni diminuiscono con l’età. In particolare, la frequenza saccade, l’ampiezza e la velocità dei movimenti oculari tra gli adulti sono state trovate a diminuire con l’età. Inoltre, in età avanzata, l’attenzione è focalizzata sulle aree inferiori delle scene visive, che è correlata a deficit nella memoria di lavoro14. Tuttavia, l’attivazione aumenta nelle aree frontali e prefrontali in età avanzata, il che sembra compensare questi deficit nella risoluzione dei compiti. Questo aspetto include il livello di conoscenze precedenti e le strategie di compensazione cognitiva che il soggetto può applicare. I partecipanti esperti imparano in modo più efficiente, poiché gestiscono l’attenzione in modo più efficace, grazie all’applicazione di processi di supervisioneautomatizzati 28. Inoltre, se le informazioni da appresa vengono impartite attraverso tecniche SRL, le suddette carenze sono mitigate17. L’uso di tali tecniche significa che i modelli di tracciamento visivo sono molto simili, sia in soggetti senza conoscenze prescie presci e in materie con conoscenzeprecedenti 7.

In sintesi, l’analisi dei dati multimodali-multicanale su SRL ottenuti con l’utilizzo di tecnologie avanzate di apprendimento (eye-tracking) è fondamentale per comprendere l’interazione tra processi cognitivi, metacognitivi e motivazionali, e il loro impattosull’apprendimento 29. I risultati e lo studio delle differenze nell’apprendimento hanno implicazioni per la progettazione di materiali didattici e sistemi di tutoraggio intelligenti, che consentiranno entrambi un apprendimento personalizzato che sarà probabilmente più efficace e soddisfacente per lostudente 30.

In questa ricerca sono state poste due domande di indagine: (1) Ci saranno differenze significative nei risultati di apprendimento e nei parametri di fissazione oculare tra studenti e insegnanti esperti rispetto a quelli non esperti in Storia dell’Arte differenziando gli studenti con lauree ufficiali rispetto agli studenti con lauree non ufficiali (Università di esperienza – educazione degli adulti)? e (2) I cluster di ciascun partecipante con risultati di apprendimento e parametri di fissazione oculare coincideranno con il tipo di partecipanti (studenti con lauree ufficiali, studenti con lauree non ufficiali (Università dell’esperienza – istruzione degli adulti) e insegnanti)?

Protocol

Questo protocollo è stato eseguito nel rispetto delle norme procedurali del Comitato Bioetico dell’Università di Burgos (Spagna) nº Nº IR27/2019. Prima della loro partecipazione, i partecipanti erano stati pienamente consapevoli degli obiettivi della ricerca e avevano tutti fornito il loro consenso informato. Non hanno ricevuto alcuna compensazione finanziaria per la loro partecipazione. 1. Reclutamento dei partecipanti Recluta partecipanti tra un gruppo di adulti all’interno di …

Representative Results

I 36 partecipanti reclutati per il presente studio provengono da tre gruppi di adulti (studenti dell’università di esperienza, professori universitari e studenti universitari e di laurea magistrale) con età compresa tra i 18 e i 69 anni(tabella 2). Il protocollo è stato testato per oltre 20 mesi presso l’Università di Burgos. Una descrizione dello sviluppo è riportata nella tabella 4. <stro…

Discussion

I risultati della ricerca hanno indicato che la durata media di fissazione degli stimoli pertinenti era più lunga tra i partecipanti con conoscenze precedenti. Allo stesso modo, l’attenzione su questo gruppo è rivolta ai punti intermedi dell’informazione (prossimale e distale)7. I risultati di questo studio hanno rivelato differenze nel modo in cui i partecipanti hanno elaborato le informazioni. Inoltre, la loro elaborazione non è sempre stata legata al raggruppamento iniziale (Studenti dell’Un…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Il lavoro è stato sviluppato nell’ambito del progetto “Self-Regulated Learning in SmartArt Erasmus+ Adult Education” 2019-1-ES01-KA204-095615-Coordinator 6, finanziato dalla Commissione Europea. Il video della fase di completamento del compito aveva il previo consenso informato di Rut Velasco Sáiz. Apprezziamo la partecipazione di insegnanti e studenti alla fase di implementazione del compito.

Materials

iViewer XTM iViewer
SMI Experimenter Center 3.0 SMI
SMI Be Gaze SMI

References

  1. van Marlen, T., van Wermeskerken, M., Jarodzka, H., van Gog, T. Effectiveness of eye movement modeling examples in problem solving: The role of verbal ambiguity and prior knowledge. Learning and Instruction. 58, 274-283 (2018).
  2. Taub, M., Azevedo, R., Bradbury, A. E., Millar, G. C., Lester, J. Using sequence mining to reveal the efficiency in scientific reasoning during STEM learning with a game-based learning environment. Learning and Instruction. 54, 93-103 (2018).
  3. Cloude, E. B., Taub, M., Lester, J., Azevedo, R., Isotani, S., Millan, E., Ogan, A., Hastings, P., McLaren, B., Luckin, R. The Role of Achievement Goal Orientation on Metacognitive Process Use in Game-Based Learning. Artificial Intelligence in Education. , 36-40 (2019).
  4. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  5. Sáiz-Manzanares, M. C., Rodríguez-Diez, J. J., Marticorena-Sánchez, R., Zaparín-Yáñez, M. J., Cerezo-Menéndez, R. Lifelong learning from sustainable education: An analysis with eye tracking and data mining techniques. Sustainability. 12 (5), 2-18 (2020).
  6. Alemdag, E., Cagiltay, K. A systematic review of eye tracking research on multimedia learning. Computers & Education. 125, 413-428 (2018).
  7. Ho, H. N. J., Tsai, M. -. J., Wang, C. -. Y., Tsai, C. -. C. Prior knowledge and online inquiry-based science reading: evidence from eye tracking. International Journal of Science and Mathematics Education. 12, 525-554 (2014).
  8. Catrysse, L., Gijbels, D., Donche, V. It is not only about the depth of processing: What if eye am not interested in the text. Learning and Instruction. 58, 284-294 (2018).
  9. Mayer, R. E. Using multimedia for e-learning. Journal of Computer Assisted Learning. 33 (5), 403-423 (2017).
  10. Prokop, M., Pilař, L., Tichá, I. Impact of think-aloud on eye-tracking: A comparison of concurrent and retrospective think-aloud for research on decision-making in the game environment. Sensors. 20 (10), (2020).
  11. DuMouchel, W., Abello, J., Pardalos, P. M., Resende, M. G. C. Data Squashing: Constructing Summary Data Sets. Handbook of Massive Data Sets. , 579-591 (2002).
  12. Stull, A. T., Fiorella, L., Mayer, R. E. An eye-tracking analysis of instructor presence in video lectures. Computers in Human Behavior. 88, 263-272 (2018).
  13. König, S. D., Buffalo, E. A. A nonparametric method for detecting fixations and saccades using cluster analysis: Removing the need for arbitrary thresholds. Journal of Neuroscience Methods. 30 (227), 121-131 (2014).
  14. Maltz, M., Shinar, D. Eye Movements of Younger and Older Drivers. Human Factors. 41 (1), 15-25 (1999).
  15. Burch, M., Kull, A., Weiskopf, D. AOI rivers for visualizing dynamic eye gaze frequencies. Computer Graphics Forum. 32 (3), 281-290 (2013).
  16. Dzeng, R. -. J., Lin, C. -. T., Fang, Y. -. C. Using eye-tracker to compare search patterns between experienced and novice workers for site hazard identification. Safety Science. 82, 56-67 (2016).
  17. Kurzhals, K., Weiskopf, D. Space-time visual analytics of eye-tracking data for dynamic stimuli. IEEE Transactions on Visualization and Computer Graphics. 19 (12), 2129-2138 (2013).
  18. Sharafi, Z., Soh, Z., Guéhéneuc, Y. -. G. A systematic literature review on the usage of eye-tracking in software engineering. Information and Software Technology. 67, 79-107 (2015).
  19. Dalrymple, K. A., Jiang, M., Zhao, Q., Elison, J. T. Machine learning accurately classifies age of toddlers based on eye tracking. Scientific Reports. 9 (1), 6255 (2019).
  20. Seifert, L., Cordier, R., Orth, D., Courtine, Y., Croft, J. L. Role of route previewing strategies on climbing fluency and exploratory movements. PLoS One. 12 (4), 1-22 (2017).
  21. Takeuchi, H., Habuchi, Y. A quantitative method for analyzing scan path data obtained by eye tracker. IEEE Symposium on Computational Intelligence and Data Mining, CIDM 2007. , 283-286 (2007).
  22. Takeuchi, H., Matsuda, N. Scan-path analysis by the string-edit method considering fixation duration. 6th International Conference on Soft Computing and Intelligent Systems, and 13th International Symposium on Advanced Intelligence Systems, SCIS/ISIS 2012. , 1724-1728 (2012).
  23. Sáiz, M. C., Marticorena, R., Anaiz, &. #. 1. 9. 3. ;., Zaparaín, M. J., Peralbo, M., Risso, A., Barca, A., Duarte, B., Almeda, L., Brenlla, J. C. Task analysis with eye tracking technology. srl at Smartart. II Congress of the International Scientific Association of Psychopedagogy Proceedings. , 4093-4104 (2019).
  24. Khedher, A. B., Jraidi, I., Frasson, C. Tracking Students’ Analytical Reasoning Using Visual Scan Paths. IEEE 17th International Conference on Advanced Learning Technologies (ICALT). , 53-54 (2017).
  25. Xia, C., Han, J., Qi, F., Shi, G. Predicting Human Saccadic Scanpaths Based on Iterative Representation Learning. IEEE Trans Image Process. 8 (7), 3502-3515 (2019).
  26. Cerezo, R., Fernández, E., Gómez, C., Sánchez-Santillán, M., Taub, M., Azevedo, R. Multimodal Protocol for Assessing Metacognition and Self-Regulation in Adults with Learning Difficulties. Journal of Visualized Experiments. , e60331 (2020).
  27. Scherer, R., Siddiq, F., Tondeur, J. The technology acceptance model (TAM): A meta-analytic structural equation modeling approach to explaining teachers’ adoption of digital technology in education. Computers & Education. 128 (0317), 13-35 (2019).
  28. Bruder, C., Eißfeldt, H., Maschke, P., Hasse, C. Differences in monitoring between experts and novices. Proceedings of the Human Factors and Ergonomics Society Annual Meeting. 57 (1), 295-298 (2013).
  29. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  30. Taub, M., Azevedo, R. How Does Prior Knowledge Influence Eye Fixations and Sequences of Cognitive and Metacognitive SRL Processes during Learning with an Intelligent Tutoring System. International Journal of Artificial Intelligence in Education. 29 (1), 1-28 (2019).
  31. IBM Corp. . SPSS Statistical Package for the Social Sciences (SPSS) (Version 24). , (2016).
  32. . Orange Software Package Available from: https://orange.biolab.si/docs/ (2020)

Play Video

Cite This Article
Sáiz Manzanares, M. C., Payo Hernanz, R. J., Zaparaín Yáñez, M. J., Andrés López, G., Marticorena Sánchez, R., Calvo Rodríguez, A., Martín, C., Rodríguez Arribas, S. Eye-tracking Technology and Data-mining Techniques used for a Behavioral Analysis of Adults engaged in Learning Processes. J. Vis. Exp. (172), e62103, doi:10.3791/62103 (2021).

View Video