Summary

Eye-Tracking-Technologie und Data-Mining-Techniken für eine Verhaltensanalyse von Erwachsenen, die an Lernprozessen beteiligt sind

Published: June 10, 2021
doi:

Summary

Wir präsentieren ein Protokoll für eine Verhaltensanalyse von Erwachsenen (im Alter von 18 bis 70 Jahren), die an Lernprozessen beteiligt sind und Aufgaben für selbstreguliertes Lernen (SRL) übernehmen. Die Teilnehmer, Universitätslehrer und Studenten sowie Erwachsene der University of Experience wurden mit Eye-Tracking-Geräten überwacht und die Daten mit Data-Mining-Techniken analysiert.

Abstract

Die Verhaltensanalyse von Erwachsenen, die sich mit Lernaufgaben beschäftigen, ist eine große Herausforderung im Bereich der Erwachsenenbildung. Heutzutage besteht in einer Welt kontinuierlicher technologischer Veränderungen und wissenschaftlicher Fortschritte ein Bedarf an lebenslangem Lernen und Bildung sowohl in formalen als auch in nicht formalen Bildungsumgebungen. Als Reaktion auf diese Herausforderung bieten die Verwendung von Eye-Tracking-Technologie bzw. Data-Mining-Techniken für überwachtes (hauptsächlich Vorhersage) und unbeaufsichtigtes (speziell Clusteranalyse) Lernen Methoden zur Erkennung von Lernformen unter den Nutzern und/oder zur Klassifizierung ihrer Lernstile. In dieser Studie wird ein Protokoll für das Studium der Lernstile bei Erwachsenen mit und ohne Vorkenntnisse in verschiedenen Altersgruppen (18 bis 69 Jahre) und an verschiedenen Punkten während des Gesamten des Lernprozesses (Anfang und Ende) vorgeschlagen. Statistische Varianzanalysen bedeuten, dass Unterschiede zwischen den Teilnehmern nach Art des Lernenden und Vorkenntnissen der Aufgabe festgestellt werden können. Ebenso wirft der Einsatz unbeaufsichtigter Lernclustering-Techniken ein Licht auf ähnliche Formen des Lernens unter den Teilnehmern über verschiedene Gruppen hinweg. Alle diese Daten werden personalisierte Vorschläge des Lehrers für die Darstellung jeder Aufgabe an verschiedenen Punkten in der Kette der Informationsverarbeitung erleichtern. Ebenso wird es für den Lehrer einfacher sein, Unterrichtsmaterialien an die Lernbedürfnisse jedes Schülers oder jeder Schülergruppe mit ähnlichen Merkmalen anzupassen.

Introduction

Eye-Tracking-Methodik für Verhaltensanalysen im Lernen
Eye-Tracking-Methodik, unter anderem funktionelle Anwendungen, wird auf die Untersuchung des menschlichen Verhaltens angewendet, insbesondere während der Aufgabenauflösung. Diese Technik erleichtert die Überwachung und Analyse während der Ausführung von Lernaufgaben1. Insbesondere können die Aufmerksamkeitsstufen der Studierenden an verschiedenen Punkten des Lernprozesses (Start, Entwicklung und Ende) in verschiedenen Fächern (Geschichte, Mathematik, Naturwissenschaften usw.) mit Hilfe von Eye-Tracking-Technologie untersucht werden. Wenn die Aufgabe die Verwendung von Videos mit einer Stimme umfasst, die den Lernprozess leitet, wird selbstreguliertes Lernen (SRL) erleichtert. Daher wird die Implementierung der Eye-Tracking-Technologie bei der Analyse von Aufgaben, zu denen SRL (einschließlich der Verwendung von Videos) als eine wichtige Ressource vorgeschlagen wird, um zu verstehen, wie Lernen entwickelt wird2,3,4. Diese Kombination bedeutet auch, dass die Unterschiede zwischen den Unterrichtsmethoden (mit oder ohne SRL usw.) mit verschiedenen Arten von Schülern (mit oder ohne Vorkenntnisse usw.) überprüft werden können. 5. Im Gegensatz dazu kann die Darstellung von Mehrkanalinformationen (gleichzeitige Darstellung von akustischen und visuellen Informationen, ob mündlich, schriftlich oder bildlich) sowohl die Aufzeichnung als auch die Analyse relevanter und nicht relevanter Informationen aus den oben genannten Variablenerleichtern 6. Schüler mit Vorkenntnissen, die Multimedia-Lernkanälen ausgesetzt sind, scheinen effektiver zu lernen als Diejenigen mit wenig oder gar keinem Vorwissen. Studierende mit einem hohen Maß an Vorkenntnissen des Themas werden Text- und Grafische Informationen effektiver integrieren7. Diese Funktionalität wurde beim Erlernen vonTexten 8 beobachtet, die Bilder9enthalten. Die Eye-Tracking-Technologie bietet Informationen darüber, wo und wie lange die Aufmerksamkeit gerichtet ist. Diese Daten geben einen genaueren Einblick in die Entwicklung eines Lernprozesses als durch die einfache Beobachtung des Abwicklungsprozesses während der Ausführung einer Aufgabe. Die Analyse dieser Indikatoren erleichtert auch das Studium, ob der Student tiefes oder oberflächliches Lernen entwickelt. Darüber hinaus erleichtert die Beziehung zwischen diesen Daten und den Lernergebnissen die Validierung der mit der Eye-Tracking-Technologie erhaltenen Informationen4,10. Tatsächlich wird diese Technik zusammen mit SRL zunehmend in der Hochschulbildung und in der Erwachsenenbildung11 in Lernumgebungen eingesetzt, sowohl in regulierten als auch auf nicht regulierten Kursen12.

Die Eye-Tracking-Technologie bietet verschiedene Metriken: Distanz, Geschwindigkeit, Beschleunigung, Dichte, Dispersion, Winkelgeschwindigkeit, Übergänge zwischen Interessengebieten (AOI), Sequenziquenzreihenfolge von AOI, Besuche in den Fixierungen, Sakkaden, Scanpfad und Heatmap-Parameter. Die Interpretation dieser Daten ist jedoch komplex und erfordert die Verwendung von überwachten (Regression, Entscheidungsbäumen usw.) und unbeaufsichtigten (k-Mittel-Cluster-Techniken usw.) 13,14 Data-Mining-Techniken. Diese Metriken können für die Überwachung des Verhaltens desselben Probanden im Zeitverlauf oder für einen Vergleich zwischen mehreren Probanden und deren Leistung mit derselben Aufgabe15angewendet werden, indem der Unterschied zwischen Teilnehmern mit Vorkenntnissen und ohne Vorkenntnisse analysiert wird16. Jüngste Untersuchungen11,17 haben ergeben, dass sich unerfahrene Lehrlinge länger auf die Reize fixieren (d. h. es gibt eine größere Fixationshäufigkeit, während ähnliche Scan-Pfad-Muster aufgezeichnet werden). Die durchschnittliche Fixierungsdauer war für Experten länger als für Anfänger. Die Experten präsentierten ihren Fokus auf die Mittelpunkte der Information (proximal und zentral), Unterschiede, die auch in den Visualisierungspunkten innerhalb des AOI auf den Heatmaps zu sehen sind.

Interpretation von Metriken im Eye-Tracking
Jüngste Studien18 haben gezeigt, dass die Informationserfassung mit der Anzahl der Augenfixierungen auf den Reizen zusammenhängt. Eine weitere wichtige Metrik ist die Saccade, die als die schnelle und plötzliche Bewegung einer Fixierung mit einem Intervall von [10 ms, 100 ms] definiert ist. Sharafi et al. (2015)18 fanden Unterschiede in der Anzahl der Sakkaden, abhängig von der Informationscodierungsphase des Schülers. Ein weiterer relevanter Parameter ist der Scan-Pfad, eine Metrik, die die chronologische Reihenfolge der Schritte erfasst, die der Teilnehmer für die Auflösung der Lernaufgabe innerhalb des vom Forscher18definierten AOI ausführt. In ähnlicher Weise kann die Eye-Tracking-Technologie verwendet werden, um den Grad des Verständnisses des Teilnehmers vorherzusagen, der mit der Anzahl der Fixierungen zusammenhängen scheint. Jüngste Studien haben gezeigt, dass die Variabilität des Blickverhaltens durch die Eigenschaften des Bildes (Position, Intensität, Farbe und Ausrichtung), die Anweisungen zum Ausführen der Aufgabe und die Art der Informationsverarbeitung (Lernstil) des Teilnehmers bestimmt wird. Diese Unterschiede werden erkannt, indem die Interaktion des Schülers mit den verschiedenen AOI19analysiert wird. Quantitative20 (Frequenzanalyse) und/oder qualitative oder dynamische21 (Scanpfad) Techniken können verwendet werden, um die daten aus den verschiedenen Metriken zu analysieren. Die ersten Techniken werden mit traditionellen statistischen Techniken (Frequenzanalyse, Mittelwertdifferenz, Varianzdifferenz usw.) und letztere mit Machine Learning-Techniken (Euklidische Entfernungen mit String-Edit-Methoden21,22und Clustering17) analysiert. Die Anwendung dieser Techniken erleichtert das Clustering, indem verschiedene Merkmale der Probanden berücksichtigt werden. Eine Studie17 ergab, dass je sachkundiger der Student, desto effektiver die implementierte räumliche und zeitliche Informationsverarbeitungsstrategie ist. Eine beschreibende Tabelle der messparameter, die in dieser Studie verwendet wurden, finden Sie unten in Tabelle 1.

Tabelle 1: Die repräsentativsten Parameter, die mit der Eye-Tracking-Technik erhalten werden können, angepasst von Siz, Zaparain, Marticorena und Velasco (2019). 20   Bitte klicken Sie hier, um diese Tabelle herunterzuladen.

Anwendung der Eye-Tracking-Methodik auf das Studium des Lernprozesses
Der Einsatz der technologischen Fortschritte und deroben beschriebenen Datenanalysetechniken wird der Verhaltensanalyse der Lernenden bei der Problemlösung in den verschiedenen Phasen der Informationsverarbeitung (Aufgabenauslösung, Informationsverarbeitung und Aufgabenauflösung) eine höhere Genauigkeit verleihen. Es wird alles individuelle Verhaltensanalyse erleichtern, die wiederum die Gruppierung von Studenten mit ähnlichen Eigenschaften ermöglichen24. Ebenso Vorhersagetechniken (Entscheidungsbäume, Regressionstechniken usw.) 25 kann auf das Lernen angewendet werden, sowohl bezogen auf die Anzahl der Fixierungen als auch auf die Aufgabenauflösungsergebnisse jedes Schülers. Diese Funktionalität ist ein sehr wichtiger Fortschritt in der Kenntnis, wie jeder Schüler lernt und für den Vorschlag von personalisierten Lernprogrammen innerhalb verschiedener Gruppen (Menschen mit oder ohne Lernschwierigkeiten26). Daher wird der Einsatz dieser Technik zur Erreichung der Personalisierung und Optimierung des Lernens beitragen27. Lebenslanges Lernen muss als ein Kreislauf kontinuierlicher Verbesserung verstanden werden, da das Wissen über die Gesellschaft ständig voranschreitet und voranschreitet. Evolutionspsychologie zeigt, dass Auflösungsfähigkeiten und Effektivität in der Informationsverarbeitung mit dem Alter abnehmen. Insbesondere, Saccade Frequenz, Amplitude, und Geschwindigkeit der Augenbewegungen bei Erwachsenen wurden gefunden, um mit dem Alter zu verringern. Darüber hinaus konzentriert sich die Aufmerksamkeit im höheren Alter auf die unteren Bereiche visueller Szenen, was mit Defiziten im Arbeitsgedächtnis zusammenhängt14. Dennoch nimmt die Aktivierung in den frontalen und präfrontalen Bereichen in einem höheren Alter zu, was diese Defizite bei der Aufgabenauflösung zu kompensieren scheint. Dieser Aspekt umfasst den Grad des Vorwissens und die kognitiven Vergütungsstrategien, die das Thema anwenden kann. Erfahrene Teilnehmer lernen effizienter, da sie die Aufmerksamkeit durch die Anwendung automatisierter Überwachungsprozesse effektiver managen28. Darüber hinaus werden die oben genannten Mängel gemildert, wenn die zu erlernenden Informationen durch SRL-Techniken vermittelt werden17. Der Einsatz solcher Techniken bedeutet, dass visuelle Tracking-Muster sehr ähnlich sind, sowohl in Fächern ohne Vorkenntnisse als auch in Fächern mit Vorkenntnissen7.

Zusammenfassend ist die Analyse multimodal-multichannel-daten auf SRL, die mit dem Einsatz von advanced learning (Eye-Tracking)-Technologien gewonnen werden, der Schlüssel zum Verständnis der Wechselwirkung zwischen kognitiven, metakognitiven und motivationsorientierten Prozessen und deren Auswirkungen auf das Lernen29. Die Ergebnisse und die Untersuchung von Unterschieden im Lernen haben Auswirkungen auf die Gestaltung von Lernmaterialien und intelligenten Nachhilfesystemen, die beide personalisiertes Lernen ermöglichen werden, das für den Schüler30wahrscheinlich effektiver und zufriedenstellender sein wird.

In dieser Forschung wurden zwei Fragen gestellt: (1) Wird es signifikante Unterschiede in den Lernergebnissen und in den Ookfixierungsparametern zwischen Studenten und Experten und nicht-fachlichen Lehrern in Kunstgeschichte geben, die Studenten mit offiziellen Abschlüssen von Studenten mit nicht-offiziellen Abschlüssen (University of Experience – Adult Education) unterscheiden? und (2) Stimmen Cluster jedes Teilnehmers mit Lernergebnissen und Ookfixierungsparametern mit der Art der Teilnehmer zusammen (Studenten mit amtlichen Abschlüssen, Studierende mit nicht amtlichen Abschlüssen (Universität für Erfahrung – Erwachsenenbildung) und Lehrer)?

Protocol

Dieses Protokoll wurde in Übereinstimmung mit den Verfahrensvorschriften des Bioethischen Ausschusses der Universität Burgos (Spanien) Nr. IR27/2019 durchgeführt. Vor ihrer Teilnahme waren die Teilnehmer umfassend über die Forschungsziele informiert worden und hatten alle ihre informierte Zustimmung gegeben. Sie erhielten keinen finanziellen Ausgleich für ihre Beteiligung. 1. Teilnehmerrekrutierung Rekrutieren Sie Teilnehmer aus einer Gruppe von Erwachsenen in zwei Umgebungen (S…

Representative Results

Die 36 Teilnehmer, die für die vorliegende Studie rekrutiert wurden, stammten aus drei Gruppen von Erwachsenen (Studenten der Universität für Erfahrung, Universitätsprofessoren sowie Studenten und Masterstudierende) im Alter zwischen [18 und 69] Jahren (Tabelle 2). Das Protokoll wurde über 20 Monate an der Universität Burgos getestet. Ein Überblick über die Entwicklung ist Tabelle 4 zusehen. <p class="jove_content" fo:keep-together.within-page…

Discussion

Die Forschungsergebnisse zeigten, dass die durchschnittliche Fixationsdauer der relevanten Reize bei Teilnehmern mit Vorkenntnissen länger war. Ebenso liegt der Schwerpunkt dieser Gruppe auf den Mittelpunkten der Information (proximal und distal)7. Die Ergebnisse dieser Studie haben Unterschiede in der Art und Weise aufgezeigt, wie die Teilnehmer die Informationen verarbeitet haben. Darüber hinaus war ihre Verarbeitung nicht immer mit der anfänglichen Gruppierung (University of Experience Stude…

Offenlegungen

The authors have nothing to disclose.

Acknowledgements

Die Arbeit wurde im Rahmen des Projekts “Self-Regulated Learning in SmartArt Erasmus+ Adult Education” 2019-1-ES01-KA204-095615-Coordinator 6 entwickelt, das von der Europäischen Kommission finanziert wird. Das Video der Task-Abschlussphase hatte die vorherige informierte Zustimmung von Rut Velasco Séiz. Wir schätzen die Teilnahme von Lehrern und Schülern an der Aufgabenstellungsphase.

Materials

iViewer XTM iViewer
SMI Experimenter Center 3.0 SMI
SMI Be Gaze SMI

Referenzen

  1. van Marlen, T., van Wermeskerken, M., Jarodzka, H., van Gog, T. Effectiveness of eye movement modeling examples in problem solving: The role of verbal ambiguity and prior knowledge. Learning and Instruction. 58, 274-283 (2018).
  2. Taub, M., Azevedo, R., Bradbury, A. E., Millar, G. C., Lester, J. Using sequence mining to reveal the efficiency in scientific reasoning during STEM learning with a game-based learning environment. Learning and Instruction. 54, 93-103 (2018).
  3. Cloude, E. B., Taub, M., Lester, J., Azevedo, R., Isotani, S., Millan, E., Ogan, A., Hastings, P., McLaren, B., Luckin, R. The Role of Achievement Goal Orientation on Metacognitive Process Use in Game-Based Learning. Artificial Intelligence in Education. , 36-40 (2019).
  4. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  5. Sáiz-Manzanares, M. C., Rodríguez-Diez, J. J., Marticorena-Sánchez, R., Zaparín-Yáñez, M. J., Cerezo-Menéndez, R. Lifelong learning from sustainable education: An analysis with eye tracking and data mining techniques. Sustainability. 12 (5), 2-18 (2020).
  6. Alemdag, E., Cagiltay, K. A systematic review of eye tracking research on multimedia learning. Computers & Education. 125, 413-428 (2018).
  7. Ho, H. N. J., Tsai, M. -. J., Wang, C. -. Y., Tsai, C. -. C. Prior knowledge and online inquiry-based science reading: evidence from eye tracking. International Journal of Science and Mathematics Education. 12, 525-554 (2014).
  8. Catrysse, L., Gijbels, D., Donche, V. It is not only about the depth of processing: What if eye am not interested in the text. Learning and Instruction. 58, 284-294 (2018).
  9. Mayer, R. E. Using multimedia for e-learning. Journal of Computer Assisted Learning. 33 (5), 403-423 (2017).
  10. Prokop, M., Pilař, L., Tichá, I. Impact of think-aloud on eye-tracking: A comparison of concurrent and retrospective think-aloud for research on decision-making in the game environment. Sensors. 20 (10), (2020).
  11. DuMouchel, W., Abello, J., Pardalos, P. M., Resende, M. G. C. Data Squashing: Constructing Summary Data Sets. Handbook of Massive Data Sets. , 579-591 (2002).
  12. Stull, A. T., Fiorella, L., Mayer, R. E. An eye-tracking analysis of instructor presence in video lectures. Computers in Human Behavior. 88, 263-272 (2018).
  13. König, S. D., Buffalo, E. A. A nonparametric method for detecting fixations and saccades using cluster analysis: Removing the need for arbitrary thresholds. Journal of Neuroscience Methods. 30 (227), 121-131 (2014).
  14. Maltz, M., Shinar, D. Eye Movements of Younger and Older Drivers. Human Factors. 41 (1), 15-25 (1999).
  15. Burch, M., Kull, A., Weiskopf, D. AOI rivers for visualizing dynamic eye gaze frequencies. Computer Graphics Forum. 32 (3), 281-290 (2013).
  16. Dzeng, R. -. J., Lin, C. -. T., Fang, Y. -. C. Using eye-tracker to compare search patterns between experienced and novice workers for site hazard identification. Safety Science. 82, 56-67 (2016).
  17. Kurzhals, K., Weiskopf, D. Space-time visual analytics of eye-tracking data for dynamic stimuli. IEEE Transactions on Visualization and Computer Graphics. 19 (12), 2129-2138 (2013).
  18. Sharafi, Z., Soh, Z., Guéhéneuc, Y. -. G. A systematic literature review on the usage of eye-tracking in software engineering. Information and Software Technology. 67, 79-107 (2015).
  19. Dalrymple, K. A., Jiang, M., Zhao, Q., Elison, J. T. Machine learning accurately classifies age of toddlers based on eye tracking. Scientific Reports. 9 (1), 6255 (2019).
  20. Seifert, L., Cordier, R., Orth, D., Courtine, Y., Croft, J. L. Role of route previewing strategies on climbing fluency and exploratory movements. PLoS One. 12 (4), 1-22 (2017).
  21. Takeuchi, H., Habuchi, Y. A quantitative method for analyzing scan path data obtained by eye tracker. IEEE Symposium on Computational Intelligence and Data Mining, CIDM 2007. , 283-286 (2007).
  22. Takeuchi, H., Matsuda, N. Scan-path analysis by the string-edit method considering fixation duration. 6th International Conference on Soft Computing and Intelligent Systems, and 13th International Symposium on Advanced Intelligence Systems, SCIS/ISIS 2012. , 1724-1728 (2012).
  23. Sáiz, M. C., Marticorena, R., Anaiz, &. #. 1. 9. 3. ;., Zaparaín, M. J., Peralbo, M., Risso, A., Barca, A., Duarte, B., Almeda, L., Brenlla, J. C. Task analysis with eye tracking technology. srl at Smartart. II Congress of the International Scientific Association of Psychopedagogy Proceedings. , 4093-4104 (2019).
  24. Khedher, A. B., Jraidi, I., Frasson, C. Tracking Students’ Analytical Reasoning Using Visual Scan Paths. IEEE 17th International Conference on Advanced Learning Technologies (ICALT). , 53-54 (2017).
  25. Xia, C., Han, J., Qi, F., Shi, G. Predicting Human Saccadic Scanpaths Based on Iterative Representation Learning. IEEE Trans Image Process. 8 (7), 3502-3515 (2019).
  26. Cerezo, R., Fernández, E., Gómez, C., Sánchez-Santillán, M., Taub, M., Azevedo, R. Multimodal Protocol for Assessing Metacognition and Self-Regulation in Adults with Learning Difficulties. Journal of Visualized Experiments. , e60331 (2020).
  27. Scherer, R., Siddiq, F., Tondeur, J. The technology acceptance model (TAM): A meta-analytic structural equation modeling approach to explaining teachers’ adoption of digital technology in education. Computers & Education. 128 (0317), 13-35 (2019).
  28. Bruder, C., Eißfeldt, H., Maschke, P., Hasse, C. Differences in monitoring between experts and novices. Proceedings of the Human Factors and Ergonomics Society Annual Meeting. 57 (1), 295-298 (2013).
  29. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  30. Taub, M., Azevedo, R. How Does Prior Knowledge Influence Eye Fixations and Sequences of Cognitive and Metacognitive SRL Processes during Learning with an Intelligent Tutoring System. International Journal of Artificial Intelligence in Education. 29 (1), 1-28 (2019).
  31. IBM Corp. . SPSS Statistical Package for the Social Sciences (SPSS) (Version 24). , (2016).
  32. . Orange Software Package Available from: https://orange.biolab.si/docs/ (2020)

Play Video

Diesen Artikel zitieren
Sáiz Manzanares, M. C., Payo Hernanz, R. J., Zaparaín Yáñez, M. J., Andrés López, G., Marticorena Sánchez, R., Calvo Rodríguez, A., Martín, C., Rodríguez Arribas, S. Eye-tracking Technology and Data-mining Techniques used for a Behavioral Analysis of Adults engaged in Learning Processes. J. Vis. Exp. (172), e62103, doi:10.3791/62103 (2021).

View Video