Summary

Eye-tracking teknologi og data-mining teknikker, der anvendes til en adfærdsmæssig analyse af voksne, der beskæftiger sig med læringsprocesser

Published: June 10, 2021
doi:

Summary

Vi præsenterer en protokol for en adfærdsanalyse af voksne (i alderen 18 til 70 år), der beskæftiger sig med læringsprocesser, og udfører opgaver designet til selvregulerende læring (SRL). Deltagerne, universitetslærere og studerende og voksne fra University of Experience blev overvåget med eye-tracking-enheder, og dataene blev analyseret med dataminingteknikker.

Abstract

Adfærdsanalyse af voksne, der beskæftiger sig med læringsopgaver, er en stor udfordring inden for voksenuddannelse. I dag er der i en verden med vedvarende teknologiske forandringer og videnskabelige fremskridt behov for livslang læring og uddannelse i både formelle og ikke-formelle uddannelsesmiljøer. Som svar på denne udfordring giver brugen af henholdsvis eye-tracking-teknologi og dataminingteknikker til overvåget (hovedsagelig forudsigelse) og uovervåget (specifikt klyngeanalyse) læring metoder til påvisning af læringsformer blandt brugerne og/eller klassificering af deres læringsstile. I denne undersøgelse foreslås en protokol for undersøgelse af læringsstile blandt voksne med og uden tidligere viden i forskellige aldre (18 til 69-årige) og på forskellige tidspunkter i hele læringsprocessen (start og slut). Statistiske variansanalyseteknikker betyder, at der kan påvises forskelle mellem deltagerne efter elevtype og tidligere kendskab til opgaven. På samme måde kaster brugen af uovervågede læringsklyngeteknikker lys over lignende former for læring blandt deltagerne på tværs af forskellige grupper. Alle disse data vil lette personlige forslag fra læreren til præsentation af hver opgave på forskellige punkter i kæden af informationsbehandling. Det vil ligeledes være lettere for læreren at tilpasse undervisningsmaterialet til læringsbehovene hos hver elev eller gruppe af studerende med lignende karakteristika.

Introduction

Eye-tracking metode anvendes til adfærdsanalyse i læring
Eye-tracking metode, blandt andre funktionelle anvendelser, anvendes til studiet af menneskelig adfærd, specielt under opgaveløsning. Denne teknik letter overvågning og analyse under udførelsen af læringsopgaver1. Specifikt kan opmærksomhedsniveauerne for studerende på forskellige punkter i læringsprocessen (start, udvikling og slut) i forskellige (historie, matematik, videnskab osv.) studeres ved hjælp af eye-tracking-teknologi. Hvis opgaven omfatter brug af videoer med en stemme, der styrer læringsprocessen, lettes selvregulerende læring (SRL). Derfor foreslås implementeringen af eye-tracking-teknologi i analysen af opgaver, som SRL (der omfatter brugen af videoer) som en betydelig ressource til at forstå, hvordan læring udvikles2,3,4. Denne kombination vil også betyde, at forskellene mellem undervisningsmetoder (med eller uden SRL osv.) kan kontrolleres med forskellige typer studerende (med eller uden forudgående viden osv.) 5.I modsætning hertil kan præsentationen af multikanaloplysninger (samtidig præsentation af både auditive og visuelle oplysninger, hvad enten de er verbale, skriftlige eller billedlige) lette både registreringen og analysen af relevante versus ikke-relevante oplysninger fra ovennævnte variabler6. Studerende med forudgående viden, der udsættes for multimedielæringskanaler, ser ud til at lære mere effektivt end dem med ringe eller ingen forudgående viden. Studerende med et højt niveau af forudgående kendskab til emnet vil integrere tekstuel og grafisk information mere effektivt7. Denne funktionalitet er blevet observeret i indlæringen af tekst8, der indeholder billeder9. Eye-tracking teknologi tilbyder information om, hvor opmærksomheden er fokuseret og hvor længe. Disse data giver indsigt i udviklingen af en læringsproces på en mere præcis måde end gennem den enkle observation af afviklingsprocessen under afslutningen af en opgave. Analysen af disse indikatorer letter også undersøgelsen af, om den studerende udvikler dyb eller overfladisk læring. Desuden letter forholdet mellem disse data og læringsresultaterne valideringen af de oplysninger , der er opnået med eye-tracking-teknologi4,10. Faktisk anvendes denne teknik sammen med SRL i stigende grad i videregående uddannelser og i voksenuddannelse11 læringsmiljøer, både på regulerede og ikke-regulerede kurser12.

Eye-tracking teknologi tilbyder forskellige målinger: afstand, hastighed, acceleration, tæthed, spredning, vinkelhastighed, overgange mellem områder af interesse (AOI), sekventiel rækkefølge af AOI, besøg i fikseringer, saccades, scanne sti og varmekort parametre. Fortolkningen af disse data er imidlertid kompleks og kræver brug af overvågede (regression, beslutningstræer osv.) og uden opsyn (k-means klyngeteknikker osv.) 13,14 data-mining teknikker. Disse målinger kan anvendes til overvågning af samme emnes opførsel over tid eller til sammenligning mellem flere emner og deres præstationer med samme opgave15ved at analysere forskellen mellem deltagere med tidligere viden versus ingen tidligere viden16. Nyere forskning11,17 har afsløret, at nybegyndere lærlinge fiksere længere på stimuli (dvs. der er en større fiksering frekvens, mens lignende scan-sti mønstre er registreret). Den gennemsnitlige varighed af fiksering var længere for eksperter end for nybegyndere. Eksperterne præsenterede deres fokus på de midterste punkter i informationen (proksimale og centrale), forskelle, der også kan ses i visualiseringspunkterne i AOI på varmekortene.

Fortolkning af målinger i eye tracking
Nylige undersøgelser18 har vist, at informationserhvervelse er relateret til antallet af okulære fikseringer på stimuli. En anden vigtig metrikværdi er saccaden, der defineres som den hurtige og pludselige bevægelse af en fiksering med et interval på [10 ms, 100 ms]. Sharafi et al. (2015)18 fandt forskelle i antallet af saccades, afhængigt af den studerendes informationskodningsfase. En anden relevant parameter er scanningsstien, en metrikværdi, der registrerer den kronologiske rækkefølge af de trin, som deltageren udfører for løsningen af læringsopgaven inden for AOI defineret af forskeren18. På samme måde kan eye-tracking-teknologi bruges til at forudsige deltagerens forståelsesniveau, som ser ud til at være relateret til antallet af fikseringer. Nylige undersøgelser har vist, at variation i blikadfærd bestemmes af billedets egenskaber (position, intensitet, farve og orientering), instruktionerne til udførelse af opgaven og deltagerens type informationsbehandling (læringsstil). Disse forskelle opdages ved at analysere den studerendes interaktion med de forskellige AOI19. Kvantitative20 (frekvensanalyse) og/eller kvalitative eller dynamiske21 (scanningssti) teknikker kan bruges til at analysere de data, der er indsamlet fra de forskellige målinger. De tidligere teknikker analyseres med traditionelle statistiske teknikker (frekvensanalyse, middelforskel, variansforskel osv.), og sidstnævnte analyseres med maskinlæringsteknikker (euklidiske afstande med strengredigeringsmetoder21,22og klyngedannelse17). Anvendelsen af disse teknikker letter klyngedannelse ved at overveje forskellige karakteristika ved emnerne. En undersøgelse17 viste, at jo mere ekspert den studerende, jo mere effektiv den rumlige og tidsmæssige informationsbehandling strategi, der gennemføres. En beskrivende tabel over de måleparametre , der blev anvendt i denne undersøgelse , kan konsulteres nedenfor i tabel 1.

Tabel 1: Mest repræsentative parametre, der kan opnås med eye-tracking-teknikken, tilpasset fra Sáiz, Zaparaín, Marticorena og Velasco (2019). 20 år   Klik her for at hente denne tabel.

Anvendelse af eye-tracking-metoden til studiet af læringsprocessen
Brugen af de teknologiske fremskridt og de dataanalyseteknikker, der er beskrevetovenfor 5, vil tilføje større præcision til adfærdsanalyse af elever under problemløsning i de forskellige faser af informationsbehandling (opgavestart, informationsbehandling og opgaveløsning). Det vil alle lette individuel adfærdsanalyse, hvilket igen vil tillade gruppering af studerende med lignende egenskaber24. Ligeledes prædiktive teknikker (beslutning træer, regression teknikker, osv.) 25 kan anvendes til læring, både relateret til antallet af fikseringer og til hver elevs opgaveløsningsresultater. Denne funktionalitet er et meget vigtigt fremskridt i kendskabet til, hvordan den enkelte studerende lærer, og til forslaget om personlige læringsprogrammer inden for forskellige grupper (personer med eller uden indlæringsvanskeligheder26). Derfor vil brugen af denne teknik bidrage til opnåelse af personalisering og optimering af læring27. Livslang læring skal forstås som en cyklus af løbende forbedringer, da samfundets viden hele tiden udvikler sig og skrider frem. Evolutionær psykologi indikerer, at opløsningsevner og effektivitet i informationsbehandling falder med alderen. Specifikt har saccadefrekvens, amplitude og hastighed af øjenbevægelser blandt voksne vist sig at falde med alderen. Derudover er opmærksomheden i ældre aldre fokuseret på de lavere områder af visuelle scener, som er relateret til underskud i arbejdshukommelsen14. Ikke desto mindre stiger aktiveringen i de frontale og præfrontale områder i en ældre alder, hvilket synes at kompensere for disse underskud i opgaveløsning. Dette aspekt omfatter niveauet af tidligere viden og de kognitive kompensationsstrategier, som emnet kan anvende. Erfarne deltagere lærer mere effektivt, da de styrer opmærksomheden mere effektivt på grund af anvendelsen af automatiserede tilsynsprocesser28. Hvis de oplysninger, der skal læres, videregives gennem SRL-teknikker, afhjælpes ovennævnte manglerdesuden 17. Brugen af sådanne teknikker betyder, at visuelle sporingsmønstre er meget ens, både i uden forudgående viden og i med forudgående viden7.

Sammenfattende er analysen af multimodale multikanaldata om SRL opnået ved hjælp af avancerede læringsteknologier (eye-tracking) nøglen til at forstå samspillet mellem kognitive, metakognitive og motiverende processer og deres indvirkning på læring29. Resultaterne og studiet af forskelle i læring har konsekvenser for udformningen af undervisningsmaterialer og intelligente vejledningssystemer, som begge vil muliggøre personlig læring, der sandsynligvis vil være mere effektiv og tilfredsstillende for den studerende30.

I denne forskning blev der stillet to undersøgelsesspørgsmål: (1) Vil der være betydelige forskelle i læringsresultaterne og i de okulære fikseringsparametre mellem studerende og ekspert versus ikke-ekspertlærere i kunsthistorie, der differentierer studerende med officielle grader versus studerende med ikke-officielle grader (University of Experience – Voksenuddannelse)? og (2) Vil klynger af hver deltager med læringsresultater og okulære fikseringsparametre falde sammen med typen af deltagere (studerende med officielle grader, studerende med ikke-officielle grader (University of Experience – Voksenuddannelse) og lærere)?

Protocol

Denne protokol blev udført i overensstemmelse med procedurereglerne fra bioetisk udvalg ved universitetet i Burgos (Spanien) nº Nº IR27/2019. Forud for deres deltagelse var deltagerne blevet gjort fuldt ud opmærksomme på forskningsmålene og havde alle givet deres informerede samtykke. De modtog ingen økonomisk kompensation for deres deltagelse. 1. Rekruttering af deltagere Rekruttere deltagere blandt en gruppe voksne inden for to miljøer (studerende og lærere) med en aldersg…

Representative Results

De 36 deltagere, der blev rekrutteret til denne undersøgelse, var fra tre grupper af voksne (studerende fra erfaringsuniversitetet, universitetsprofessorer og bachelor- og kandidatstuderende) med alderen mellem [18 og 69] år(tabel 2). Protokollen blev testet over 20 måneder på universitetet i Burgos. Tabel 4indeholder en oversigt over udviklingen . Tabel 4 . Oversigt over udviklingen…

Discussion

Forskningsresultaterne viste, at den gennemsnitlige fikseringsvarighed på de relevante stimuli var længere blandt deltagere med tidligere viden. Ligeledes er fokus på denne gruppe på de midterste informationspunkter (proksimale og distale)7. Resultaterne af denne undersøgelse har afsløret forskelle i den måde, deltagerne behandlede oplysningerne på. Desuden var deres behandling ikke altid knyttet til den oprindelige gruppering (University of Experience Students, University Teachers og Grad…

Offenlegungen

The authors have nothing to disclose.

Acknowledgements

Arbejdet er udviklet under projektet “Selvregulerende læring i SmartArt Erasmus+ voksenuddannelse” 2019-1-ES01-KA204-095615-Koordinator 6, finansieret af Europa-Kommissionen. Videoen af opgaven færdiggørelse fase havde forudgående informeret samtykke fra Rut Velasco Sáiz. Vi sætter pris på, at lærere og studerende deltager i opgaveimplementeringsfasen.

Materials

iViewer XTM iViewer
SMI Experimenter Center 3.0 SMI
SMI Be Gaze SMI

Referenzen

  1. van Marlen, T., van Wermeskerken, M., Jarodzka, H., van Gog, T. Effectiveness of eye movement modeling examples in problem solving: The role of verbal ambiguity and prior knowledge. Learning and Instruction. 58, 274-283 (2018).
  2. Taub, M., Azevedo, R., Bradbury, A. E., Millar, G. C., Lester, J. Using sequence mining to reveal the efficiency in scientific reasoning during STEM learning with a game-based learning environment. Learning and Instruction. 54, 93-103 (2018).
  3. Cloude, E. B., Taub, M., Lester, J., Azevedo, R., Isotani, S., Millan, E., Ogan, A., Hastings, P., McLaren, B., Luckin, R. The Role of Achievement Goal Orientation on Metacognitive Process Use in Game-Based Learning. Artificial Intelligence in Education. , 36-40 (2019).
  4. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  5. Sáiz-Manzanares, M. C., Rodríguez-Diez, J. J., Marticorena-Sánchez, R., Zaparín-Yáñez, M. J., Cerezo-Menéndez, R. Lifelong learning from sustainable education: An analysis with eye tracking and data mining techniques. Sustainability. 12 (5), 2-18 (2020).
  6. Alemdag, E., Cagiltay, K. A systematic review of eye tracking research on multimedia learning. Computers & Education. 125, 413-428 (2018).
  7. Ho, H. N. J., Tsai, M. -. J., Wang, C. -. Y., Tsai, C. -. C. Prior knowledge and online inquiry-based science reading: evidence from eye tracking. International Journal of Science and Mathematics Education. 12, 525-554 (2014).
  8. Catrysse, L., Gijbels, D., Donche, V. It is not only about the depth of processing: What if eye am not interested in the text. Learning and Instruction. 58, 284-294 (2018).
  9. Mayer, R. E. Using multimedia for e-learning. Journal of Computer Assisted Learning. 33 (5), 403-423 (2017).
  10. Prokop, M., Pilař, L., Tichá, I. Impact of think-aloud on eye-tracking: A comparison of concurrent and retrospective think-aloud for research on decision-making in the game environment. Sensors. 20 (10), (2020).
  11. DuMouchel, W., Abello, J., Pardalos, P. M., Resende, M. G. C. Data Squashing: Constructing Summary Data Sets. Handbook of Massive Data Sets. , 579-591 (2002).
  12. Stull, A. T., Fiorella, L., Mayer, R. E. An eye-tracking analysis of instructor presence in video lectures. Computers in Human Behavior. 88, 263-272 (2018).
  13. König, S. D., Buffalo, E. A. A nonparametric method for detecting fixations and saccades using cluster analysis: Removing the need for arbitrary thresholds. Journal of Neuroscience Methods. 30 (227), 121-131 (2014).
  14. Maltz, M., Shinar, D. Eye Movements of Younger and Older Drivers. Human Factors. 41 (1), 15-25 (1999).
  15. Burch, M., Kull, A., Weiskopf, D. AOI rivers for visualizing dynamic eye gaze frequencies. Computer Graphics Forum. 32 (3), 281-290 (2013).
  16. Dzeng, R. -. J., Lin, C. -. T., Fang, Y. -. C. Using eye-tracker to compare search patterns between experienced and novice workers for site hazard identification. Safety Science. 82, 56-67 (2016).
  17. Kurzhals, K., Weiskopf, D. Space-time visual analytics of eye-tracking data for dynamic stimuli. IEEE Transactions on Visualization and Computer Graphics. 19 (12), 2129-2138 (2013).
  18. Sharafi, Z., Soh, Z., Guéhéneuc, Y. -. G. A systematic literature review on the usage of eye-tracking in software engineering. Information and Software Technology. 67, 79-107 (2015).
  19. Dalrymple, K. A., Jiang, M., Zhao, Q., Elison, J. T. Machine learning accurately classifies age of toddlers based on eye tracking. Scientific Reports. 9 (1), 6255 (2019).
  20. Seifert, L., Cordier, R., Orth, D., Courtine, Y., Croft, J. L. Role of route previewing strategies on climbing fluency and exploratory movements. PLoS One. 12 (4), 1-22 (2017).
  21. Takeuchi, H., Habuchi, Y. A quantitative method for analyzing scan path data obtained by eye tracker. IEEE Symposium on Computational Intelligence and Data Mining, CIDM 2007. , 283-286 (2007).
  22. Takeuchi, H., Matsuda, N. Scan-path analysis by the string-edit method considering fixation duration. 6th International Conference on Soft Computing and Intelligent Systems, and 13th International Symposium on Advanced Intelligence Systems, SCIS/ISIS 2012. , 1724-1728 (2012).
  23. Sáiz, M. C., Marticorena, R., Anaiz, &. #. 1. 9. 3. ;., Zaparaín, M. J., Peralbo, M., Risso, A., Barca, A., Duarte, B., Almeda, L., Brenlla, J. C. Task analysis with eye tracking technology. srl at Smartart. II Congress of the International Scientific Association of Psychopedagogy Proceedings. , 4093-4104 (2019).
  24. Khedher, A. B., Jraidi, I., Frasson, C. Tracking Students’ Analytical Reasoning Using Visual Scan Paths. IEEE 17th International Conference on Advanced Learning Technologies (ICALT). , 53-54 (2017).
  25. Xia, C., Han, J., Qi, F., Shi, G. Predicting Human Saccadic Scanpaths Based on Iterative Representation Learning. IEEE Trans Image Process. 8 (7), 3502-3515 (2019).
  26. Cerezo, R., Fernández, E., Gómez, C., Sánchez-Santillán, M., Taub, M., Azevedo, R. Multimodal Protocol for Assessing Metacognition and Self-Regulation in Adults with Learning Difficulties. Journal of Visualized Experiments. , e60331 (2020).
  27. Scherer, R., Siddiq, F., Tondeur, J. The technology acceptance model (TAM): A meta-analytic structural equation modeling approach to explaining teachers’ adoption of digital technology in education. Computers & Education. 128 (0317), 13-35 (2019).
  28. Bruder, C., Eißfeldt, H., Maschke, P., Hasse, C. Differences in monitoring between experts and novices. Proceedings of the Human Factors and Ergonomics Society Annual Meeting. 57 (1), 295-298 (2013).
  29. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  30. Taub, M., Azevedo, R. How Does Prior Knowledge Influence Eye Fixations and Sequences of Cognitive and Metacognitive SRL Processes during Learning with an Intelligent Tutoring System. International Journal of Artificial Intelligence in Education. 29 (1), 1-28 (2019).
  31. IBM Corp. . SPSS Statistical Package for the Social Sciences (SPSS) (Version 24). , (2016).
  32. . Orange Software Package Available from: https://orange.biolab.si/docs/ (2020)

Play Video

Diesen Artikel zitieren
Sáiz Manzanares, M. C., Payo Hernanz, R. J., Zaparaín Yáñez, M. J., Andrés López, G., Marticorena Sánchez, R., Calvo Rodríguez, A., Martín, C., Rodríguez Arribas, S. Eye-tracking Technology and Data-mining Techniques used for a Behavioral Analysis of Adults engaged in Learning Processes. J. Vis. Exp. (172), e62103, doi:10.3791/62103 (2021).

View Video