Summary

Technologie de suivi oculaire et techniques d’exploration de données utilisées pour une analyse comportementale des adultes engagés dans des processus d’apprentissage

Published: June 10, 2021
doi:

Summary

Nous présentons un protocole pour une analyse comportementale des adultes (âgés de 18 à 70 ans) engagés dans des processus d’apprentissage, entreprenant des tâches conçues pour l’apprentissage auto-régulé (SRL). Les participants, les enseignants et les étudiants universitaires, ainsi que les adultes de l’Université de l’expérience, ont été surveillés avec des dispositifs de suivi oculaire et les données ont été analysées avec des techniques d’exploration de données.

Abstract

L’analyse comportementale des adultes engagés dans des tâches d’apprentissage est un défi majeur dans le domaine de l’éducation des adultes. De nos jours, dans un monde de changements technologiques continus et de progrès scientifiques, il est nécessaire d’apprendre et d’inséducer tout au long de la vie dans des environnements éducatifs formels et non formels. En réponse à ce défi, l’utilisation de la technologie de suivi oculaire et des techniques d’exploration de données, respectivement, pour l’apprentissage supervisé (principalement la prédiction) et non supervisé (en particulier l’analyse en grappes), fournit des méthodes pour la détection des formes d’apprentissage parmi les utilisateurs et / ou la classification de leurs styles d’apprentissage. Dans cette étude, un protocole est proposé pour l’étude des styles d’apprentissage chez les adultes avec et sans connaissances préalables à différents âges (18 à 69 ans) et à différents moments du processus d’apprentissage (début et fin). Les techniques d’analyse statistique de la variance signifient que des différences peuvent être détectées entre les participants selon le type d’apprenant et la connaissance antérieure de la tâche. De même, l’utilisation de techniques de regroupement d’apprentissage non supervisées met en lumière des formes similaires d’apprentissage parmi les participants de différents groupes. Toutes ces données faciliteront les propositions personnalisées de l’enseignant pour la présentation de chaque tâche à différents points de la chaîne de traitement de l’information. Il sera également plus facile pour l’enseignant d’adapter le matériel pédagogique aux besoins d’apprentissage de chaque élève ou groupe d’élèves ayant des caractéristiques similaires.

Introduction

Méthodologie de suivi oculaire appliquée à l’analyse comportementale dans l’apprentissage
La méthodologie de suivi oculaire, entre autres utilisations fonctionnelles, est appliquée à l’étude du comportement humain, en particulier lors de la résolution des tâches. Cette technique facilite le suivi et l’analyse lors de l’accomplissement des tâches d’apprentissage1. Plus précisément, les niveaux d’attention des élèves à différents moments du processus d’apprentissage (début, développement et fin) dans différentes matières (histoire, mathématiques, sciences, etc.) peuvent être étudiés à l’aide de la technologie de suivi oculaire. De plus, si la tâche comprend l’utilisation de vidéos avec une voix qui guide le processus d’apprentissage, l’apprentissage autoréglementé (SRL) est facilité. Par conséquent, la mise en œuvre de la technologie de suivi oculaire dans l’analyse des tâches auxquelles SRL (qui incluent l’utilisation de vidéos) est proposée comme une ressource importante pour comprendre comment l’apprentissage est développé2,3,4. Cette combinaison signifie également que les différences entre les méthodes d’enseignement (avec ou sans SRL, etc.) peuvent être vérifiées avec différents types d’étudiants (avec ou sans connaissances préalables, etc.) 5.En revanche, la présentation d’informations multicanaux (présentation simultanée d’informations auditives et visuelles, qu’elles soient verbales, écrites ou picturales) peut faciliter à la fois l’enregistrement et l’analyse d’informations pertinentes par rapport aux informations non pertinentes provenant des variables susmentionnées6. Les étudiants ayant des connaissances antérieures exposées à des canaux d’apprentissage multimédias semblent apprendre plus efficacement que ceux qui ont peu ou pas de connaissances préalables. Les étudiants ayant des niveaux élevés de connaissances préalables sur la matière intégreront plus efficacement les informations textuelles et graphiques7. Cette fonctionnalité a été observée dans l’apprentissage des textes8 qui comprennent des images9. La technologie de suivi oculaire offre des informations sur l’endroit où l’attention est concentrée et pendant combien de temps. Ces données donnent un aperçu du développement d’un processus d’apprentissage d’une manière plus précise que par la simple observation du processus de résolution lors de l’achèvement d’une tâche. En outre, l’analyse de ces indicateurs facilite l’étude de si l’étudiant développe un apprentissage profond ou superficiel. De plus, la relation entre ces données et les résultats d’apprentissage facilite la validation des informations obtenues avec la technologie de suivi oculaire4,10. En fait, cette technique ainsi que SRL sont de plus en plus utilisés dans l’enseignement supérieur et dans l’éducation des adultes11 environnements d’apprentissage, à la fois sur les cours réglementés et non réglementés12.

La technologie de suivi oculaire offre différentes mesures: distance, vitesse, accélération, densité, dispersion, vitesse angulaire, transitions entre les zones d’intérêt (AOI), ordre séquentiel de l’AOI, visites dans les fixations, saccades, chemin de balayage et paramètres de la carte thermique. Cependant, l’interprétation de ces données est complexe et nécessite l’utilisation de supervisés (régression, arbres de décision, etc.) et non supervisés (techniques de cluster k-means, etc.) 13,14 techniques d’exploration de données. Ces métriques peuvent être appliquées pour suivre le comportement d’un même sujet au fil du temps ou pour une comparaison entre plusieurs sujets et leurs performances avec la même tâche15, en analysant la différence entre les participants ayant des connaissances antérieures et aucune connaissance antérieure16. Des recherches récentes11,17 ont révélé que les apprentis novices se fixent plus longtemps sur les stimuli (c’est-à-dire qu’il y a une plus grande fréquence de fixation tandis que des modèles de chemin de balayage similaires sont enregistrés). La durée moyenne de la fixation était plus longue pour les experts que pour les novices. Les experts ont présenté leur attention sur les points intermédiaires de l’information (proximale et centrale), différences qui peuvent également être observées dans les points de visualisation au sein de la ZI sur les cartes thermiques.

Interprétation des métriques dans le suivi oculaire
Des études récentes18 ont indiqué que l’acquisition d’informations est liée au nombre de fixations oculaires sur les stimuli. Une autre mesure importante est la saccade, qui est définie comme le mouvement rapide et soudain d’une fixation avec un intervalle de [10 ms, 100 ms]. Sharafi et coll. (2015)18 ont constaté des différences dans le nombre de saccades, selon la phase de codage de l’information de l’élève. Un autre paramètre pertinent est le chemin d’analyse, une mesure qui capture l’ordre chronologique des étapes que le participant effectue pour la résolution de la tâche d’apprentissage dans l’AOI définie par le chercheur18. De même, la technologie de suivi oculaire peut être utilisée pour prédire le niveau de compréhension du participant, qui semble être lié au nombre de fixations. Des études récentes ont indiqué que la variabilité du comportement du regard est déterminée par les propriétés de l’image (position, intensité, couleur et orientation), les instructions pour effectuer la tâche et le type de traitement de l’information (style d’apprentissage) du participant. Ces différences sont détectées en analysant l’interaction de l’élève avec les différents AOI19. Les techniques quantitatives20 (analyse fréquentielle) et/ou qualitatives oudynamiques 21 (chemin de balayage) peuvent être utilisées pour analyser les données collectées à partir des différentes mesures. Les premières techniques sont analysées avec des techniques statistiques traditionnelles (analyse de fréquence, différence moyenne, différence de variance, etc.) et les secondes sont analysées avec des techniques d’apprentissage automatique (distances euclidiennes avec des méthodes d’édition de chaînes21,22et clustering17). L’application de ces techniques facilite le regroupement, en tenant compte des différentes caractéristiques des sujets. Une étude17 a révélé que plus l’étudiant est expert, plus la stratégie de traitement de l’information spatiale et temporelle mise en œuvre est efficace. Un tableau descriptif des paramètres de mesure qui ont été utilisés dans cette étude peut être consulté ci-dessous dans le tableau 1.

Tableau 1 : Paramètres les plus représentatifs qui peuvent être obtenus avec la technique de suivi oculaire, adaptée de Sáiz, Zaparaín, Marticorena et Velasco (2019). 20 ans   Veuillez cliquer ici pour télécharger ce tableau.

Application de la méthodologie de suivi oculaire à l’étude du processus d’apprentissage
L’utilisation des avancées technologiques et des techniques d’analyse de données décrites ci-dessus5 ajoutera une plus grande précision à l’analyse comportementale des apprenants lors de la résolution de problèmes dans les différentes phases du traitement de l’information (initiation des tâches, traitement de l’information et résolution des tâches). Tout cela facilitera l’analyse comportementale individuelle, qui permettra à son tour le regroupement d’étudiants ayant des caractéristiques similaires24. De même, les techniques prédictives (arbres de décision, techniques de régression, etc.) 25 peut être appliqué à l’apprentissage, lié à la fois au nombre de fixations et aux résultats de résolution de tâche de chaque élève. Cette fonctionnalité est une avancée très importante dans la connaissance de la façon dont chaque étudiant apprend et pour la proposition de programmes d’apprentissage personnalisés au sein de différents groupes (personnes avec ou sans difficultés d’apprentissage26). Par conséquent, l’utilisation de cette technique contribuera à la réalisation de la personnalisation et de l’optimisation de l’apprentissage27. L’apprentissage tout au long de la vie doit être compris comme un cycle d’amélioration continue, car la connaissance de la société progresse et progresse constamment. La psychologie évolutionniste indique que les compétences de résolution et l’efficacité dans le traitement de l’information diminuent avec l’âge. Plus précisément, la fréquence, l’amplitude et la vitesse des mouvements oculaires chez les adultes se sont avérées diminuer avec l’âge. En outre, à des âges plus avancés, l’attention se concentre sur les zones inférieures des scènes visuelles, ce qui est lié à des déficits dans la mémoire de travail14. Néanmoins, l’activation augmente dans les secteurs frontaux et préfrontaux à un âge plus avancé, qui semble compenser ces déficits dans la résolution de tâche. Cet aspect comprend le niveau de connaissances antérieures et les stratégies de compensation cognitive que le sujet peut appliquer. Les participants expérimentés apprennent plus efficacement, car ils gèrent l’attention plus efficacement, grâce à l’application de processus de supervision automatisés28. En outre, si l’information à apprendre est transmise par le biais des techniques SRL, les lacunes susmentionnées sont atténuées17. L’utilisation de telles techniques signifie que les modèles de suivi visuel sont très similaires, à la fois dans les sujets sans connaissances préalables et dans les sujets ayant des connaissances préalables7.

En résumé, l’analyse des données multimodales-multicanaux sur les LRS obtenues à l’utilisation de technologies d’apprentissage avancé (eye-tracking) est essentielle pour comprendre l’interaction entre les processus cognitifs, métacognitifs et motivationnels, et leur impact sur l’apprentissage29. Les résultats et l’étude des différences d’apprentissage ont des implications pour la conception de matériel d’apprentissage et de systèmes de tutorat intelligents, qui permettront tous deux un apprentissage personnalisé susceptible d’être plus efficace et satisfaisant pour l’étudiant de30ans.

Dans cette recherche, deux questions d’enquête ont été posées : (1) Y aura-t-il des différences significatives dans les résultats d’apprentissage et dans les paramètres de fixation oculaire entre les étudiants et les enseignants experts par rapport aux enseignants non experts en histoire de l’art différenciant les étudiants ayant des diplômes officiels par rapport aux étudiants ayant des diplômes non officiels (Université de l’expérience – Éducation des adultes)? et (2) Les groupes de chaque participant ayant des résultats d’apprentissage et des paramètres de fixation oculaire coïncideront-ils avec le type de participants (étudiants ayant des diplômes officiels, étudiants avec des diplômes non officiels (Université de l’expérience – Éducation des adultes) et enseignants)?

Protocol

Ce protocole a été réalisé conformément au règlement de procédure du Comité de bioéthique de l’Université de Burgos (Espagne) nº Nº IR27/2019. Avant leur participation, les participants avaient été pleinement informés des objectifs de la recherche et avaient tous donné leur consentement éclairé. Ils n’ont reçu aucune compensation financière pour leur participation. 1. Recrutement des participants Recruter des participants parmi un groupe d’adultes dans deux …

Representative Results

Les 36 participants recrutés pour la présente étude provenaient de trois groupes d’adultes (étudiants de l’université d’expérience, professeurs d’université et étudiants de premier cycle et de maîtrise) âgés de [18 à 69] ans(tableau 2). Le protocole a été testé pendant 20 mois à l’Université de Burgos. Un aperçu de l’évolution de la note peut être présenté au tableau 4. <p class="jove_content" fo:keep-together.within-…

Discussion

Les résultats de la recherche ont indiqué que la durée moyenne de fixation sur les stimuli pertinents était plus longue chez les participants ayant des connaissances antérieures. De même, l’attention portée à ce groupe est portée sur les points intermédiaires de l’information (proximale et distale)7. Les résultats de cette étude ont révélé des différences dans la façon dont les participants traitaient l’information. De plus, leur traitement n’était pas toujours lié au re…

Offenlegungen

The authors have nothing to disclose.

Acknowledgements

Les travaux ont été développés dans le cadre du projet « Apprentissage autoréglementé dans l’éducation des adultes SmartArt Erasmus+ » 2019-1-ES01-KA204-095615-Coordinateur 6, financé par la Commission européenne. La vidéo de la phase d’achèvement des tâches avait le consentement préalable en connaissance de cause de Rut Velasco Sáiz. Nous apprécions la participation des enseignants et des étudiants à la phase de mise en œuvre des tâches.

Materials

iViewer XTM iViewer
SMI Experimenter Center 3.0 SMI
SMI Be Gaze SMI

Referenzen

  1. van Marlen, T., van Wermeskerken, M., Jarodzka, H., van Gog, T. Effectiveness of eye movement modeling examples in problem solving: The role of verbal ambiguity and prior knowledge. Learning and Instruction. 58, 274-283 (2018).
  2. Taub, M., Azevedo, R., Bradbury, A. E., Millar, G. C., Lester, J. Using sequence mining to reveal the efficiency in scientific reasoning during STEM learning with a game-based learning environment. Learning and Instruction. 54, 93-103 (2018).
  3. Cloude, E. B., Taub, M., Lester, J., Azevedo, R., Isotani, S., Millan, E., Ogan, A., Hastings, P., McLaren, B., Luckin, R. The Role of Achievement Goal Orientation on Metacognitive Process Use in Game-Based Learning. Artificial Intelligence in Education. , 36-40 (2019).
  4. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  5. Sáiz-Manzanares, M. C., Rodríguez-Diez, J. J., Marticorena-Sánchez, R., Zaparín-Yáñez, M. J., Cerezo-Menéndez, R. Lifelong learning from sustainable education: An analysis with eye tracking and data mining techniques. Sustainability. 12 (5), 2-18 (2020).
  6. Alemdag, E., Cagiltay, K. A systematic review of eye tracking research on multimedia learning. Computers & Education. 125, 413-428 (2018).
  7. Ho, H. N. J., Tsai, M. -. J., Wang, C. -. Y., Tsai, C. -. C. Prior knowledge and online inquiry-based science reading: evidence from eye tracking. International Journal of Science and Mathematics Education. 12, 525-554 (2014).
  8. Catrysse, L., Gijbels, D., Donche, V. It is not only about the depth of processing: What if eye am not interested in the text. Learning and Instruction. 58, 284-294 (2018).
  9. Mayer, R. E. Using multimedia for e-learning. Journal of Computer Assisted Learning. 33 (5), 403-423 (2017).
  10. Prokop, M., Pilař, L., Tichá, I. Impact of think-aloud on eye-tracking: A comparison of concurrent and retrospective think-aloud for research on decision-making in the game environment. Sensors. 20 (10), (2020).
  11. DuMouchel, W., Abello, J., Pardalos, P. M., Resende, M. G. C. Data Squashing: Constructing Summary Data Sets. Handbook of Massive Data Sets. , 579-591 (2002).
  12. Stull, A. T., Fiorella, L., Mayer, R. E. An eye-tracking analysis of instructor presence in video lectures. Computers in Human Behavior. 88, 263-272 (2018).
  13. König, S. D., Buffalo, E. A. A nonparametric method for detecting fixations and saccades using cluster analysis: Removing the need for arbitrary thresholds. Journal of Neuroscience Methods. 30 (227), 121-131 (2014).
  14. Maltz, M., Shinar, D. Eye Movements of Younger and Older Drivers. Human Factors. 41 (1), 15-25 (1999).
  15. Burch, M., Kull, A., Weiskopf, D. AOI rivers for visualizing dynamic eye gaze frequencies. Computer Graphics Forum. 32 (3), 281-290 (2013).
  16. Dzeng, R. -. J., Lin, C. -. T., Fang, Y. -. C. Using eye-tracker to compare search patterns between experienced and novice workers for site hazard identification. Safety Science. 82, 56-67 (2016).
  17. Kurzhals, K., Weiskopf, D. Space-time visual analytics of eye-tracking data for dynamic stimuli. IEEE Transactions on Visualization and Computer Graphics. 19 (12), 2129-2138 (2013).
  18. Sharafi, Z., Soh, Z., Guéhéneuc, Y. -. G. A systematic literature review on the usage of eye-tracking in software engineering. Information and Software Technology. 67, 79-107 (2015).
  19. Dalrymple, K. A., Jiang, M., Zhao, Q., Elison, J. T. Machine learning accurately classifies age of toddlers based on eye tracking. Scientific Reports. 9 (1), 6255 (2019).
  20. Seifert, L., Cordier, R., Orth, D., Courtine, Y., Croft, J. L. Role of route previewing strategies on climbing fluency and exploratory movements. PLoS One. 12 (4), 1-22 (2017).
  21. Takeuchi, H., Habuchi, Y. A quantitative method for analyzing scan path data obtained by eye tracker. IEEE Symposium on Computational Intelligence and Data Mining, CIDM 2007. , 283-286 (2007).
  22. Takeuchi, H., Matsuda, N. Scan-path analysis by the string-edit method considering fixation duration. 6th International Conference on Soft Computing and Intelligent Systems, and 13th International Symposium on Advanced Intelligence Systems, SCIS/ISIS 2012. , 1724-1728 (2012).
  23. Sáiz, M. C., Marticorena, R., Anaiz, &. #. 1. 9. 3. ;., Zaparaín, M. J., Peralbo, M., Risso, A., Barca, A., Duarte, B., Almeda, L., Brenlla, J. C. Task analysis with eye tracking technology. srl at Smartart. II Congress of the International Scientific Association of Psychopedagogy Proceedings. , 4093-4104 (2019).
  24. Khedher, A. B., Jraidi, I., Frasson, C. Tracking Students’ Analytical Reasoning Using Visual Scan Paths. IEEE 17th International Conference on Advanced Learning Technologies (ICALT). , 53-54 (2017).
  25. Xia, C., Han, J., Qi, F., Shi, G. Predicting Human Saccadic Scanpaths Based on Iterative Representation Learning. IEEE Trans Image Process. 8 (7), 3502-3515 (2019).
  26. Cerezo, R., Fernández, E., Gómez, C., Sánchez-Santillán, M., Taub, M., Azevedo, R. Multimodal Protocol for Assessing Metacognition and Self-Regulation in Adults with Learning Difficulties. Journal of Visualized Experiments. , e60331 (2020).
  27. Scherer, R., Siddiq, F., Tondeur, J. The technology acceptance model (TAM): A meta-analytic structural equation modeling approach to explaining teachers’ adoption of digital technology in education. Computers & Education. 128 (0317), 13-35 (2019).
  28. Bruder, C., Eißfeldt, H., Maschke, P., Hasse, C. Differences in monitoring between experts and novices. Proceedings of the Human Factors and Ergonomics Society Annual Meeting. 57 (1), 295-298 (2013).
  29. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  30. Taub, M., Azevedo, R. How Does Prior Knowledge Influence Eye Fixations and Sequences of Cognitive and Metacognitive SRL Processes during Learning with an Intelligent Tutoring System. International Journal of Artificial Intelligence in Education. 29 (1), 1-28 (2019).
  31. IBM Corp. . SPSS Statistical Package for the Social Sciences (SPSS) (Version 24). , (2016).
  32. . Orange Software Package Available from: https://orange.biolab.si/docs/ (2020)

Play Video

Diesen Artikel zitieren
Sáiz Manzanares, M. C., Payo Hernanz, R. J., Zaparaín Yáñez, M. J., Andrés López, G., Marticorena Sánchez, R., Calvo Rodríguez, A., Martín, C., Rodríguez Arribas, S. Eye-tracking Technology and Data-mining Techniques used for a Behavioral Analysis of Adults engaged in Learning Processes. J. Vis. Exp. (172), e62103, doi:10.3791/62103 (2021).

View Video