Summary

Vurdere Flere dimensioner Engagement at karakterisere Learning: En neurofysiologisk perspektiv

Published: July 01, 2015
doi:

Summary

This paper aims to describe the techniques involved in the collection and synchronization of the multiple dimensions (behavioral, affective and cognitive) of learners’ engagement during a task.

Abstract

In a recent theoretical synthesis on the concept of engagement, Fredricks, Blumenfeld and Paris1 defined engagement by its multiple dimensions: behavioral, emotional and cognitive. They observed that individual types of engagement had not been studied in conjunction, and little information was available about interactions or synergy between the dimensions; consequently, more studies would contribute to creating finely tuned teaching interventions. Benefiting from the recent technological advances in neurosciences, this paper presents a recently developed methodology to gather and synchronize data on multidimensional engagement during learning tasks. The technique involves the collection of (a) electroencephalography, (b) electrodermal, (c) eye-tracking, and (d) facial emotion recognition data on four different computers. This led to synchronization issues for data collected from multiple sources. Post synchronization in specialized integration software gives researchers a better understanding of the dynamics between the multiple dimensions of engagement. For curriculum developers, these data could provide informed guidelines for achieving better instruction/learning efficiency. This technique also opens up possibilities in the field of brain-computer interactions, where adaptive learning or assessment environments could be developed.

Introduction

Engagement spiller en afgørende rolle i at lære. For Clark og Mayer 2, "al læring kræver engagement," uanset levering medier. Zhang et al. 3 også foreslået, at øget elevernes engagement kan forbedre læringsresultater, såsom problemløsning og kritisk tænkning. Definition af engagement er fortsat en udfordring. I deres litteraturgennemgang, Fredricks, Blumenfeld og Paris 1 definerede engagement ved sin mange facetter: "Behavioural engagement trækker på ideen om at deltage; det omfatter involvering i faglige og sociale eller fritidsaktiviteter. (…) Følelsesmæssig engagement omfatter positive og negative reaktioner på lærere, klassekammerater, akademikere og skole og formodes at skabe bånd til et objekt og indflydelse vilje til at gøre arbejdet. Endelig kognitiv engagement trækker på ideen om mental investeringer; det indeholder omtanke og vilje til at udøve den indsats halvendigt at forstå komplekse ideer og master vanskelige færdigheder. "

Fredricks, Blumenfeld og Paris 1 hævdede også, at fokus på adfærd, følelser og kognition, omfattet af begrebet engagement, kan give en rigere karakterisering af læring. Disse forfattere påpegede, at en solid mængde forskning adresserer hver komponent af engagement separat, men disse komponenter var ikke blevet undersøgt i forbindelse. De bemærkede også, at lidt information til rådighed om interaktioner mellem dimensionerne, og at flere undersøgelser kan bidrage til planlægningen af ​​fint afstemte pædagogiske interventioner. Som et skridt i den retning, dette papir beskriver en forskningsmetodologi, der blev udviklet for at indsamle og analysere kvantitative og kvalitative data, synkront, på adfærdsmæssige, følelsesmæssige og kognitive engagement under læring opgaver.

At bringe de Neurosciences i Uddannelse

Behavior, og dermed adfærdsmæssige engagement, har længe været det centrale fokus for studier i uddannelse: forskningsdesign fokuseret primært på ændringer i viden og adfærd, der forekommer over lange perioder, mellem præ- og post-test, og over intervaller på timer, uger , måneder eller år. Skelne mellem adfærdsmæssige, følelsesmæssige og kognitive engagement er fortsat en udfordring, fordi de sidste to dimensioner er ikke systematisk observeres eksternt. Kognition og følelser skal enten udledes fra observationer eller vurderet med selvrapportering foranstaltninger. Fra en ekstern synsvinkel, er det stadig vanskeligt at afgøre, om de studerende forsøger at få deres arbejde så hurtigt som muligt, eller ved hjælp af dyb niveau læringsstrategier at beherske et bestemt indhold. I punkt faktisk, Fredricks, Blumenfeld og Paris 1 var ude af stand til at finde nogen offentliggjorte undersøgelser ved hjælp af direkte, objektive mål for kognitiv engagement.

Den seneste teknologiske udvikling inden forinden for neurovidenskab har skabt nye muligheder for forskning i uddannelse. Nye dataindsamlingsmetoder og analyse algoritmer udviklet i området for neuro ergonomi synes meget lovende for kvalitative og kvantitative undersøgelser under læring opgaver. Andre discipliner, såsom økonomi, psykologi, marketing og ergonomi, har brugt neurofysiologiske målinger til at vurdere kognitive engagement i nogen tid 4-8. Neurofysiologiske foranstaltninger, kombineret med effektive analyse algoritmer, tillader en at studere et fænomen uden at forstyrre den. Efter deres natur, selvrapportering spørgeskemaer frigøre studerende fra læring. Neurofysiologiske foranstaltninger tillader forskningsdesign, der skal gennemføres i mere autentiske læringsmiljøer. Disse værktøjer omfatter udstyr til overvågning puls, vejrtrækning, blodtryk, kropstemperatur, pupildiameter, electrodermal aktivitet, elektroencefalografi (EEG), etc.

<strong> Gathering Synkroniseret Data om Behavioral, følelsesmæssig og kognitiv Engagement

Som repræsentative resultater efter brug af denne protokol, vil denne afhandling præsenterer delvise resultater af en undersøgelse, hvor eleverne skulle løse, på en computerskærm, ti problemer i mekanisk fysik. Disse problemer blev udviklet i tidligere arbejde 9. Blev indsamlet neurofysiologiske data, mens eleverne var at løse problemerne og afslappende i løbet af en 45 s pause med lukkede øjne, efter hver problem.

Som nævnt ovenfor adfærdsmæssige engagement data består af software interaktioner (musebevægelser og klik), øje blik, ydeevne og svar på spørgsmål, der er fremstillet af en lærende interagere med systemet, mens udføre opgaven 1. En eye-tracking system blev brugt til at indsamle software interaktioner og øje blik data. Ydelsesdata (tid til at løse et problem, korrekthed af svar) blev opsamlet på enUndersøgelsen hjemmeside, der blev brugt til at præsentere opgaven. Denne hjemmeside blev også brugt til at samle selv-rapport, der er indsamlet med et spørgeskema tilpasset fra Bradley og Lang 10. Følelsesmæssig engagement indebærer karakterisering af følelser. Ifølge Lang 11, er følelser karakteriseret i form af valens (behageligt / ubehageligt) og ophidselse (ro / vakt). Følelsesmæssig engagement data blev derfor indsamlet, med automatisk facial følelse anerkendelse software, der kvantificerer emotionel valens og en electrodermal aktivitet encoder / sensor til ophidselse 12,13. Electrodermal aktivitet (EDA) henviser til den optagne elektriske modstand mellem to elektroder, når støt bestået en meget svag elektrisk strøm mellem dem. Cacioppo, Tassinary og Berntson 14 viste, at modstanden indspillet varierer alt efter motivets ophidselse. Således psykofysiologiske data, såsom valens eller ophidselse, betragtes som korrelater til følelsesmæssig engagement.

<pclass = "jove_content"> Endelig indsamles kognitive engagement data via elektroencefalografi (EEG). EEG foranstaltninger, på hovedbunden, den synkroniserede elektriske aktivitet af grupper af neuroner i hjernen. Elektriske signaler, der er optaget fra hovedbunden er ofte svingende og er sammensat af frekvens komponenter. Konventionelt er disse frekvenser grupperet i sekvenser, kendt som bands. For eksempel, alfa, beta og theta bands er i fokus i denne undersøgelse. Ifølge neurovidenskabelige undersøgelser 14, disse bånd afspejler forskellige kognitive behandling evner i bestemte områder af hjernen. En analyse af power spectral density (PSD) af bestemte frekvenser, kombineret med talrige undersøgelser 7,15 på årvågenhed og opmærksomhed, tillader forskerne at kvantificere kognitiv indgreb under en opgave. Som Mikulka et al. 16 bemærkede, forskning har vist en direkte sammenhæng mellem beta-aktivitet og kognitiv årvågenhed og et indirekte forhold mellem alfa end theta-aktivitet og årvågenhed. Således Pope, Bogart og Bartoleme 7 udviklet en engagement indeks, der beregner PSD af tre bands: beta / (alfa + theta). Dette forhold blev valideret i andre undersøgelser om engagement 16,17,18. For at karakterisere kognitiv indgreb over tid, en Fast Fourier-transformation (FFT) konverterer EEG signalet fra hver aktive site (F3, F4, O1, O2) i en effektspektrum. EEG engagement indeks på tidspunkt T beregnes ved gennemsnittet af hver engagement forholdet inden for en 20 sek glidende vindue foregående tid T. Denne procedure gentages hvert sekund, og en ny glidende vindue bruges til at opdatere indekset.

Da formålet med denne metode er at give en rig analyse af de mange dimensioner af engagement, datasynkronisering er afgørende. Som Leger et al. 19 minde læserne, udstyrsproducenter stærkt anbefale at bruge kun én computer pr måling værktøj til at sikre deres specificerede præcision level. Således når flere computere er ansat, synkronisering mellem optagelse computere bliver et afgørende skridt. Optagelserne kan ikke alle være startede på nøjagtig samme tid, og hver datastrøm har sin specifikke tidsramme (f.eks sek 0 af eyetracking ≠ sec 0 af EEG eller fysiologiske data). Dette er yderst vigtigt: desynkronisering mellem datastrømme betyder fejl i kvantificering af hver dimension af engagement. Der er forskellige måder at synkronisere samtidige fysiologiske og adfærdsmæssige optagelser. Disse metoder kan opdeles i to overordnede tilgange; direkte og indirekte 20. Protokollen præsenteres i næste afsnit er baseret på en indirekte metode, hvor en ekstern enhed, en syncbox, bruges til at sende transistor-transistor logik (TTL) signaler til alle kontrolapparatet (som vist i figur 1). Da hver stykke udstyr har en anden starttid, registreres TTL markører i logfilerne med en relativ forsinkelse. Markører anvendes derefter til at justere signalerne og derved sikre korrekt synkronisering efter hver optagelse. En adfærdsmæssige analyse software program, der giver ekstern fil integration anvendes til at re-synkronisere tidslinje for hver datastrøm og til at udføre kvantitativ og kvalitativ analyse af hver dimension af indgreb.

Figur 1
Figur 1. Arkitektur for Dataindsamling System. Laboratoriet miljø, hvor adfærdsmæssige (eye-sporing), følelsesmæssig (EDA og i ansigtet følelse) og kognitive (EEG) engagement data indsamles indeholder mange computere. Dette rejser en synkronisering udfordring for data, der refereres i deres respektive edb ure. At være i stand til at analysere alle data i den samme henvisning tid, laboratoriet setup indebærer en syncbox der sender TTL signaler til alle datastrømme.nk "> Klik her for at se en større version af dette tal.

For at vurdere præcisionen af ​​metoden i form af synkronisering, blev 45 sek pauser indført før hver af de mekaniske fysik problemer. I løbet af disse pauser, forsøgspersonerne havde at slappe af og til at lukke øjnene. Som det ses i andre undersøgelser 4,9,16,17,18 bør disse pauser fremkalde betydelige variationer i den indsamlede signal: de to eye elev prikker i eye-tracking straks forsvinde (adfærdsmæssige engagement) og et omgående fald i kognitiv engagement (EEG signal) overholdes. Disse specifikke komponenter af signalet anvendes til at evaluere den generelle gyldighed af synkroniseringen. Den nylige offentliggørelse af papirer, der helt eller delvist afhængige af denne synkronisering procedure, inden for informationssystemer 19, menneske-maskine interaktion 21 og uddannelse 9, 22, giver dokumentation for dens effektivitet.

Protocol

Denne protokol modtaget en etisk certifikat fra Comité institutionnel de la recherche avec des êtres humains (Cier) de l'Université du Québec à Montréal (UQAM), der blev godkendt af HEC-Montreal for Tech3Lab forskning facilitet. Protokollen beskriver hver af de specifikke trin, der udføres i vores laboratorium miljø og udstyr. Selvom præcise software stier leveres til at afklare den metode, denne teknik kan overføres og kan replikeres med anden relateret eye-tracking, automatiske facial følelser anerkende…

Representative Results

Figur 2 og 3 viser screenshots af resultaterne af integration og synkronisering af adfærdsmæssige, følelsesmæssige og kognitive engagement data i en adfærdsanalyse softwareprogram. I begge figurer, venstre sektion organiserer forsknings- fag og kodning ordningen. I den midterste del, en video (med røde prikker) viser individets øje blik løbet af opgaven. Fagets adfærdsmæssige engagement kan udledes baseret på, hvad han / hun ser på i løbet af opgaven, og hvilke handlinger der er truff…

Discussion

I form af kritiske trin i protokollen, skal det først bemærkes, at datakvaliteten er altid det vigtigste fokus for neurofysiologiske indsamling teknikker. I denne metode, skal forskningsassistenter være særlig opmærksom på at instruere de emner at minimere hoved bevægelser, der vil forstyrre valens overvågning (tabe rigtige ansigt vinkel til kameraet), eller genererer myographic artefakter i EEG. På den anden side skal en balance skal opretholdes mellem ægtheden af ​​ægte problemløsning og interventioner…

Declarações

The authors have nothing to disclose.

Acknowledgements

The authors acknowledge the financial support of the Social Sciences and Humanities Research Council of Canada (SSHERC), Natural Sciences and Engineering Research Council of Canada (NSERC), Fonds de Recherche Nature et Technologies du Québec (FQRNT) and Fonds de Recherche sur la Société et Culture du Québec (FQRSC).

Materials

EGI GSN-32  EGI n/a Dense array EEG
Netstation v.5.0 EGI n/a EEG data collection software: EEG is collected with 32-electrode dense array electroencephalography (dEEG) geodesic sensor net using Netstation acquisition software and EGI amplifiers (Electrical Geodesics, Inc). The vertex (recording site Cz) is the reference electrode for recording. Impedance is kept below 50 kΩ with a sampling rate of 250 Hz. 
Facereader v.4 Noldus n/a Facial emotion recognition software
Syncbox Noldus n/a Syncbox start the co-registration of EEG and gaze data by sending a Transistor-Transistor Logic (TTL) signal to the EGI amplifier and a keystroke signal to the Tobii Studio v 3.2.
Logitech C600  Webcam 960-000396 Webcam used to gather video data sent to mediarecorder and that will be analyzed in Facereader
The Observer XT Noldus n/a Integration and synchronization software: The Noldus Observer XT (Noldus Information Technology) is used to synchronize all behavioral, emotional and cognitive engagement data. 
On-Screen LED illumination Noldus n/a Neon positioned on computer screen in order to correctly light the face of subjects
MediaRecorder Noldus n/a Video data collection software
Tobii X60 Tobii n/a Collect eye-movement patterns :  used to record subjects’ eye movement patterns at 60Hz during the experiment. 
Tobii Studio v.3.2 Tobii n/a Eye-tracking data collection and analysis software
Analyzer 2 Brainvision n/a EEG signal processing software
Acqknowledge v.4.0 Biopac ACK100M Physiological signal acquisition and processing software
Control III germicide solution Maril Products. 10002REVA-20002-1 Disinfectant solution used with EEG helmets : recommended by EGI
Unipark QuestBack AG n/a Online survey environment

Referências

  1. Fredricks, J. A., Blumenfeld, P. C., Paris, A. H. School engagement: Potential of the concept, state of the evidence. Rev. Educ. Res. 74 (1), 59-109 (2004).
  2. Clark, R. C., Mayer, R. E. . E-learning and the Science of Instruction. , (2011).
  3. Zhang, D., Zhou, L., Briggs, R. O., Nunamaker, J. F. Instructional video in e-learning: Assessing the impact of interactive video on learning effectiveness. Inform. Manage. 43 (1), 15-27 (2006).
  4. Freeman, F. G., Mikulka, P. J., Prinzel, L. J., Scerbo, M. W. Evaluation of an adaptive automation system using three EEG indices with a visual tracking task. Biol. Psychol. 50, 61-76 (1999).
  5. Glimcher, P., Rustichini, A. Neuroeconomics: The consilience of brain and decision. Science. 306 (5695), 447-452 (2004).
  6. Lieberman, M. D. Social Cognitive neuroscience: A review of core processes. Annu. Rev. Physiol. 58, 259-289 (2007).
  7. Pope, A. T., Bogart, E. H., Bartolome, D. S. Biocybernetic system evaluates indices of operator engagement in automated task. Biol. Psychol. 40 (1-2), 187-195 (1995).
  8. Mandryk, R., Inkpen, K. Physiological indicators for the evaluation of co-located collaborative play. , (2004).
  9. Allaire-Duquette, G., Charland, P., Riopel, M. At the very root of the development of interest: Using human body contexts to improve women’s emotional engagement in introductory physics. Eur. J. Phy. Ed. 5 (2), 31-48 (2014).
  10. Bradley, M. M., Lang, P. J. Measuring emotion: The self-assessment manikin and the semantic differential. J. Behav. Ther. Exp. Psy. 25 (1), 49-59 (1994).
  11. Lang, P. J. The emotion probe: Studies of motivation and attention. Am. Psychol. 50 (5), 372-385 (1995).
  12. Ekman, P., Felt Friesen, W. false, and miserable smiles. J. Nonverbal Behav. 6 (4), 238-252 (1982).
  13. Van Kuilenburg, H., Den Uyl, M. J., Israël, M. L., Ivan, P. Advances in face and gesture analysis. , 371-372 (2008).
  14. Cacioppo, J., Tassinary, L. G., Berntson, G. G. . Handbook of Psychophysiology. , (2007).
  15. Lubar, J. F., Swartwood, M. O., Swartwood, J. N., O’Donnell, P. H. Evaluation of the effectiveness of EEG neurofeedback training for ADHD in a clinical setting as measured by changes in T.O.V.A. scores, behavioral ratings, and WISC R performance. Biofeedback Self-reg. 20 (1), (1995).
  16. Mikulka, P. J., Freeman, F. G., Scerbo, M. W. Effects of a biocybernetic system on the vigilance decrement. Hum. factors. 44 (4), 654-664 (2002).
  17. Freeman, F. G., Mikulka, P. J., Scerbo, M. W., Scott, L. An evaluation of an adaptive automation system using a cognitive vigilance task. Biol. Psychol. 67 (3), 283-297 (2004).
  18. Chaouachi, M., Chalfoun, P., Jraidi, I., Frasson, C. Affect and mental engagement: Toward adaptability for intelligent systems. Proceedings of the Twenty-Third International Florida Artificial Intelligence Research Society Conference (FLAIRS 2010), Association for the Advancement of Artificial Intelligence. , 355-360 (2010).
  19. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-LeMoyne, &. #. 2. 0. 1. ;. Precision is in the eye of the beholder: Application of eye fixation-related potentials to information systems research. J. Assoc. Inf. Syst. 15 (10), 651-678 (2014).
  20. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-Lemoyne, E. Applying eye fixation-related potentials to information systems research: Demonstration of the method during natural IS use and guidelines for research. J. Assoc. Inf. Syst. 15 (10), (2014).
  21. Courtemanche, F. . Un outil d’évaluation neurocognitive des interactions humain-machine Doctoral thesis. , (2014).
  22. Charland, P., Léger, P. M., Mercier, J., Skelling-Desmeules, Y. Assessing multiple dimensions of learner engagement during science problem solving using psychophysiological and behavioral measures. , (2014).
  23. Venables, P. H., Christie, M. J., Martin, I., Venables, P. Electrodermal activity. Techniques in Psychophysiology. , 3-67 (1980).
  24. Boucsein, W. . Electrodermal Activity. , (2012).
  25. Sarlo, M., Palomba, D., Buodo, G. M., Minghetti, R., Stegagno, L. Blood pressure changes highlight gender differences in emotional reactivity to arousing pictures. Biol. Psychol. 70 (3), 188-196 (2005).
  26. Martens, R. L., Gulikers, J., Bastiaens, T. The impact of intrinsic motivation on e-learning in authentic computer tasks. J. Comput. Assist. Lear. 20 (5), 368-376 (2004).
check_url/pt/52627?article_type=t

Play Video

Citar este artigo
Charland, P., Léger, P., Sénécal, S., Courtemanche, F., Mercier, J., Skelling, Y., Labonté-Lemoyne, E. Assessing the Multiple Dimensions of Engagement to Characterize Learning: A Neurophysiological Perspective. J. Vis. Exp. (101), e52627, doi:10.3791/52627 (2015).

View Video