Summary

Vurdering av flere dimensjoner av engasjement for å karakter Learning: en nevrofysiologisk perspektiv

Published: July 01, 2015
doi:

Summary

This paper aims to describe the techniques involved in the collection and synchronization of the multiple dimensions (behavioral, affective and cognitive) of learners’ engagement during a task.

Abstract

In a recent theoretical synthesis on the concept of engagement, Fredricks, Blumenfeld and Paris1 defined engagement by its multiple dimensions: behavioral, emotional and cognitive. They observed that individual types of engagement had not been studied in conjunction, and little information was available about interactions or synergy between the dimensions; consequently, more studies would contribute to creating finely tuned teaching interventions. Benefiting from the recent technological advances in neurosciences, this paper presents a recently developed methodology to gather and synchronize data on multidimensional engagement during learning tasks. The technique involves the collection of (a) electroencephalography, (b) electrodermal, (c) eye-tracking, and (d) facial emotion recognition data on four different computers. This led to synchronization issues for data collected from multiple sources. Post synchronization in specialized integration software gives researchers a better understanding of the dynamics between the multiple dimensions of engagement. For curriculum developers, these data could provide informed guidelines for achieving better instruction/learning efficiency. This technique also opens up possibilities in the field of brain-computer interactions, where adaptive learning or assessment environments could be developed.

Introduction

Engasjement spiller en avgjørende rolle i læring. For Clark og Mayer 2, "all læring krever engasjement," uavhengig av levering medier. Zhang et al. 3 også antydet at økt studentengasjement kan forbedre læringsutbytte, for eksempel problemløsning og kritisk tenkning ferdigheter. Definere engasjement er fortsatt en utfordring. I sin litteraturgjennomgang, Fredricks, Blumenfeld og Paris pt definert engasjement av sin mangefasetterte natur: "Atferds engasjement trekker på ideen om deltakelse; det inkluderer deltakelse i faglige og sosiale eller fritidsaktiviteter. (…) Emosjonelt engasjement omfatter positive og negative reaksjoner på lærere, klassekamerater, akademikere, og skole og antas å skape bånd til et objekt og innflytelse vilje til å gjøre jobben. Til slutt trekker kognitiv engasjement på ideen om mental investering; den inneholder omtanke og vilje til å utøve innsats necvendig å forstå komplekse ideer og mestre vanskelige ferdigheter. "

Fredricks, Blumenfeld og Paris 1 hevdet også at et fokus på atferd, følelser og kognisjon, innenfor begrepet engasjement, kan gi et rikere karakterisering av læring. Disse forfatterne påpekte at en robust kropp av forskning adresser hver komponent av engasjement separat, men disse komponentene hadde ikke blitt studert i sammenheng. De observerte også at lite informasjon er tilgjengelig om interaksjoner mellom dimensjonene og at flere studier kan bidra til planlegging finstemt undervisnings intervensjoner. Som et skritt i riktig retning, beskriver dette papiret en forskningsmetodikk som ble utviklet for å samle og analysere kvantitative og kvalitative data, synkront, på atferdsmessige, emosjonelle og kognitive engasjement i læringsoppgaver.

Bringe Neurosciences inn Education

Behavior, og dermed atferds engasjement, har lenge vært det sentrale fokus for studier i utdanning: forskningsdesign fokusert hovedsakelig på endringer i kunnskap og atferd som forekommer over lange tidsperioder, mellom pre- og post-tester, og over intervaller på timer, uker , måneder eller år. Skille mellom atferdsmessige, emosjonelle og kognitive engasjement er fortsatt en utfordring fordi de to siste dimensjonene er ikke systematisk observer eksternt. Kognisjon og følelser må enten utledes fra observasjoner eller vurderes med selvrapporterings tiltak. Fra en ekstern synspunkt, er det fortsatt vanskelig å avgjøre om elevene prøver å få arbeidet gjort så raskt som mulig, eller ved hjelp av dype nivå læringsstrategier for å mestre et bestemt innhold. I punkt faktisk, Fredricks, Blumenfeld og Paris 1 klarte ikke å finne noen publiserte studier med direkte, objektive mål på kognitiv engasjement.

Siste teknologiske utviklingen iinnen nevrovitenskap har skapt nye muligheter for forskning i utdanning. Nye metoder for datainnsamling og analyse algoritmer utviklet innen nevro ergonomi virker veldig lovende for kvalitative og kvantitative studier i løpet læringsoppgaver. Andre disipliner, som for eksempel økonomi, psykologi, markedsføring og ergonomi, har brukt nevrofysiologiske målinger for å vurdere kognitiv engasjement for en stund 4-8. Nevrofysiologiske tiltak, kombinert med effektive algoritmer, tillater en å studere et fenomen uten å forstyrre den. Av natur, selvrapporteringsspørre frigjøre studenter fra læring. Nevrofysiologiske tiltak tillate forskningsdesign som skal utføres i mer autentiske læringsmiljøer. Disse verktøyene inkluderer utstyr for å overvåke puls, pust, blodtrykk, kroppstemperatur, elev diameter, elektrodermal aktivitet, elektroencefalografi (EEG), osv.

<strong> Gathering synkroniserte data på Behavioral, emosjonell og kognitiv Engagement

Som representative utfall etter bruk av denne protokollen, vil denne artikkelen presenterer delvise resultater fra en studie der elevene måtte løse, på en dataskjerm, ti problemer i mekanisk fysikk. Disse problemene ble utviklet i tidligere arbeid 9. Nevrofysiologiske data ble samlet inn mens elevene var å løse problemene og avslappende under en 45 s pause, med øynene lukket, etter hvert problem.

Som nevnt ovenfor, atferds engasjement data består av programvare interaksjoner (musebevegelser og klikk), øye blikket, ytelse og svar på spørsmål som er produsert av en elev i samspill med systemet mens de utfører sin oppgave 1. Et øye-sporing systemet ble brukt til å samle programvare interaksjoner og øye blikk data. Ytelsesdata (tid til å løse et problem, er korrekte svar) ble samlet på enUndersøkelsen nettside som ble brukt til å presentere oppgaven. Dette nettstedet ble også brukt til å samle selvrapporteringsdata innhentet med spørreskjema tilpasset fra Bradley og Lang 10. Emosjonelle engasjement innebærer karakterisering av følelser. Ifølge Lang 11, er følelser preget i form av valens (hyggelig / ubehagelig) og opphisselse (rolig / opphisset). Emosjonelle engasjement data ble derfor samlet, ved hjelp av automatisk ansikts følelser gjenkjennelse programvare som kvantifiserer emosjonell valens og en elektrodermal aktivitet koder / sensor for opphisselse 12,13. Elektrodermal aktivitet (EDA) refererer til den registrerte elektriske motstand mellom to elektroder ved en meget svak elektrisk strøm sendes mellom dem jevnt. Cacioppo, Tassinary og Berntson 14 viste at motstanden registrert varierer i henhold til motivets opphisselse. Dermed psykofysiologiske data, for eksempel valens eller opphisselse, regnes som korrelerer med emosjonelle engasjement.

<pclass = "jove_content"> Endelig kognitive engasjement data er samlet inn gjennom elektroencefalografi (EEG). EEG-måler, i hodebunnen, synkronisert elektriske aktiviteten i grupper av neuroner i hjernen. Elektriske signaler tatt opp fra hodebunnen er ofte oscillasjon og består av frekvenskomponenter. Ved konvensjonen, er disse frekvensene gruppert i sekvenser, kjent som band. For eksempel, alfa, beta og theta band er i fokus i denne studien. Ifølge nevrovitenskapelig studier 14, disse bandene reflekterer ulike kognitive prosessering evner i bestemte områder av hjernen. Således analysen av spektrale effekttetthet (PSD) av spesifikke frekvenser, kombinert med en rekke studier 7,15 på våkenhet og oppmerksomhet, tillater forskere å kvantifisere kognitive inngrep i ​​løpet av en oppgave. Som Mikulka et al. 16 bemerket, har forskning vist en direkte sammenheng mellom beta aktivitet og kognitiv årvåkenhet og en indirekte sammenheng mellom alpha end theta aktivitet og årvåkenhet. Dermed Pope, Bogart og Bartoleme 7 utviklet et engasjement indeks som beregner PSD av tre band: beta / (alfa + theta). Dette forholdet ble validert i andre studier på engasjement 16,17,18. For å karakterisere kognitiv inngrep over tid, en hurtig Fourier-transformasjon (FFT) omformer EEG-signalet fra hver aktive området (F3, F4, O1, O2) til et effektspektrum. EEG-indeksen inngrep ved tiden T beregnes av gjennomsnitt av hver inngrepsforhold i en 20 sek skyvevindu forut for tidspunktet T. Denne prosedyren gjentas hvert sekund, og en ny skyvevindu blir brukt til å oppdatere indeksen.

Siden målet med denne metoden er å gi en rik analyse av flere dimensjoner i inngrep, er datasynkronisering avgjørende. Som Leger et al. 19 minne leserne, utstyrsprodusenter sterkeste å bruke bare én datamaskin per måleverktøy for å garantere deres spesifisert presisjon leVEL. Så når flere datamaskiner er ansatt, blir synkronisering mellom opptaks datamaskiner et kritisk punkt. Opptakene kan ikke alle bli startet på nøyaktig samme tid, og hver datastrøm har sin bestemt tidsramme (f.eks sek 0 av eye tracking ≠ sek 0 av EEG eller fysiologiske data). Dette er ekstremt viktig: desynkronisering mellom datastrømmer betyr feil i kvantifisering av hver dimensjon av engasjement. Det er forskjellige måter å synkronisere samtidige fysiologiske og atferdsmessige opptak. Disse metoder kan deles i to hovedmetoder; direkte og indirekte 20. Protokollen presentert i neste avsnitt er basert på en indirekte løsning hvor en ekstern enhet, et syncbox, blir brukt til å sende transistor-transistorlogikk (TTL) signaler til alle registreringsutstyret (som vist i figur 1). Når hver del av utstyret har en annen starttid blir TTL markører registrert i loggfilene med en relativ forsinkelse. Markører blir så brukt til å justere signalene og dermed sikre riktig synkronisering etter hvert opptak. En atferdsanalyse program som lar ekstern fil integrasjon brukes for å synkronisere tidslinjen for hver datastrømmen og å utføre kvantitativ og kvalitativ analyse av hver dimensjon av engasjement.

Figur 1
Figur 1. Arkitektur av datainnsamlingssystemet. Laboratoriet miljø der atferds (eye-tracking), inneholder emosjonelle (EDA og ansikts følelser) og kognitive (EEG) forlovelses data samles mange datamaskiner. Dette reiser et synkroniserings utfordring for data som er referert på sine respektive datamaskinklokker. For å være i stand til å analysere alle data i samme referanse tid, innebærer lab oppsett en syncbox som sender TTL signaler til alle datastrømmer.nk "> Klikk her for å se en større versjon av dette tallet.

For å bedømme nøyaktigheten av metodikken i form av synkroniseringen, ble 45 sek pauser innført før hver av de mekaniske fysikk problemer. I løpet av disse pausene, fagene måtte slappe av og til å lukke øynene. Som sett i andre studier 4,9,16,17,18, bør disse pausene indusere betydelige variasjoner i samlet signal: de to pupillene prikker i eye-tracking forsvinner umiddelbart (atferds engasjement) og en umiddelbar nedgang i kognitiv engasjement (EEG signal) blir observert. Disse bestemte komponenter av signalet blir brukt til å evaluere den generelle gyldighet av synkroniseringen. Den nylige publisering av papirer som helt eller delvis er avhengige av denne synkroniseringsprosedyren, innen informasjonssystemer 19, menneske-maskin-interaksjon 21 og utdanning 9, 22, gir bevis for sin effektivitet.

Protocol

Denne protokollen fikk en etisk sertifikat fra Comité institutionnel de la recherche avec des Etres humains (CIER) de l'Université du Québec à Montréal (UQAM) som ble godkjent av HEC-Montreal for Tech3Lab forskning anlegget. Protokollen beskriver hver av de konkrete tiltak som utføres i vår lab miljø og utstyr. Selv presise programvare stier er forutsatt å avklare metodikk, er denne teknikken overførbar og kan replikeres med andre eiendoms eye-tracking, automatisk ansikts følelser anerkjennelse, elektrode…

Representative Results

Figurene 2 og 3 viser skjermbilder av resultatene av integrering og synkronisering av atferds, emosjonelle og kognitive engasjement data i en adferdsanalyse program. I begge figurene, venstre delen organiserer forsøkspersoner og kodeverk. I den midtre delen, en video (med røde prikker) viser emnet øye blikk i løpet av oppgaven. Motivets atferds engasjement kan utledes basert på hva han / hun er ute på i løpet av oppgaven og hvilke tiltak er iverksatt. I den nedre delen, er en tid da synkron…

Discussion

I form av kritiske trinnene i protokollen, må det først påpekes at datakvaliteten er alltid hovedfokus for nevrofysiologiske samling teknikker. I denne metoden, må forskningsassistenter være spesielt oppmerksom på å instruere de fagene for å minimere hodebevegelser som vil forstyrre valens overvåking (miste riktig ansikt vinkel for kameraet) eller genererer myographic artefakter i EEG. På den annen side må en balanse opprettholdes mellom ektheten av fast problemløsning og tiltak gjøres for mer ergonomisk da…

Declarações

The authors have nothing to disclose.

Acknowledgements

The authors acknowledge the financial support of the Social Sciences and Humanities Research Council of Canada (SSHERC), Natural Sciences and Engineering Research Council of Canada (NSERC), Fonds de Recherche Nature et Technologies du Québec (FQRNT) and Fonds de Recherche sur la Société et Culture du Québec (FQRSC).

Materials

EGI GSN-32  EGI n/a Dense array EEG
Netstation v.5.0 EGI n/a EEG data collection software: EEG is collected with 32-electrode dense array electroencephalography (dEEG) geodesic sensor net using Netstation acquisition software and EGI amplifiers (Electrical Geodesics, Inc). The vertex (recording site Cz) is the reference electrode for recording. Impedance is kept below 50 kΩ with a sampling rate of 250 Hz. 
Facereader v.4 Noldus n/a Facial emotion recognition software
Syncbox Noldus n/a Syncbox start the co-registration of EEG and gaze data by sending a Transistor-Transistor Logic (TTL) signal to the EGI amplifier and a keystroke signal to the Tobii Studio v 3.2.
Logitech C600  Webcam 960-000396 Webcam used to gather video data sent to mediarecorder and that will be analyzed in Facereader
The Observer XT Noldus n/a Integration and synchronization software: The Noldus Observer XT (Noldus Information Technology) is used to synchronize all behavioral, emotional and cognitive engagement data. 
On-Screen LED illumination Noldus n/a Neon positioned on computer screen in order to correctly light the face of subjects
MediaRecorder Noldus n/a Video data collection software
Tobii X60 Tobii n/a Collect eye-movement patterns :  used to record subjects’ eye movement patterns at 60Hz during the experiment. 
Tobii Studio v.3.2 Tobii n/a Eye-tracking data collection and analysis software
Analyzer 2 Brainvision n/a EEG signal processing software
Acqknowledge v.4.0 Biopac ACK100M Physiological signal acquisition and processing software
Control III germicide solution Maril Products. 10002REVA-20002-1 Disinfectant solution used with EEG helmets : recommended by EGI
Unipark QuestBack AG n/a Online survey environment

Referências

  1. Fredricks, J. A., Blumenfeld, P. C., Paris, A. H. School engagement: Potential of the concept, state of the evidence. Rev. Educ. Res. 74 (1), 59-109 (2004).
  2. Clark, R. C., Mayer, R. E. . E-learning and the Science of Instruction. , (2011).
  3. Zhang, D., Zhou, L., Briggs, R. O., Nunamaker, J. F. Instructional video in e-learning: Assessing the impact of interactive video on learning effectiveness. Inform. Manage. 43 (1), 15-27 (2006).
  4. Freeman, F. G., Mikulka, P. J., Prinzel, L. J., Scerbo, M. W. Evaluation of an adaptive automation system using three EEG indices with a visual tracking task. Biol. Psychol. 50, 61-76 (1999).
  5. Glimcher, P., Rustichini, A. Neuroeconomics: The consilience of brain and decision. Science. 306 (5695), 447-452 (2004).
  6. Lieberman, M. D. Social Cognitive neuroscience: A review of core processes. Annu. Rev. Physiol. 58, 259-289 (2007).
  7. Pope, A. T., Bogart, E. H., Bartolome, D. S. Biocybernetic system evaluates indices of operator engagement in automated task. Biol. Psychol. 40 (1-2), 187-195 (1995).
  8. Mandryk, R., Inkpen, K. Physiological indicators for the evaluation of co-located collaborative play. , (2004).
  9. Allaire-Duquette, G., Charland, P., Riopel, M. At the very root of the development of interest: Using human body contexts to improve women’s emotional engagement in introductory physics. Eur. J. Phy. Ed. 5 (2), 31-48 (2014).
  10. Bradley, M. M., Lang, P. J. Measuring emotion: The self-assessment manikin and the semantic differential. J. Behav. Ther. Exp. Psy. 25 (1), 49-59 (1994).
  11. Lang, P. J. The emotion probe: Studies of motivation and attention. Am. Psychol. 50 (5), 372-385 (1995).
  12. Ekman, P., Felt Friesen, W. false, and miserable smiles. J. Nonverbal Behav. 6 (4), 238-252 (1982).
  13. Van Kuilenburg, H., Den Uyl, M. J., Israël, M. L., Ivan, P. Advances in face and gesture analysis. , 371-372 (2008).
  14. Cacioppo, J., Tassinary, L. G., Berntson, G. G. . Handbook of Psychophysiology. , (2007).
  15. Lubar, J. F., Swartwood, M. O., Swartwood, J. N., O’Donnell, P. H. Evaluation of the effectiveness of EEG neurofeedback training for ADHD in a clinical setting as measured by changes in T.O.V.A. scores, behavioral ratings, and WISC R performance. Biofeedback Self-reg. 20 (1), (1995).
  16. Mikulka, P. J., Freeman, F. G., Scerbo, M. W. Effects of a biocybernetic system on the vigilance decrement. Hum. factors. 44 (4), 654-664 (2002).
  17. Freeman, F. G., Mikulka, P. J., Scerbo, M. W., Scott, L. An evaluation of an adaptive automation system using a cognitive vigilance task. Biol. Psychol. 67 (3), 283-297 (2004).
  18. Chaouachi, M., Chalfoun, P., Jraidi, I., Frasson, C. Affect and mental engagement: Toward adaptability for intelligent systems. Proceedings of the Twenty-Third International Florida Artificial Intelligence Research Society Conference (FLAIRS 2010), Association for the Advancement of Artificial Intelligence. , 355-360 (2010).
  19. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-LeMoyne, &. #. 2. 0. 1. ;. Precision is in the eye of the beholder: Application of eye fixation-related potentials to information systems research. J. Assoc. Inf. Syst. 15 (10), 651-678 (2014).
  20. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-Lemoyne, E. Applying eye fixation-related potentials to information systems research: Demonstration of the method during natural IS use and guidelines for research. J. Assoc. Inf. Syst. 15 (10), (2014).
  21. Courtemanche, F. . Un outil d’évaluation neurocognitive des interactions humain-machine Doctoral thesis. , (2014).
  22. Charland, P., Léger, P. M., Mercier, J., Skelling-Desmeules, Y. Assessing multiple dimensions of learner engagement during science problem solving using psychophysiological and behavioral measures. , (2014).
  23. Venables, P. H., Christie, M. J., Martin, I., Venables, P. Electrodermal activity. Techniques in Psychophysiology. , 3-67 (1980).
  24. Boucsein, W. . Electrodermal Activity. , (2012).
  25. Sarlo, M., Palomba, D., Buodo, G. M., Minghetti, R., Stegagno, L. Blood pressure changes highlight gender differences in emotional reactivity to arousing pictures. Biol. Psychol. 70 (3), 188-196 (2005).
  26. Martens, R. L., Gulikers, J., Bastiaens, T. The impact of intrinsic motivation on e-learning in authentic computer tasks. J. Comput. Assist. Lear. 20 (5), 368-376 (2004).
check_url/pt/52627?article_type=t

Play Video

Citar este artigo
Charland, P., Léger, P., Sénécal, S., Courtemanche, F., Mercier, J., Skelling, Y., Labonté-Lemoyne, E. Assessing the Multiple Dimensions of Engagement to Characterize Learning: A Neurophysiological Perspective. J. Vis. Exp. (101), e52627, doi:10.3791/52627 (2015).

View Video