Summary

Nişan Çoklu Boyutları değerlendirilmesi Öğrenme karakterize etmek: Bir Nörofizyolojik Perspektif

Published: July 01, 2015
doi:

Summary

This paper aims to describe the techniques involved in the collection and synchronization of the multiple dimensions (behavioral, affective and cognitive) of learners’ engagement during a task.

Abstract

In a recent theoretical synthesis on the concept of engagement, Fredricks, Blumenfeld and Paris1 defined engagement by its multiple dimensions: behavioral, emotional and cognitive. They observed that individual types of engagement had not been studied in conjunction, and little information was available about interactions or synergy between the dimensions; consequently, more studies would contribute to creating finely tuned teaching interventions. Benefiting from the recent technological advances in neurosciences, this paper presents a recently developed methodology to gather and synchronize data on multidimensional engagement during learning tasks. The technique involves the collection of (a) electroencephalography, (b) electrodermal, (c) eye-tracking, and (d) facial emotion recognition data on four different computers. This led to synchronization issues for data collected from multiple sources. Post synchronization in specialized integration software gives researchers a better understanding of the dynamics between the multiple dimensions of engagement. For curriculum developers, these data could provide informed guidelines for achieving better instruction/learning efficiency. This technique also opens up possibilities in the field of brain-computer interactions, where adaptive learning or assessment environments could be developed.

Introduction

Nişan öğrenmede önemli bir rol oynar. Clark ve Mayer 2 için, ne olursa olsun teslim medya "Tüm öğrenme, nişan gerektirir". Zhang ve ark. 3 de artmış öğrenci nişan gibi problem çözme ve eleştirel düşünme becerileri gibi öğrenme çıktılarını, artırabilir önerdi. Nişan tanımlama bir sorun olmaya devam etmektedir. Onların edebiyat derlemede, Fredericks, Blumenfeld'in ve Paris 1 onun çok yönlü doğası gereği nişan tanımlamıştır: "Davranışsal nişan katılımı fikrine çizer; akademik ve sosyal ya da ders dışı etkinliklere katılımı içerir. (…) Duygusal nişan öğretmenler, sınıf arkadaşları, akademisyenler ve okula olumlu ve olumsuz tepkiler kapsar ve işi yapmak için bir nesne ve etkisi istekli bağları oluşturmak olduğu tahmin edilmektedir. Son olarak, bilişsel nişan zihinsel yatırım fikri üzerine çekiyor; Bu düşünce ve çaba yerde sınıflandırılmamış uygulamak için istekli içeriyoraçıklı karmaşık fikirleri ve master zor becerileri kavrayabilme. "

Fredericks, Blumenfeld'in ve Paris 1 de davranış, duygu ve biliş odaklanma, nişan kavramı içinde, öğrenme zengin bir karakterizasyonu sağlayabilir iddia etti. Bu yazarlar araştırma sağlam bir vücut ayrı angajman her bileşeni adresleri işaret, ancak bu bileşenler birlikte okudu olmasaydı. Onlar da az bilgi boyutları arasında ve daha fazla çalışma ince ayarlı öğretim müdahaleleri planlama katkıda ki etkileşimleri hakkında mevcut olduğu görülmektedir. Bu yönde bir adım olarak, bu kağıt toplamak ve öğrenme görevleri sırasında, davranışsal, duygusal ve bilişsel nişan üzerinde eşzamanlı nicel ve nitel veriler, analiz için geliştirilmiş bir araştırma yöntem anlatılmaktadır.

Eğitim içine Nörobilim getirmek

Behavözellikle öncesi ve sonrası testler arasındaki uzun süre üzerinde meydana gelen bilgi ve davranış değişiklikleri üzerinde duruldu araştırma tasarımları ve saat arayla, hafta boyunca: ior ve dolayısıyla davranış nişan, uzun eğitimde çalışmalarının odak noktası olmuştur , ay veya yıl. Son iki boyut dışarıdan sistematik gözlemlenebilir olmadığı için, davranışsal, duygusal ve bilişsel nişan ayırt bir sorun olmaya devam etmektedir. Biliş ve duyguların ya gözlemlerden anlaşılmaktadır ya da öz-rapor önlemleri ile değerlendirilmelidir. Bakış harici açıdan bakıldığında, öğrencilerin işlerini mümkün olduğunca çabuk veya belirli bir içeriği master derin düzey öğrenme stratejileri kullanarak olarak halletmek için çalışıyoruz olmadığını belirlemek güçtür. Aslına bakılırsa, Fredericks, Blumenfeld'in ve Paris 1 bilişsel nişan doğrudan, nesnel önlemler kullanarak herhangi yayınlanmış çalışmaları bulamadık.

Son teknolojik gelişmelersinirbilimlerden alan eğitiminde araştırma için yeni imkanlar yaratmıştır. Yeni veri toplama yöntemleri ve nöro ergonomi alanında geliştirilen analiz algoritmaları öğrenme görevleri sırasında nitel ve nicel araştırmalar için çok umut verici görünüyor. Ekonomi, psikoloji, pazarlama ve ergonomi gibi diğer disiplinler, bir süre 4-8 bilişsel nişan değerlendirmek için nörofizyolojik ölçümler kullanılarak yapılmıştır. Verimli analiz algoritmaları ile birleştiğinde nörofizyolojik tedbirler, bir o bozmadan bir fenomen incelemek için izin verir. Doğaları gereği, öz-bildirim anketleri öğrenme öğrencileri ayırın. Nörofizyolojik önlemler araştırma tasarımları daha otantik öğrenme ortamlarında yürütülecek izin verir. Bu araçlar vb kalp atışlarının izlenmesi için ekipman, solunum hızı, kan basıncı, vücut ısısı, öğrenci çapı, elektrodermal aktivite, elektroensefalografi (EEG), sayılabilir.

<stDuygusal Davranış üzerine rong> Gathering Senkronize Veriler ve Bilişsel Nişan

Temsili sonuçlar bu protokolün kullanımını takiben, bu kağıt öğrenenler, bir bilgisayar ekranında, mekanik fizik on sorunları çözmek zorunda olduğu bir çalışmanın kısmi sonuçlarını sunacak. Bu sorunlar, önceki çalışmalarda 9 geliştirildi. Gözleri her sorunun ardından, kapalı öğrenenler, problemleri çözmek ve bir 45 s mola sırasında rahatlatıcı iken nörofizyolojik veriler toplanmıştır.

Yukarıda belirtildiği gibi, davranışsal nişan veri görevi 1 gerçekleştirirken sistemi ile etkileşen bir öğrenci tarafından üretilen sorulara yazılım etkileşimleri (fare hareketleri ve tıklamaları), göz bakışları, performans ve cevapları oluşmaktadır. Bir göz-takip sistemi yazılımı etkileşimleri ve göz bakışları veri toplamak için kullanıldı. Performans verileri (bir sorunu çözmek için zaman, cevapların doğruluğu) bir toplandıgörevi sunmak için kullanılan anket sitesi. Bu web sitesi aynı zamanda Bradley ve Lang 10 uyarlanmış bir anket ile toplanan öz-bildirim verileri toplamak için kullanıldı. Duygusal nişan duyguların karakterizasyonu içerir. Lang 11 göre, duyguların değerlik açısından karakterize edilir (hoş / nahoş) ve uyarılma (sakin / uyandırdı). Duygusal nişan verileri buna göre duygusal değerlik ve uyarılma 12,13 için bir elektrodermal aktivite kodlayıcı / sensörü rakamlarla otomatik yüz duygu tanıma yazılımı kullanarak, toplandı. (EDA) çok zayıf bir elektrik akımı sürekli, aralarında geçirilir iki elektrot arasında kaydedilen elektrik direnci belirtir. Cacioppo'nun, Tassinary ve Berntson 14 kaydedilen direnç deneğin uyarılma göre değişir gösterdi. Bu durumda, bu valans veya uyarılma olarak psiko-fizyolojik veriler, duygusal angajman bağıntılı olarak görülmektedir.

<pclass = "jove_content"> Son olarak, bilişsel nişan veri elektroensefalografi (EEG) ile toplanır. EEG tedbirler, saçlı deride, beyindeki nöronların grupların elektriksel aktivitesini senkronize. Kafa derisi ile ilgili kaydedilen elektriksel sinyaller genellikle salınımlı frekans bileşenleri ve oluşmaktadır. Geleneksel olarak, bu frekansları bantları olarak bilinen, diziler halinde gruplandırılmış. Örneğin, alfa, beta ve teta bantlar Bu çalışmanın odak noktası vardır. Sinirbilimsel çalışmalara 14 göre, bu bantlar beynin belirli bölgelerinde farklı bilişsel işleme yeteneklerini yansıtır. Böylece, uyanıklık ve dikkat konusunda çok sayıda çalışmalar 7,15 ile birlikte belirli frekanslarda güç spektral yoğunluğu (PSD) analizi, araştırmacılar bir görev sırasında bilişsel nişan ölçmek için izin verir. Mikulka ve ark., 16 belirtildiği gibi, araştırma, beta aktivitesi ve bilişsel uyanıklık ve alfa An arasındaki dolaylı ilişki arasında doğrudan bir ilişki göstermiştird teta aktivitesi ve uyanıklığı. Beta / (alfa + teta): Böylece, Papa, Bogart ve Bartoleme 7 üç bant PSD hesaplar bir nişan endeksi geliştirdi. Bu oran nişan 16,17,18 diğer çalışmalarda doğrulanmıştır. Zamanla bilişsel nişan karakterize etmek için, bir Hızlı Fourier dönüşümü (FFT) bir güç spektrumu içine her aktif sitesinde (F3, F4, O1, O2) EEG sinyali dönüştürür. T zamanında EEG nişan endeksi Bu prosedür, her saniye yeni bir kayan pencere dizini güncelleştirmek için kullanılır tekrarlanır zaman T. önceki 20 saniye kayan pencere içinde her nişan oranı ortalama hesaplanır.

Bu metodolojinin amacı angajman birden boyutları zengin bir analizini sağlamak olduğu için, veri senkronizasyonu çok önemlidir. Leger ve ark., 19 okuyucuların hatırlatır gibi, ekipman üreticileri güçlü le onların belirtilen hassasiyet garanti ölçüm aracı başına yalnızca bir bilgisayar kullanmanızı öneririzvel. Böylece, birden fazla bilgisayarda kullanıldığı zaman, kayıt bilgisayarlar arasında senkronizasyon kritik bir adımdır olur. kayıtları tüm aynı anda başlamış olamaz ve her veri akışı (örneğin, gözün sn 0 EEG ya da fizyolojik verilerin sn 0 ≠ izleme) kendine özgü bir zaman çerçevesi vardır. Bu son derece önemlidir: veri akışları arasındaki dengeden çıkmanın angajman her boyut miktarının hataları demektir. Eşzamanlı fizyolojik ve davranışsal kayıtları senkronize farklı yolları vardır. Bu yöntemler, bu iki yaklaşımın ayrılabilir; doğrudan ve dolaylı 20. Bir sonraki bölümde sunulan protokol (Şekil 1'de gösterildiği gibi) harici bir aygıt, bir syncbox, tüm kayıt ekipmanları için transistör-transistör mantığı (TTL) sinyalleri göndermek için kullanılan dolaylı bir yaklaşıma dayanmaktadır. Ekipmanın her parçası farklı bir başlangıç ​​süresine sahip olarak, TTL belirteçleri bir akrabası ile günlük dosyalarında kaydedilir gecikme. İşaretleyiciler sonra sinyalleri realign ve böylece her kayıttan sonra doğru senkronizasyon sağlamak için kullanılır. Dış dosya entegrasyonunu sağlayan bir davranış analizi yazılım programı her veri akımının zaman çizelgesi yeniden eşitlemek için ve angajman her boyutun nicel ve nitel analizler gerçekleştirmek için kullanılır.

Şekil 1
Veri Toplama Sistemi Şekil 1. Mimarlık. Laboratuar ortamı olan davranışsal (eye-tracking), tahsil duygusal (EDA ve yüz duygu) ve bilişsel (EEG) nişan verileri pek çok bilgisayar içeriyor. Bu kendi bilgisayar saatler başvurulan veri senkronizasyon sorununu da ortaya çıkarmaktadır. Aynı referans süre içinde tüm verileri analiz edebilmek için, laboratuar kurulumu tüm veri akışları TTL sinyalleri gönderen bir syncbox içerir."nk> bu rakamın daha büyük bir versiyonunu görmek için lütfen buraya tıklayınız.

Senkronizasyon açısından metodoloji hassasiyetini değerlendirmek için, 45 saniye duraklar mekanik fizik problemleri her önce tanıtıldı. Bu duraklamalar sırasında, denekler dinlenmek ve gözlerini kapatmak zorunda kaldı. Diğer çalışmalarda 4,9,16,17,18 görüldüğü gibi, bu duraklar toplanan sinyal önemli farklılıklar neden gerekir: İki göz öğrenci nokta eye-tracking yok hemen (davranışsal angajman) ve bilişsel nişan ani bir damla (EEG sinyali) görülmektedir. Sinyalin Bu özel bileşenler senkronizasyon genel geçerliliğini değerlendirmek için kullanılır. kısmen veya tamamen bilgi sistemleri 19, insan-makine etkileşimleri 21 ve eğitim 9, 22 alanlarında, bu senkronizasyon prosedürü güveniyor gazetelerin son yayın, etkinliğinin kanıt sağlar.

Protocol

Bu protokol Tech3Lab araştırma tesisi için HEC-Montreal tarafından kabul edildi Comite institutionnel de la recherche avec des êtres humains (CIER) de l'Université du Québec Montréal à (uqam) bir etik sertifika aldı. protokolü laboratuar ortamında ve ekipman yapılmaktadır belirli adımların her biri açıklanmaktadır. Kesin yazılım yolları metodolojisini netleştirmek için sağlanan olmasına rağmen, bu tekniğin devredilemez ve diğer mülkiyet göz izleme, otomatik yüz tanıma duygu, elektrod…

Representative Results

Davranışsal analiz yazılım uygulamasında entegrasyon ve davranışsal, duygusal ve bilişsel nişan verilerinin senkronizasyonu sonuçlarının 2 ve 3 ekran rakamlar. Her iki şekillerde, sol bölümünde araştırma konularını ve kodlama şemasını düzenlemektedir. Orta kısmında, (kırmızı nokta) ile video görevi sırasında öznenin gözü bakışları gösterir. Kişinin davranış nişan almış ne o / o görev sırasında bakıyor ve hangi eylemlerin dayalı var…

Discussion

Protokolü kapsamında kritik adımlar açısından, ilk veri kalitesi nörofizyolojik toplama teknikleri ana odak noktası her zaman olduğu işaret edilmelidir. Bu yöntemde, araştırma görevlileri (kamera için doğru yüz açısı kaybetme) değerlik izleme müdahale veya EEG myographic eserler üretecek kafa hareketleri en aza indirmek için konuların talimat özel dikkat gerekmektedir. Öte yandan, bir denge daha ergonomik veri toplama için yapılan gerçek problem çözme ve müdahalelerin orijinalliğini ara…

Declarações

The authors have nothing to disclose.

Acknowledgements

The authors acknowledge the financial support of the Social Sciences and Humanities Research Council of Canada (SSHERC), Natural Sciences and Engineering Research Council of Canada (NSERC), Fonds de Recherche Nature et Technologies du Québec (FQRNT) and Fonds de Recherche sur la Société et Culture du Québec (FQRSC).

Materials

EGI GSN-32  EGI n/a Dense array EEG
Netstation v.5.0 EGI n/a EEG data collection software: EEG is collected with 32-electrode dense array electroencephalography (dEEG) geodesic sensor net using Netstation acquisition software and EGI amplifiers (Electrical Geodesics, Inc). The vertex (recording site Cz) is the reference electrode for recording. Impedance is kept below 50 kΩ with a sampling rate of 250 Hz. 
Facereader v.4 Noldus n/a Facial emotion recognition software
Syncbox Noldus n/a Syncbox start the co-registration of EEG and gaze data by sending a Transistor-Transistor Logic (TTL) signal to the EGI amplifier and a keystroke signal to the Tobii Studio v 3.2.
Logitech C600  Webcam 960-000396 Webcam used to gather video data sent to mediarecorder and that will be analyzed in Facereader
The Observer XT Noldus n/a Integration and synchronization software: The Noldus Observer XT (Noldus Information Technology) is used to synchronize all behavioral, emotional and cognitive engagement data. 
On-Screen LED illumination Noldus n/a Neon positioned on computer screen in order to correctly light the face of subjects
MediaRecorder Noldus n/a Video data collection software
Tobii X60 Tobii n/a Collect eye-movement patterns :  used to record subjects’ eye movement patterns at 60Hz during the experiment. 
Tobii Studio v.3.2 Tobii n/a Eye-tracking data collection and analysis software
Analyzer 2 Brainvision n/a EEG signal processing software
Acqknowledge v.4.0 Biopac ACK100M Physiological signal acquisition and processing software
Control III germicide solution Maril Products. 10002REVA-20002-1 Disinfectant solution used with EEG helmets : recommended by EGI
Unipark QuestBack AG n/a Online survey environment

Referências

  1. Fredricks, J. A., Blumenfeld, P. C., Paris, A. H. School engagement: Potential of the concept, state of the evidence. Rev. Educ. Res. 74 (1), 59-109 (2004).
  2. Clark, R. C., Mayer, R. E. . E-learning and the Science of Instruction. , (2011).
  3. Zhang, D., Zhou, L., Briggs, R. O., Nunamaker, J. F. Instructional video in e-learning: Assessing the impact of interactive video on learning effectiveness. Inform. Manage. 43 (1), 15-27 (2006).
  4. Freeman, F. G., Mikulka, P. J., Prinzel, L. J., Scerbo, M. W. Evaluation of an adaptive automation system using three EEG indices with a visual tracking task. Biol. Psychol. 50, 61-76 (1999).
  5. Glimcher, P., Rustichini, A. Neuroeconomics: The consilience of brain and decision. Science. 306 (5695), 447-452 (2004).
  6. Lieberman, M. D. Social Cognitive neuroscience: A review of core processes. Annu. Rev. Physiol. 58, 259-289 (2007).
  7. Pope, A. T., Bogart, E. H., Bartolome, D. S. Biocybernetic system evaluates indices of operator engagement in automated task. Biol. Psychol. 40 (1-2), 187-195 (1995).
  8. Mandryk, R., Inkpen, K. Physiological indicators for the evaluation of co-located collaborative play. , (2004).
  9. Allaire-Duquette, G., Charland, P., Riopel, M. At the very root of the development of interest: Using human body contexts to improve women’s emotional engagement in introductory physics. Eur. J. Phy. Ed. 5 (2), 31-48 (2014).
  10. Bradley, M. M., Lang, P. J. Measuring emotion: The self-assessment manikin and the semantic differential. J. Behav. Ther. Exp. Psy. 25 (1), 49-59 (1994).
  11. Lang, P. J. The emotion probe: Studies of motivation and attention. Am. Psychol. 50 (5), 372-385 (1995).
  12. Ekman, P., Felt Friesen, W. false, and miserable smiles. J. Nonverbal Behav. 6 (4), 238-252 (1982).
  13. Van Kuilenburg, H., Den Uyl, M. J., Israël, M. L., Ivan, P. Advances in face and gesture analysis. , 371-372 (2008).
  14. Cacioppo, J., Tassinary, L. G., Berntson, G. G. . Handbook of Psychophysiology. , (2007).
  15. Lubar, J. F., Swartwood, M. O., Swartwood, J. N., O’Donnell, P. H. Evaluation of the effectiveness of EEG neurofeedback training for ADHD in a clinical setting as measured by changes in T.O.V.A. scores, behavioral ratings, and WISC R performance. Biofeedback Self-reg. 20 (1), (1995).
  16. Mikulka, P. J., Freeman, F. G., Scerbo, M. W. Effects of a biocybernetic system on the vigilance decrement. Hum. factors. 44 (4), 654-664 (2002).
  17. Freeman, F. G., Mikulka, P. J., Scerbo, M. W., Scott, L. An evaluation of an adaptive automation system using a cognitive vigilance task. Biol. Psychol. 67 (3), 283-297 (2004).
  18. Chaouachi, M., Chalfoun, P., Jraidi, I., Frasson, C. Affect and mental engagement: Toward adaptability for intelligent systems. Proceedings of the Twenty-Third International Florida Artificial Intelligence Research Society Conference (FLAIRS 2010), Association for the Advancement of Artificial Intelligence. , 355-360 (2010).
  19. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-LeMoyne, &. #. 2. 0. 1. ;. Precision is in the eye of the beholder: Application of eye fixation-related potentials to information systems research. J. Assoc. Inf. Syst. 15 (10), 651-678 (2014).
  20. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-Lemoyne, E. Applying eye fixation-related potentials to information systems research: Demonstration of the method during natural IS use and guidelines for research. J. Assoc. Inf. Syst. 15 (10), (2014).
  21. Courtemanche, F. . Un outil d’évaluation neurocognitive des interactions humain-machine Doctoral thesis. , (2014).
  22. Charland, P., Léger, P. M., Mercier, J., Skelling-Desmeules, Y. Assessing multiple dimensions of learner engagement during science problem solving using psychophysiological and behavioral measures. , (2014).
  23. Venables, P. H., Christie, M. J., Martin, I., Venables, P. Electrodermal activity. Techniques in Psychophysiology. , 3-67 (1980).
  24. Boucsein, W. . Electrodermal Activity. , (2012).
  25. Sarlo, M., Palomba, D., Buodo, G. M., Minghetti, R., Stegagno, L. Blood pressure changes highlight gender differences in emotional reactivity to arousing pictures. Biol. Psychol. 70 (3), 188-196 (2005).
  26. Martens, R. L., Gulikers, J., Bastiaens, T. The impact of intrinsic motivation on e-learning in authentic computer tasks. J. Comput. Assist. Lear. 20 (5), 368-376 (2004).
check_url/pt/52627?article_type=t

Play Video

Citar este artigo
Charland, P., Léger, P., Sénécal, S., Courtemanche, F., Mercier, J., Skelling, Y., Labonté-Lemoyne, E. Assessing the Multiple Dimensions of Engagement to Characterize Learning: A Neurophysiological Perspective. J. Vis. Exp. (101), e52627, doi:10.3791/52627 (2015).

View Video