Summary

神経生理学の視点:学習を特徴づけるために、エンゲージメントの複数の次元を評価します

Published: July 01, 2015
doi:

Summary

This paper aims to describe the techniques involved in the collection and synchronization of the multiple dimensions (behavioral, affective and cognitive) of learners’ engagement during a task.

Abstract

In a recent theoretical synthesis on the concept of engagement, Fredricks, Blumenfeld and Paris1 defined engagement by its multiple dimensions: behavioral, emotional and cognitive. They observed that individual types of engagement had not been studied in conjunction, and little information was available about interactions or synergy between the dimensions; consequently, more studies would contribute to creating finely tuned teaching interventions. Benefiting from the recent technological advances in neurosciences, this paper presents a recently developed methodology to gather and synchronize data on multidimensional engagement during learning tasks. The technique involves the collection of (a) electroencephalography, (b) electrodermal, (c) eye-tracking, and (d) facial emotion recognition data on four different computers. This led to synchronization issues for data collected from multiple sources. Post synchronization in specialized integration software gives researchers a better understanding of the dynamics between the multiple dimensions of engagement. For curriculum developers, these data could provide informed guidelines for achieving better instruction/learning efficiency. This technique also opens up possibilities in the field of brain-computer interactions, where adaptive learning or assessment environments could be developed.

Introduction

エンゲージメントは、学習に重要な役割を果たしています。クラークとメイヤー2の場合は、関係なく、配信媒体の「すべての学習は、関与を必要とします」。 Zhang 3も増加し、学生の関与は、このような問題解決と批判的思考スキルなどの学習成果を向上させることができることを示唆しました。婚約を定義することは課題です。彼らの文献レビューでは、フレドリクス、Blumenfeld、パリ1は、その多面性によって係合を定義し、「行動係合は参加の考えに引きます。それは学問や社会や課外活動への関与を含んでいます。 (…)感情的な関与は、先生、クラスメート、学者、学校に正と負の反応を包含し、仕事をすることを目的と影響力意欲との結びつきを作成するためと推定されます。最後に、認知的関与は、精神的な投資の考えに描きます。それは思いやりと労力のNECを発揮する意欲を内蔵します要な複雑なアイデアやマスター難しいスキルを理解します。」

フレドリクス、Blumenfeld、パリ1も行動、感情、および認知の焦点は、エンゲージメントの概念の範囲内で、学習の豊かな特徴付けを提供することができることを主張しました。これらの著者は、研究の堅牢な本体は別途契約の各コンポーネントに対応していることを指摘したが、これらのコンポーネントは、連携して研究されていませんでした。彼らはまた、ほとんど情報が次元間、より研究は微調整の教育介入の計画に貢献できることを相互作用について利用可能であることを観察しました。その方向への一歩として、本稿では、学習作業中に、行動、感情的および認知的関与に、同期的、定量的および定性的なデータを収集し、分析するために開発された研究方法を説明します。

教育に神経科学の持ち込み

Behav主に前後のテストの間の時間の長い期間にわたって発生する知識や行動の変化に焦点を当てた研究のデザイン、および時間の間隔、週間:IOR、その結果、行動の係合は、長い教育の研究の中心的な焦点となっています、月または年。最後の二つの次元が外部体系的に観察されないため、行動、感情的、および認知的関与とを識別することは課題です。認知と感情はどちらの観測から推測または自己報告尺度で評価されなければなりません。ビューの外部ポイントからは、学生が自分の仕事は、できるだけ迅速に行わ取得しようとしたり、特定のコンテンツをマスターする、深いレベルの学習戦略を使用しているかどうかを判断することは依然として困難です。実際、フレドリクス、Blumenfeld、パリ1は認知的関与を直接、客観的尺度を使用して任意の発表された研究を見つけることができませんでした。

における最近の技術開発神経科学の分野は​​、教育研究のための新たな可能性を作成しました。 ニューロ人間工学の分野で開発された新しいデータ収集方法と分析アルゴリズムは、タスクを学習中に定性的および定量的な研究のために非常に有望に見えます。このような経済学、心理学、マーケティング、人間工学などの他の分野には、いくつかの時間4-8のための認知的関与を評価するために、神経生理学的測定値を使用しています。効率的な解析アルゴリズムと結合された神経生理学的措置は、一つはそれを乱すことなく、現象を研究することができます。その性質上、自己報告アンケートは、学習の学生を外します。神経生理学的測定値は、研究のデザインは、より本格的な学習環境で行うことを可能にします。これらのツールは、心拍数を監視するための装置、呼吸数、血圧、体温、瞳孔径、皮膚電気活動、脳波(EEG)を含みます。

<st行動、感情、および認知的関与に>収集データを同期栄

代表的な結果は、このプロトコルの使用を以下のように、本論文では、学習者が、コンピュータの画面上で、機械的な物理学の10の問題を解決しなければならなかったした研究の結果の一部を紹介します。これらの問題は、以前の研究9に開発されました。彼らの目は、それぞれの問題の後、クローズ学習者は、問題を解決し、45秒休憩中にリラックスしている間の神経生理学的データを収集しました。

前述したように、行動締結データは、タスク1を達成しながら、システムと対話学習者によって生成質問へのソフトウェアの相互作用(マウスの動きやクリック)、視線、パフォーマンスと回答で構成されています。視線追跡システムは、ソフトウェアの相互作用および視線データを収集するために使用されました。パフォーマンスデータ(問題を解決するための時間、回答の正確さ)を収集しましたタスクを提示するために使用された調査のウェブサイト。このウェブサイトはまた、ブラッドリーとラング10から適応アンケートで集め自己報告データを収集するために使用されました。感情的な関与は、感情の特徴付けを含みます。ラング11によると、感情が原子価の点で特徴づけられる(楽しい/不快)と覚醒(冷静/興奮)。感情的な締結データは、それに応じて感情価と覚醒12,13のための電気活動のエンコーダ/センサを定量化し、自動顔感情認識ソフトウェアを使用して、収集しました。電気活動(EDA)は、非常に弱い電流が定常的にそれらの間に渡された二つの電極の間に記録された電気抵抗を指します。 Cacioppo、TassinaryとBerntson 14は、記録された抵抗は、被験者の覚醒に応じて変化することを示しました。したがって、このような原子価や覚醒などの精神生理学的データは、感情的な関与の相関として考えられています。

<pクラス= "jove_content">最後に、認知的関与のデータは、脳波(EEG)を介して収集されます。 EEG対策は、頭皮上で、脳内のニューロン群の電気的活動を同期。頭皮からの記録された電気信号は、しばしば、発振周波数成分で構成されています。慣例では、これらの周波数はバンドとして知られ、配列中にグループ化されています。例えば、α、βおよびシータバンドが本研究の焦点です。神経科学の研究14によると、これらのバンドは、脳の特定の領域に異なる認知処理能力を反映しています。したがって、覚醒および注意に関する多くの研究7,15と組み合わせる特定の周波数のパワースペクトル密度(PSD)の分析は、研究者が作業中に、認知の係合を定量化することができます。ミクルカ 16は、上述のように、研究はベータ活性および認知覚醒とアルファANとの間の間接的な関係との間の直接的な関係を示していますDシータ活性および覚醒。 β/(α+θ):このように、教皇、ボガートとBartoleme 7は、3つのバンドのPSDを計算係指標を開発しました。この比率は、婚約16,17,18の他の研究で確認されました。経時認知係合を特徴付けるために、高速フーリエ変換(FFT)は、パワースペクトルに各活性部位(F3、F4、O1、O2)からのEEG信号を変換します。時刻TにおけるEEG係合指数この手​​順は、毎秒、新しいスライディングウィンドウは、インデックスを更新するために使用される繰り返される時間Tの前の20秒のスライディングウィンドウ内の各係合比の平均値によって計算されます。

この方法の目的は、係合多次元の豊富な分析を提供することであるため、データの同期が重要です。レジェ 19は、読者を思い出させるように、機器メーカーが強くル彼らの指定された精度を保証するために、測定ツールごとに1つだけのコンピュータを使用することをお勧めしますVEL。したがって、複数のコンピュータが使用されるとき、記録のコンピュータとの同期が重要なステップとなります。記録はすべて正確に同じ時に開始することができず、各データストリームは、その特定の時間枠(≠EEGまたは生理学的データの0秒のアイトラッキングの例えば 、0秒)を有しています。これは非常に重要である:データストリーム間の非同期化は、関与の各次元の定量化のエラーを意味します。同時生理学的および行動の記録を同期させる別の方法があります。これらの方法は、2つの主なアプローチに分けることができます。直接的および間接的な20。次のセクションで説明プロトコル( 図1に示されるように)外部装置、syncboxは、すべての記録装置に、トランジスタ-トランジスタ論理(TTL)信号を送信するために使用される間接的なアプローチに基づいています。各機器は、異なる開始時間を有するように、TTLマーカーは、相対して、ログファイルに記録されています遅延。マーカーは、その後、信号を再編成し、従って、各記録後の適切な同期を確保するために使用されます。外部ファイルの統合を可能にする行動分析ソフトウェアプログラムは、各データストリームのタイムラインを再同期させるために係合の各次元の定量的および定性的な分析を実行するために使用されます。

図1
係データが収集されている(EDAと顔面感情)感情や認知データ収集システムの図1.アーキテクチャ。行動(視線追跡)におけるラボ環境、(EEG)は、多くのコンピュータが含まれます。これは、それぞれのコンピュータのクロックに参照されるデータの同期の課題を提起します。同じ基準時間内のすべてのデータを分析できるようにするために、実験室の設定は、すべてのデータストリームをTTL信号を送るsyncboxを含みます。NK ">この図の拡大版を表示するには、こちらをクリックしてください。

同期の点で方法論の精度を評価するために、45秒の一時停止は、機械的な物理学の問題のそれぞれの前に導入しました。これらの一時停止中に、被験者はリラックスして、彼らの目を閉じなければなりませんでした。 4,9,16,17,18他の研究に見られるように、これらの一時停止は、収集された信号の大幅な変動を誘導する必要があります。アイトラッキング中の2つの瞳ドットはすぐに(行動係)を消失し、認知的関与が即座に低下(EEG信号)が観測されます。信号のこれらの特定の構成要素は、同期の一般的な有効性を評価するために使用されます。完全または部分的に情報システム19、人間-機械相互作用21と教育9、22の分野で、この同期手順に依存している論文の最近の刊行物は、その有効性の証拠を提供します。

Protocol

このプロトコルは、Tech3Lab研究施設のためのHEC-モントリオールによって承認されたComitéinstitutionnel·デ·ラ·RECHERCHE AVEC DESêtreshumains(CIER)ドゥ大学ケベックモントリオールà(UQAM)から倫理的な証明書を受け取りました。プロトコルは、私たちのラボ環境や機器で実行される特定の各手順を説明しています。正確なソフトウェアパスが方法論を明確にするために設けられているが、この技術?…

Representative Results

行動解析ソフトウェアアプリケーションの統合や、行動の感情や認知的関与のデータの同期の結果の2及び図3のスクリーンショットを図 。両方の図において、左側のセクションには、研究対象と符号化方式を開催しています。中間部では、(赤い点で)ビデオは、タスク中の被験者の視線を示しています。被験者の行動の婚約は、彼/彼女がタスクとどのような?…

Discussion

プロトコル内の重要なステップの観点では、最初のデータの品質が常に神経生理学的収集技術のための主要な焦点であることが指摘されるべきです。この方法では、研究支援者は、(カメラの正しいフェースアングルを失う)価のモニタリング妨害またはEEGでmyographic成果物が生成されます頭の動きを最小限に抑えるために被験者に指示に特別な注意を払う必要があります。一方、バランスは…

Declarações

The authors have nothing to disclose.

Acknowledgements

The authors acknowledge the financial support of the Social Sciences and Humanities Research Council of Canada (SSHERC), Natural Sciences and Engineering Research Council of Canada (NSERC), Fonds de Recherche Nature et Technologies du Québec (FQRNT) and Fonds de Recherche sur la Société et Culture du Québec (FQRSC).

Materials

EGI GSN-32  EGI n/a Dense array EEG
Netstation v.5.0 EGI n/a EEG data collection software: EEG is collected with 32-electrode dense array electroencephalography (dEEG) geodesic sensor net using Netstation acquisition software and EGI amplifiers (Electrical Geodesics, Inc). The vertex (recording site Cz) is the reference electrode for recording. Impedance is kept below 50 kΩ with a sampling rate of 250 Hz. 
Facereader v.4 Noldus n/a Facial emotion recognition software
Syncbox Noldus n/a Syncbox start the co-registration of EEG and gaze data by sending a Transistor-Transistor Logic (TTL) signal to the EGI amplifier and a keystroke signal to the Tobii Studio v 3.2.
Logitech C600  Webcam 960-000396 Webcam used to gather video data sent to mediarecorder and that will be analyzed in Facereader
The Observer XT Noldus n/a Integration and synchronization software: The Noldus Observer XT (Noldus Information Technology) is used to synchronize all behavioral, emotional and cognitive engagement data. 
On-Screen LED illumination Noldus n/a Neon positioned on computer screen in order to correctly light the face of subjects
MediaRecorder Noldus n/a Video data collection software
Tobii X60 Tobii n/a Collect eye-movement patterns :  used to record subjects’ eye movement patterns at 60Hz during the experiment. 
Tobii Studio v.3.2 Tobii n/a Eye-tracking data collection and analysis software
Analyzer 2 Brainvision n/a EEG signal processing software
Acqknowledge v.4.0 Biopac ACK100M Physiological signal acquisition and processing software
Control III germicide solution Maril Products. 10002REVA-20002-1 Disinfectant solution used with EEG helmets : recommended by EGI
Unipark QuestBack AG n/a Online survey environment

Referências

  1. Fredricks, J. A., Blumenfeld, P. C., Paris, A. H. School engagement: Potential of the concept, state of the evidence. Rev. Educ. Res. 74 (1), 59-109 (2004).
  2. Clark, R. C., Mayer, R. E. . E-learning and the Science of Instruction. , (2011).
  3. Zhang, D., Zhou, L., Briggs, R. O., Nunamaker, J. F. Instructional video in e-learning: Assessing the impact of interactive video on learning effectiveness. Inform. Manage. 43 (1), 15-27 (2006).
  4. Freeman, F. G., Mikulka, P. J., Prinzel, L. J., Scerbo, M. W. Evaluation of an adaptive automation system using three EEG indices with a visual tracking task. Biol. Psychol. 50, 61-76 (1999).
  5. Glimcher, P., Rustichini, A. Neuroeconomics: The consilience of brain and decision. Science. 306 (5695), 447-452 (2004).
  6. Lieberman, M. D. Social Cognitive neuroscience: A review of core processes. Annu. Rev. Physiol. 58, 259-289 (2007).
  7. Pope, A. T., Bogart, E. H., Bartolome, D. S. Biocybernetic system evaluates indices of operator engagement in automated task. Biol. Psychol. 40 (1-2), 187-195 (1995).
  8. Mandryk, R., Inkpen, K. Physiological indicators for the evaluation of co-located collaborative play. , (2004).
  9. Allaire-Duquette, G., Charland, P., Riopel, M. At the very root of the development of interest: Using human body contexts to improve women’s emotional engagement in introductory physics. Eur. J. Phy. Ed. 5 (2), 31-48 (2014).
  10. Bradley, M. M., Lang, P. J. Measuring emotion: The self-assessment manikin and the semantic differential. J. Behav. Ther. Exp. Psy. 25 (1), 49-59 (1994).
  11. Lang, P. J. The emotion probe: Studies of motivation and attention. Am. Psychol. 50 (5), 372-385 (1995).
  12. Ekman, P., Felt Friesen, W. false, and miserable smiles. J. Nonverbal Behav. 6 (4), 238-252 (1982).
  13. Van Kuilenburg, H., Den Uyl, M. J., Israël, M. L., Ivan, P. Advances in face and gesture analysis. , 371-372 (2008).
  14. Cacioppo, J., Tassinary, L. G., Berntson, G. G. . Handbook of Psychophysiology. , (2007).
  15. Lubar, J. F., Swartwood, M. O., Swartwood, J. N., O’Donnell, P. H. Evaluation of the effectiveness of EEG neurofeedback training for ADHD in a clinical setting as measured by changes in T.O.V.A. scores, behavioral ratings, and WISC R performance. Biofeedback Self-reg. 20 (1), (1995).
  16. Mikulka, P. J., Freeman, F. G., Scerbo, M. W. Effects of a biocybernetic system on the vigilance decrement. Hum. factors. 44 (4), 654-664 (2002).
  17. Freeman, F. G., Mikulka, P. J., Scerbo, M. W., Scott, L. An evaluation of an adaptive automation system using a cognitive vigilance task. Biol. Psychol. 67 (3), 283-297 (2004).
  18. Chaouachi, M., Chalfoun, P., Jraidi, I., Frasson, C. Affect and mental engagement: Toward adaptability for intelligent systems. Proceedings of the Twenty-Third International Florida Artificial Intelligence Research Society Conference (FLAIRS 2010), Association for the Advancement of Artificial Intelligence. , 355-360 (2010).
  19. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-LeMoyne, &. #. 2. 0. 1. ;. Precision is in the eye of the beholder: Application of eye fixation-related potentials to information systems research. J. Assoc. Inf. Syst. 15 (10), 651-678 (2014).
  20. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-Lemoyne, E. Applying eye fixation-related potentials to information systems research: Demonstration of the method during natural IS use and guidelines for research. J. Assoc. Inf. Syst. 15 (10), (2014).
  21. Courtemanche, F. . Un outil d’évaluation neurocognitive des interactions humain-machine Doctoral thesis. , (2014).
  22. Charland, P., Léger, P. M., Mercier, J., Skelling-Desmeules, Y. Assessing multiple dimensions of learner engagement during science problem solving using psychophysiological and behavioral measures. , (2014).
  23. Venables, P. H., Christie, M. J., Martin, I., Venables, P. Electrodermal activity. Techniques in Psychophysiology. , 3-67 (1980).
  24. Boucsein, W. . Electrodermal Activity. , (2012).
  25. Sarlo, M., Palomba, D., Buodo, G. M., Minghetti, R., Stegagno, L. Blood pressure changes highlight gender differences in emotional reactivity to arousing pictures. Biol. Psychol. 70 (3), 188-196 (2005).
  26. Martens, R. L., Gulikers, J., Bastiaens, T. The impact of intrinsic motivation on e-learning in authentic computer tasks. J. Comput. Assist. Lear. 20 (5), 368-376 (2004).
check_url/pt/52627?article_type=t

Play Video

Citar este artigo
Charland, P., Léger, P., Sénécal, S., Courtemanche, F., Mercier, J., Skelling, Y., Labonté-Lemoyne, E. Assessing the Multiple Dimensions of Engagement to Characterize Learning: A Neurophysiological Perspective. J. Vis. Exp. (101), e52627, doi:10.3791/52627 (2015).

View Video