Summary

Оценивая различные аспекты помолвка с чертой обучения: нейрофизиологической перспективы

Published: July 01, 2015
doi:

Summary

This paper aims to describe the techniques involved in the collection and synchronization of the multiple dimensions (behavioral, affective and cognitive) of learners’ engagement during a task.

Abstract

In a recent theoretical synthesis on the concept of engagement, Fredricks, Blumenfeld and Paris1 defined engagement by its multiple dimensions: behavioral, emotional and cognitive. They observed that individual types of engagement had not been studied in conjunction, and little information was available about interactions or synergy between the dimensions; consequently, more studies would contribute to creating finely tuned teaching interventions. Benefiting from the recent technological advances in neurosciences, this paper presents a recently developed methodology to gather and synchronize data on multidimensional engagement during learning tasks. The technique involves the collection of (a) electroencephalography, (b) electrodermal, (c) eye-tracking, and (d) facial emotion recognition data on four different computers. This led to synchronization issues for data collected from multiple sources. Post synchronization in specialized integration software gives researchers a better understanding of the dynamics between the multiple dimensions of engagement. For curriculum developers, these data could provide informed guidelines for achieving better instruction/learning efficiency. This technique also opens up possibilities in the field of brain-computer interactions, where adaptive learning or assessment environments could be developed.

Introduction

Участие играет решающую роль в процессе обучения. Для Кларка и Майер 2 ", все обучение требует привлечения", независимо от доставки информации. Чжан и др. 3 также предположил, что более активное участие студент может улучшить результаты обучения, такие как решение проблем и навыков критического мышления. Определение взаимодействия остается проблемой. В их обзоре литературы, Фредрикс, Блюменфельд и Париж 1 определяется участие в его многогранности: "Поведенческие участие опирается на идеи участия; она включает в себя участие в академических и социальных или внеклассных мероприятий. (…) Эмоциональное взаимодействие охватывает положительные и отрицательные реакции на учителей, одноклассников, ученых и школу, и предполагается создать связь с объекта и влияние готовности, чтобы сделать работу. Наконец, познавательный участие опирается на идеи психического инвестиций; она включает в себя заботу и готовность приложить усилия NECобходимо понять сложные идеи и мастер трудные навыки ".

Фредрикс, Блюменфельд и Париж 1 также заявил, что основное внимание на поведение, эмоции и познания, в рамках концепции взаимодействия, могут обеспечить более богатый характеристику обучения. Эти авторы отметили, что надежный корпус исследований посвящено каждый компонент взаимодействия по отдельности, но эти компоненты не были изучены в сочетании. Они также отметили, что имеется мало информации о взаимодействии между размерами и что больше исследования могут внести свой вклад в планирование точно настроенные вмешательства обучения. В качестве первого шага в этом направлении, эта статья описывает методологию исследования, которая была разработана для сбора и анализа количественных и качественных данных, синхронно, на поведенческом, эмоциональном и когнитивном участия в процессе обучения задач.

Приведение нейронаук в образовании

BehavIOR, и, следовательно, поведенческая участие, уже давно центре внимания исследований в области образования: научно-исследовательские проекты, ориентированные в основном на изменения в знаниях и поведении, происходящих в течение длительных периодов времени, между пре- и пост-тестов, а на интервалах часов, недель , месяцев или лет. Дискриминация между поведенческой, эмоциональной, когнитивной и взаимодействия остается проблемой, потому что последние два измерения систематически не наблюдается извне. Познание и эмоции должны быть либо выведены из наблюдений или оценены с самоотчетов. С внешней точки зрения, по-прежнему трудно определить, является ли пытаются получить их работу как можно быстрее или с помощью стратегии обучения глубоко уровне освоить конкретное содержание студенты. На самом деле, Фредрикс, Блюменфельд и Париж 1 не удалось найти каких-либо опубликованных исследований, используя прямые, объективных мер познавательной взаимодействия.

Последние технологические разработки вполе нейронаук создали новые возможности для исследований в области образования. Новые методы сбора данных и алгоритмы анализа, разработанные в области нейро эргономики, кажется, очень перспективным для качественных и количественных исследований в процессе обучения задач. Другие дисциплины, такие как экономика, психология, маркетинг и эргономики, были с помощью нейрофизиологических измерений для оценки когнитивных участие в течение некоторого времени 4-8. Нейрофизиологические меры, в сочетании с эффективными алгоритмами анализа, позволяют изучать явление, не нарушая его. По своей природе, самоотчета вопросников абстрагироваться студентов из обучения. Нейрофизиологические исследования позволяют мер конструкций будет осуществляться в более подлинных условий обучения. Эти инструменты включают в себя оборудование для мониторинга сердечного ритма, частоту дыхания, артериальное давление, температуру тела, диаметр зрачка, Электрическое сопротивление, электроэнцефалография (ЭЭГ) и т.д..

<stРонг> Сбор данных по синхронному на поведенческих, эмоциональных и когнитивных Обручальное

Как представитель результаты после использования этого протокола, этот документ будет представлять частичные результаты исследования, в котором учащиеся должны были решить, на экране компьютера, десять проблем в механической физики. Эти проблемы были разработаны в предыдущей работе 9. Нейрофизиологические данные были собраны в то время как учащиеся решали проблемы и отдыха во время 45 с перерыва, с закрытыми глазами, после каждой задачи.

Как упоминалось выше, данные о поведении обручальные состоят из программного обеспечения взаимодействий (движения мыши и клики), глаз взглядом, производительности и ответы на вопросы, производимых ученика, взаимодействующей с системой, а решению задачи 1. Глаз отслеживания система была использована для сбора программного обеспечения взаимодействия и данные глаз взгляд. Данные о производительности (время, чтобы решить проблему, корректность ответов) были собраны наОпрос сайт, который был использован, чтобы представить задачу. Этот веб-сайт был также использован для сбора данных самоотчета, собранные с анкетой взято из Брэдли и Лэнг 10. Эмоциональная участие включает в себя характеристику эмоций. По Ланг 11, эмоции характеризуются в терминах валентности (приятный / неприятный) и возбуждение (спокойствие / вызвали). Данные Эмоциональная обручальные были собраны соответственно, с использованием автоматического распознавания лица программное обеспечение, что эмоции количественно эмоциональную валентность и электродермальной активности кодер / датчик для возбуждения 12,13. Электрическое сопротивление (ЭДА) относится к записанной электрического сопротивления между двумя электродами, когда очень слабый электрический ток устойчиво передаваемых между ними. Cacioppo, Tassinary и Berntson 14 показали, что сопротивление записывается варьируется в зависимости от возбуждения субъекта. Таким образом, психофизиологические данные, такие как валентности или возбуждения, которые рассматриваются как коррелятов эмоциональной вовлеченности.

<pкласс = "jove_content"> Наконец, познавательные данные обручальные собираются через электроэнцефалографии (ЭЭГ). Меры ЭЭГ, на волосистой части головы, синхронизированы электрической активности групп нейронов в головном мозге. Электрические сигналы, записанные от головы часто колебательная и состоит из частотных составляющих. По соглашению, эти частоты сгруппированы в последовательности, известной как полосы. Например, альфа, бета и тета полосы находятся в центре этого исследования. По Нейрологическая исследований 14, эти полосы отражают различные когнитивные способности обработки в определенных областях мозга. Таким образом, анализ спектральной плотности мощности (PSD) конкретных частот, в сочетании с многочисленными исследованиями 7,15 на бдительности и внимания, позволяет исследователям количественно познавательную участие во задачей. Как отметил Микулка др. 16, исследования показали прямую связь между бета-активности и познавательной бдительности и косвенного отношения между альфа-апд тета активность и бдительность. Таким образом, Папа, Богарт и Bartoleme 7 разработан индекс обручальное, который вычисляет PSD трех полос: бета / (альфа-тета +). Это соотношение было подтверждено в других исследованиях по привлечению 16,17,18. Чтобы охарактеризовать когнитивное взаимодействие с течением времени, быстрое преобразование Фурье (БПФ) преобразует сигнал ЭЭГ от каждого активного сайта (F3, F4, O1, O2) в спектре мощности. Индекс обручальное ЭЭГ в момент времени T вычисляется в среднем на каждого соотношения обручальное в скользящем окне 20 сек предыдущего времени T. Эта процедура повторяется каждую секунду, и новый скользящее окно используется для обновления индекса.

Поскольку цель этой методологии, чтобы обеспечить богатый анализ многочисленных параметров зацепления, синхронизации данных имеет решающее значение. Как Леже и др. 19 Напомню, производители оборудования настоятельно рекомендуем использовать только один компьютер в инструмент измерения, чтобы гарантировать их точность указанной леНовичок. Таким образом, когда используются несколько компьютеров, синхронизация между компьютерами становится записи важный шаг. Записи не могут все быть запущен в то же самое время, и каждый поток данных имеет конкретные сроки (например, с 0 глаза отслеживания ≠ 0 сек ЭЭГ или физиологических данных). Это чрезвычайно важно: разбежка между потоками данных означает ошибки в количественной оценке каждого измерения силы. Есть различные способы синхронизации параллельных физиологические и поведенческие записи. Эти методы могут быть разделены на две основные подходы; прямые и косвенные 20. Протокол, представленные в следующем разделе на основе косвенного подхода, где внешнее устройство, syncbox, используемого для отправки логику транзистор транзистор (TTL) сигналы для всех записывающего оборудования (как показано на рисунке 1). Поскольку каждый элемент оборудования имеет различное время начала, TTL маркеры записываются в лог-файлы с относительной задержка. Маркеры затем используются, чтобы выровнять сигналы и тем самым обеспечить правильную синхронизацию после каждой записи. Поведенческая программа анализа, который позволяет интегрировать внешний файл используется для повторной синхронизации график каждого потока данных и выполнить количественный и качественный анализ каждого измерения силы.

Фигура 1
Рисунок 1. Архитектура системы сбора данных. Лабораторная среда, в которой поведенческий (глаз слежения), эмоциональная (EDA и лица эмоции) и когнитивные данные (ЭЭГ) обручальные собраны содержит много компьютеров. Это поднимает проблему синхронизации для данных, на которые ссылается на своих компьютерных часов. Для того, чтобы проанализировать все данные в то же время отсчета, установки лаборатории включает в себя syncbox, который посылает сигналы TTL для всех потоков данных.НК "> Пожалуйста, нажмите здесь, чтобы посмотреть большую версию этой фигуры.

Чтобы оценить точность методики в плане синхронизации, 45 сек пауза были введены перед каждым из механических проблем физики. Во время этих пауз, испытуемые должны были расслабиться и закрыть глаза. Как видно в других исследованиях 4,9,16,17,18, эти паузы следует вызвать значительные изменения в собранные сигнала: два зрачка точки в глаз отслеживания сразу исчезают (поведенческой участия) и немедленное падение познавательной взаимодействия (ЭЭГ Сигнал) наблюдается. Эти специфические компоненты сигнала используются для оценки общей правильности синхронизации. Недавняя публикация статей, которые полностью или частично полагаются на эту процедуру синхронизации, в области информационных систем 19, человек-машина взаимодействий 21 и образования 9, 22, свидетельствует о его эффективности.

Protocol

Этот протокол получил сертификат этический комитет от institutionnel де-ла-Recherche АВЭК де êtres humains (CIER) De L'Университет Квебека в Монреале (UQAM), которая была одобрена HEC-Montreal для Tech3Lab научно-исследовательский центр. Протокол описывает каждый из конкретных шагов, которые выполняются в нашей тест?…

Representative Results

Цифры 2 и 3 скриншоты результатов интеграции и синхронизации поведенческих, эмоциональных и когнитивных данных Участие в поведенческой применения программного обеспечения для анализа. На обоих рисунках, раздел левая организует научно-исследовательские темы и схемы кодир…

Discussion

С точки зрения критических шагов в протоколе, то сначала следует отметить, что качество данных всегда основное внимание на нейрофизиологических методов сбора. В этой методологии, научные сотрудники должны обратить особое внимание на инструктаж предметы, чтобы минимизировать движени?…

Declarações

The authors have nothing to disclose.

Acknowledgements

The authors acknowledge the financial support of the Social Sciences and Humanities Research Council of Canada (SSHERC), Natural Sciences and Engineering Research Council of Canada (NSERC), Fonds de Recherche Nature et Technologies du Québec (FQRNT) and Fonds de Recherche sur la Société et Culture du Québec (FQRSC).

Materials

EGI GSN-32  EGI n/a Dense array EEG
Netstation v.5.0 EGI n/a EEG data collection software: EEG is collected with 32-electrode dense array electroencephalography (dEEG) geodesic sensor net using Netstation acquisition software and EGI amplifiers (Electrical Geodesics, Inc). The vertex (recording site Cz) is the reference electrode for recording. Impedance is kept below 50 kΩ with a sampling rate of 250 Hz. 
Facereader v.4 Noldus n/a Facial emotion recognition software
Syncbox Noldus n/a Syncbox start the co-registration of EEG and gaze data by sending a Transistor-Transistor Logic (TTL) signal to the EGI amplifier and a keystroke signal to the Tobii Studio v 3.2.
Logitech C600  Webcam 960-000396 Webcam used to gather video data sent to mediarecorder and that will be analyzed in Facereader
The Observer XT Noldus n/a Integration and synchronization software: The Noldus Observer XT (Noldus Information Technology) is used to synchronize all behavioral, emotional and cognitive engagement data. 
On-Screen LED illumination Noldus n/a Neon positioned on computer screen in order to correctly light the face of subjects
MediaRecorder Noldus n/a Video data collection software
Tobii X60 Tobii n/a Collect eye-movement patterns :  used to record subjects’ eye movement patterns at 60Hz during the experiment. 
Tobii Studio v.3.2 Tobii n/a Eye-tracking data collection and analysis software
Analyzer 2 Brainvision n/a EEG signal processing software
Acqknowledge v.4.0 Biopac ACK100M Physiological signal acquisition and processing software
Control III germicide solution Maril Products. 10002REVA-20002-1 Disinfectant solution used with EEG helmets : recommended by EGI
Unipark QuestBack AG n/a Online survey environment

Referências

  1. Fredricks, J. A., Blumenfeld, P. C., Paris, A. H. School engagement: Potential of the concept, state of the evidence. Rev. Educ. Res. 74 (1), 59-109 (2004).
  2. Clark, R. C., Mayer, R. E. . E-learning and the Science of Instruction. , (2011).
  3. Zhang, D., Zhou, L., Briggs, R. O., Nunamaker, J. F. Instructional video in e-learning: Assessing the impact of interactive video on learning effectiveness. Inform. Manage. 43 (1), 15-27 (2006).
  4. Freeman, F. G., Mikulka, P. J., Prinzel, L. J., Scerbo, M. W. Evaluation of an adaptive automation system using three EEG indices with a visual tracking task. Biol. Psychol. 50, 61-76 (1999).
  5. Glimcher, P., Rustichini, A. Neuroeconomics: The consilience of brain and decision. Science. 306 (5695), 447-452 (2004).
  6. Lieberman, M. D. Social Cognitive neuroscience: A review of core processes. Annu. Rev. Physiol. 58, 259-289 (2007).
  7. Pope, A. T., Bogart, E. H., Bartolome, D. S. Biocybernetic system evaluates indices of operator engagement in automated task. Biol. Psychol. 40 (1-2), 187-195 (1995).
  8. Mandryk, R., Inkpen, K. Physiological indicators for the evaluation of co-located collaborative play. , (2004).
  9. Allaire-Duquette, G., Charland, P., Riopel, M. At the very root of the development of interest: Using human body contexts to improve women’s emotional engagement in introductory physics. Eur. J. Phy. Ed. 5 (2), 31-48 (2014).
  10. Bradley, M. M., Lang, P. J. Measuring emotion: The self-assessment manikin and the semantic differential. J. Behav. Ther. Exp. Psy. 25 (1), 49-59 (1994).
  11. Lang, P. J. The emotion probe: Studies of motivation and attention. Am. Psychol. 50 (5), 372-385 (1995).
  12. Ekman, P., Felt Friesen, W. false, and miserable smiles. J. Nonverbal Behav. 6 (4), 238-252 (1982).
  13. Van Kuilenburg, H., Den Uyl, M. J., Israël, M. L., Ivan, P. Advances in face and gesture analysis. , 371-372 (2008).
  14. Cacioppo, J., Tassinary, L. G., Berntson, G. G. . Handbook of Psychophysiology. , (2007).
  15. Lubar, J. F., Swartwood, M. O., Swartwood, J. N., O’Donnell, P. H. Evaluation of the effectiveness of EEG neurofeedback training for ADHD in a clinical setting as measured by changes in T.O.V.A. scores, behavioral ratings, and WISC R performance. Biofeedback Self-reg. 20 (1), (1995).
  16. Mikulka, P. J., Freeman, F. G., Scerbo, M. W. Effects of a biocybernetic system on the vigilance decrement. Hum. factors. 44 (4), 654-664 (2002).
  17. Freeman, F. G., Mikulka, P. J., Scerbo, M. W., Scott, L. An evaluation of an adaptive automation system using a cognitive vigilance task. Biol. Psychol. 67 (3), 283-297 (2004).
  18. Chaouachi, M., Chalfoun, P., Jraidi, I., Frasson, C. Affect and mental engagement: Toward adaptability for intelligent systems. Proceedings of the Twenty-Third International Florida Artificial Intelligence Research Society Conference (FLAIRS 2010), Association for the Advancement of Artificial Intelligence. , 355-360 (2010).
  19. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-LeMoyne, &. #. 2. 0. 1. ;. Precision is in the eye of the beholder: Application of eye fixation-related potentials to information systems research. J. Assoc. Inf. Syst. 15 (10), 651-678 (2014).
  20. Courtemanche, F., Ortiz de Guinea, A., Titah, R., Fredette, M., Labonté-Lemoyne, E. Applying eye fixation-related potentials to information systems research: Demonstration of the method during natural IS use and guidelines for research. J. Assoc. Inf. Syst. 15 (10), (2014).
  21. Courtemanche, F. . Un outil d’évaluation neurocognitive des interactions humain-machine Doctoral thesis. , (2014).
  22. Charland, P., Léger, P. M., Mercier, J., Skelling-Desmeules, Y. Assessing multiple dimensions of learner engagement during science problem solving using psychophysiological and behavioral measures. , (2014).
  23. Venables, P. H., Christie, M. J., Martin, I., Venables, P. Electrodermal activity. Techniques in Psychophysiology. , 3-67 (1980).
  24. Boucsein, W. . Electrodermal Activity. , (2012).
  25. Sarlo, M., Palomba, D., Buodo, G. M., Minghetti, R., Stegagno, L. Blood pressure changes highlight gender differences in emotional reactivity to arousing pictures. Biol. Psychol. 70 (3), 188-196 (2005).
  26. Martens, R. L., Gulikers, J., Bastiaens, T. The impact of intrinsic motivation on e-learning in authentic computer tasks. J. Comput. Assist. Lear. 20 (5), 368-376 (2004).
check_url/pt/52627?article_type=t

Play Video

Citar este artigo
Charland, P., Léger, P., Sénécal, S., Courtemanche, F., Mercier, J., Skelling, Y., Labonté-Lemoyne, E. Assessing the Multiple Dimensions of Engagement to Characterize Learning: A Neurophysiological Perspective. J. Vis. Exp. (101), e52627, doi:10.3791/52627 (2015).

View Video