Summary

Jeu-Based Computer combinant les expériences comportementales à haute densité Suivi Gaze EEG et infrarouge

Published: December 16, 2010
doi:

Summary

Procédures pour l'enregistrement haute densité de données EEG et du regard pendant jeu vidéo basé sur les tâches cognitives sont décrites. L'utilisation d'un jeu vidéo pour présenter des tâches cognitives améliore la validité écologique sans sacrifier le contrôle expérimental.

Abstract

Paradigmes expérimentaux sont précieux dans la mesure où le calendrier et les autres paramètres de leurs stimuli sont bien spécifiés et contrôlés, et pour autant qu'ils fournissent des données pertinentes pour le traitement cognitif qui se produit sous des conditions écologiquement valide. Ces deux objectifs sont souvent en désaccord, car les stimuli bien contrôlées sont souvent trop répétitives pour maintenir la motivation des sujets. Des études utilisant l'électroencéphalographie (EEG) sont souvent particulièrement sensibles à ce dilemme entre la validité écologique et contrôle expérimental: réaliser suffisamment de signal-bruit dans les moyennes physiologiques exige un grand nombre d'essais répétés dans les longues sessions d'enregistrement, la limitation de la piscine l'objet d'individus ayant la capacité et de patience pour effectuer une tâche définie, encore et encore. Cette contrainte limite sévèrement la capacité des chercheurs à enquêter sur des populations plus jeunes ainsi que les populations cliniques associés à une anxiété accrue ou des anomalies attentionnelles. Même adulte, non-cliniques des sujets peuvent ne pas être en mesure d'atteindre leurs niveaux habituels de performance ou d'engagement cognitif: un sujet démotivés pour qui une tâche expérimentale est un peu plus une corvée n'est pas la même, comportemental, cognitif, ou neuronale, comme un sujet qui est intrinsèquement motivés et engagés à la tâche. Un corpus croissant de la littérature démontre que l'intégration des expériences dans les jeux vidéo peuvent fournir un chemin entre les cornes de ce dilemme entre le contrôle expérimental et validité écologique. Le récit d'un jeu fournit un contexte plus réaliste dans lequel les tâches se produire, améliorer leur validité écologique (Chaytor & Schmitter-Edgecombe, 2003). Par ailleurs, ce contexte donne la motivation pour terminer les tâches. Dans notre jeu, les sujets effectuent des missions diverses à collecter des ressources, repousser les pirates, intercepter des communications ou de faciliter les relations diplomatiques. Ce faisant, ils jouent aussi un éventail de tâches cognitives, y compris une attention Posner-shifting paradigme (Posner, 1980), un go / no-go test d'inhibition motrice, une tâche de mouvement psychophysique cohérence seuil, le test intégré chiffres (Witkin , 1950, 1954) et une théorie de l'esprit (Wimmer & Perner, 1983) la tâche. Le logiciel de jeu enregistre automatiquement les stimuli du jeu et les actions des sujets et des réponses dans un fichier journal, et envoie les codes d'événement pour la synchronisation avec les enregistreurs de données physiologiques. Ainsi le jeu peut être combinée avec des mesures physiologiques telles que l'EEG ou IRMf, et avec un moment à moment, suivi du regard. Suivi regard peut vérifier la conformité des sujets avec des tâches comportementales (fixation par exemple) et porter attention à des stimuli expérimentaux, et aussi l'excitation physiologique comme en témoigne la dilatation des pupilles (Bradley et al., 2008). À grande fréquence d'échantillonnage suffisant, suivi le regard peut aussi aider à évaluer l'attention implicite comme en témoigne microsaccades – les mouvements des yeux qui sont trop petits pour foveate un nouvel objet, mais sont aussi rapides dans l'apparition et ont la même relation entre la distance angulaire et la vitesse de pointe comme le font saccades qui traversent de grandes distances. La répartition des directions de microsaccades corrèle avec la direction (autrement) secrète de l'attention (Hafed & Clark, 2002).

Protocol

1. Concevoir un jeu vidéo amusant et scientifiquement informatif Appliquer un processus itératif de conception de jeu dans lequel les préoccupations de la valeur scientifique et la jouabilité de s'informer mutuellement. Comme un expérimentateur, vous avez des idées pour les stimuli et les paradigmes comportementaux que vous voulez voir intégré dans un jeu informatique. Parce que vous n'êtes pas un concepteur de jeu, la tâche de construction de ces paradigmes dans les jeux pe…

Discussion

Peut-être l'obstacle le plus important pour les études d'intégration est la limite pratique sur la quantité de temps qu'un seul sujet d'expérimentation (en particulier celle de la population clinique) on peut raisonnablement s'attendre à effectuer avant de devenir fatigué. Malheureusement, souvent le plus contrôlé un stimulus est du point de vue scientifique, le plus répétitif et fastidieux de l'expérience peut sembler du point de vue de l'objet. La recherche comportementale sur l…

Declarações

The authors have nothing to disclose.

Acknowledgements

Ce projet est financé par Autism Speaks pilotes de recherche Grant # 2597 et par la US National Science Foundation Award Faculté de carrière développement précoce # BCS-0846892.

Materials

Material Name Tipo Company Catalogue Number Comment
128-channel BioSemi ActiveTwo measurement system   BioSemi   http://www.biosemi.com
32 channel A-set + CMS/DRL   BioSemi P32-ABC-ACMS  
32 channel B-set   BioSemi P32-ABC-B  
32 channel C-set   BioSemi P32-ABC-C  
32 channel D-set   BioSemi P32-ABC-D  
EX1-EX8 electrodes   BioSemi 8 x TP PIN  
128-channel cap   BioSemi CAP M 128  
EyeLink 1000 infrared gaze tracker   SR Research    
EyeLink 1000 Remote Camera Upgrade   SR Research n/a Allows for target sticker tracking
SignaGel electrode gel   Parker Labs n/a  
0.05% KCl electrolytic (NaCl) gel   n/a n/a Purchased from compounding pharmacy
Intensity Pro   Blackmagic Design    

Referências

  1. Bell, A. J., Sejnowski, T. J. An information maximisation approach to blind separation and blind deconvolution. Neural Computation. 7, 1129-1159 (1995).
  2. Belmonte, M. K. Shifts of visual spatial attention modulate a steady-state visual evoked potential. Cognitive Brain Research. 6, 295-307 (1998).
  3. Belmonte, M. K. Abnormal attention in autism shown by steady-state visual evoked potentials. Autism. 4, 269-285 (2000).
  4. Benton, A. L., Sivan, A. B., Hamsher, K., Varney, N. R., Spreen, O. . Contributions to Neuropsychological Assessment. , (1994).
  5. Berka, C., Levendowski, D. J., Cvetinovic, M. M., Petrovic, M. M., Davis, G., Lumicao, M. N., Zivkovic, V. T. Real-time analyses of EEG indexes of alertness, cognition and memory acquired with a wireless EEG headset. International Journal of Human-Computer Interaction. 17, 151-170 (2004).
  6. Bradley, M. M., Miccoli, L., Escrig, M. A., Lang, P. J. The pupil as a measure of emotional arousal and autonomic activation. Psychophysiology. 45, 602-607 (2008).
  7. Brookings, J. B., Wilson, G. F., Swain, C. R. Psychophysiological responses to changes in work-load during simulated air traffic control. Biological Psychology. 42, 361-377 (1996).
  8. Castel, A. D., Pratt, J., Drummond, E. The effects of action video game experience on the time course of inhibition of return and the efficiency of visual search. Acta Psychologica. 119, 217-230 (2005).
  9. Chaytor, N., Schmitter-Edgecombe, M. The ecological validity of neuropsychological tests: a review of the literature on everyday cognitive skills. Neuropsychology Review. 13, 181-197 (2003).
  10. Dalton, K. M., Nacewicz, B. M., Johnstone, T., Schaefer, H. S., Gernsbacher, M. A., Goldsmith, H. H., Alexander, A. L., Davidson, R. J. Gaze fixation and the neural circuitry of face processing in autism. Nature Neuroscience. 8, 519-526 (2005).
  11. Delorme, A., Makeig, S. EEGLAB: an open source toolbox for analysis of single-trial EEG dynamics. Journal of Neuroscience Methods. 134, 9-21 (2004).
  12. Ebisawa, Y. Improved video-based eye-gaze detection method. IEEE Transactions on Instrumentation and Measurement. 47, 948-955 (1998).
  13. Feng, J., Spence, I., Pratt, J. Playing an action video game reduces gender differences in spatial cognition. Psychological Science. 18, 850-855 (2007).
  14. Ferree, T. C., Luu, P., Russell, G. S., Tucker, D. M. Scalp electrode impedance, infection risk, and EEG data quality. Clinical Neurophysiology. 112, 536-544 (2001).
  15. Golan, O., Baron-Cohen, S. Systemizing empathy: teaching adults with Asperger syndrome or high-functioning autism to recognize complex emotions using interactive media. Development and Psychopathology. 18, 591-617 (2006).
  16. Graner Ray, S., S, Gender inclusive game design: Expanding the market. , (2004).
  17. Green, C. S., Bavelier, D. Action video game modifies visual selective attention. Nature. 423, 534-537 (2003).
  18. Green, C. S., Bavelier, D. Enumeration versus multiple object tracking: the case of action video game players. Cognition. 101, 217-245 .
  19. Green, C. S., Bavelier, D. Effect of action video games on the spatial distribution of visuospatial attention. Journal of Experimental Psychology Human Perception and Performance. 32, 1465-1478 (2006).
  20. Green, C. S., Bavelier, D. Action-video-game experience alters the spatial resolution of vision. Psychological Science. 18, 88-94 (2007).
  21. Hafed, Z. M., Clark, J. J. Microsaccades as an overt measure of covert attention shifts. Vision Research. 42, 2533-2545 (2002).
  22. Lieberman, H. R., Pentland, A. P. Microcomputer-based estimation of psychophysical thresholds: the best PEST. Behavior Research Methods and Instrumentation. 14, 21-25 (1982).
  23. Luck, S. J. . An Introduction to the Event-Related Potential Technique. , (2005).
  24. Lykken, D. T., Venables, P. H. Direct measurement of skin conductance: a proposal for standardization. Psychophysiology. 8, 656-672 (1971).
  25. Makeig, S., Delorme, A., Westerfield, M., Jung, T., Townsend, J., Courchesne, E., Sejnowski, T. J. Electroencephalographic brain dynamics following manually responded visual targets. PLoS Biology. 2, e176-e176 (2004).
  26. Makeig, S., Jung, T., Bell, A. J., Ghahremani, D., Sejnowski, T. J. Blind separation of auditory event-related brain responses into independent components. Proceedings of the National Academy of Sciences of the United States of America. 94, 10979-10984 (1997).
  27. Makeig, S., Westerfield, M., Jung, T. P., Enghoff, S., Townsend, J., Courchesne, E., Sejnowski, T. J. Dynamic brain sources of visual evoked responses. Science. 295, 690-694 (2002).
  28. Morgan, S. T., Hansen, J. C., Hillyard, S. A. Selective attention to stimulus location modulates the steady-state visual evoked potential. Proceedings of the National Academy of Sciences of the United States of America. 93, 4770-4774 (1996).
  29. Pentland, A. P. Maximum likelihood estimation: the best PEST. Perception and Psychophysics. 28, 377-379 (1980).
  30. Plaisted, K., Swettenham, J., Rees, L. Children with autism show local precedence in a divided attention task and global precedence in a selective attention task. Journal of Child Psychology and Psychiatry. 40, 733-742 (1999).
  31. Posner, M. I. Orienting of attention. Quarterly Journal of Experimental Psychology. 32, 3-25 (1980).
  32. Smith, M. E., McEvoy, L. K., Gevins, A. Neurophysiological indices of strategy development and skill acquisition. Cognitive Brain Research. 7, 389-404 (1999).
  33. St John, M., Kobus, D. A., Morrison, J. G. A multi-tasking environment for manipulating and measuring neural correlates of cognitive workload. , (2002).
  34. St John, M., Kobus, D. A., Morrison, J. G., Schmorrow, D. Overview of the DARPA augmented cognition technical integration experiment. International Journal of Human-Computer Interac-tion. 17, 131-149 (2004).
  35. Thorell, L. B., Lindqvist, S., Nutley, S. B., Bohlin, G., Klingberg, T. Training and transfer effects of executive functions in preschool children. Developmental Science. 12, 106-113 (2009).
  36. Valla, J. M., Ganzel, B. L., Yoder, K. J., Chen, G. M., Lyman, L. T., Sidari, A. P., Keller, A. E., Maendel, J. W., Perlman, J. E., Wong, S. K. L., Belmonte, M. K. More than maths and mindread-ing: sex differences in empathising/systemising covariance. Autism Research. , (2010).
  37. Witkin, H. A. Individual differences in ease of perception of embedded figures. Journal of Personality. 19, 1-15 (1950).
  38. Witkin, H. A., Lewis, H. B., Hertzman, M., Machover, K., Meissner, P. B., Wapner, S. . Personality through Perception. , (1954).
  39. Wimmer, H., Perner, J. Beliefs about beliefs: Representation and constraining function of wrong beliefs in young children’s understanding of deception. Cognition. 13, 103-128 (1983).
  40. von Ahn, L. Games with a purpose. Computer. 39, 92-94 (2006).

Play Video

Citar este artigo
Yoder, K. J., Belmonte, M. K. Combining Computer Game-Based Behavioural Experiments With High-Density EEG and Infrared Gaze Tracking. J. Vis. Exp. (46), e2320, doi:10.3791/2320 (2010).

View Video