Summary

Évaluation de l’utilisabilité de la réalité augmentée: une étude sur les systèmes neuro-informationnels

Published: November 30, 2022
doi:

Summary

Cette étude présente un paradigme expérimental pour un test d’utilisabilité combinant des évaluations subjectives et objectives. L’évaluation objective a adopté les méthodes Neuro-Information-Systems (NeuroIS), et l’évaluation subjective a adopté un questionnaire d’utilisabilité et une échelle NASA-Task Load Index (NASA-TLX).

Abstract

Cette étude présente un paradigme expérimental pour un test d’utilisabilité des technologies émergentes dans un système d’information de gestion (SIG). Le test d’utilisabilité comprenait des évaluations subjectives et objectives. Pour l’évaluation subjective, un questionnaire d’utilisabilité et une échelle NASA-TLX ont été adoptés. Pour l’évaluation objective, les méthodes des systèmes d’information neurologique (NeuroIS) ont été utilisées. Du point de vue de NeuroIS, cette étude a utilisé des fNIRS mobiles et des lunettes de suivi oculaire pour des mesures multimodales, ce qui a résolu le problème de validité écologique des outils de neurosciences cognitives utilisés dans des expériences comportementales réelles. Cette étude a utilisé la réalité augmentée (RA) intégrée à l’Internet des objets (IoT) comme objet expérimental. En comparant les différences dans les données de neuroimagerie, les données physiologiques, le questionnaire d’utilisabilité et les données de l’échelle NASA-TLX entre les deux modes de recherche d’informations (AR versus un site Web), la recherche d’informations avec AR avait une efficacité plus élevée et une charge cognitive inférieure à la recherche d’informations avec un site Web pendant le processus de prise de décision de consommation. Les résultats de l’expérience d’utilisabilité démontrent que la RA, en tant que technologie émergente dans le commerce de détail, peut améliorer efficacement l’expérience des consommateurs et augmenter leur intention d’achat. Le paradigme expérimental, combinant des évaluations subjectives et objectives dans cette étude, pourrait être appliqué à un test d’utilisabilité pour les technologies émergentes, telles que la réalité augmentée, la réalité virtuelle, l’intelligence artificielle, la technologie portable, la robotique et les mégadonnées. Il fournit une solution expérimentale pratique pour l’expérience utilisateur dans les interactions homme-machine avec l’adoption de technologies émergentes.

Introduction

Six technologies de pointe qui interagissent avec les consommateurs, généralement représentées par la réalité augmentée, la réalité virtuelle, l’intelligence artificielle, la technologie portable, la robotique et les mégadonnées, remodèlent de nombreux modèles théoriques du comportement des consommateurs1. La réalité augmentée (RA) est une nouvelle technologie qui pourrait améliorer l’expérience et la satisfaction des consommateurs. Il superpose des informations textuelles, des images, des vidéos et d’autres éléments virtuels sur des scénarios réels pour fusionner la virtualité et la réalité, améliorant ainsi l’information dans le monde réel grâce à l’explication, l’orientation, l’évaluation et la prédiction2. La RA offre un nouveau type d’interaction homme-machine, créant une expérience d’achat immersive pour les consommateurs, et a conduit au développement de nombreuses applications 3,4. Cependant, l’acceptation des services de RA par les consommateurs est encore minime et de nombreuses entreprises sont donc prudentes quant à l’adoption de la technologie AR 5,6. Le modèle d’acceptation de la technologie (TAM) a été largement utilisé pour expliquer et prédire le comportement d’adoption des nouvelles technologies de l’information 7,8. Selon le TAM, l’intention d’adoption d’une nouvelle technologie dépend en grande partie de sa facilité d’utilisation9. Par conséquent, une explication possible de la lenteur de l’acceptation des services de RA par les consommateurs du point de vue de la MT peut être liée à la facilité d’utilisation des nouvelles techniques, ce qui souligne la nécessité d’évaluer la facilité d’utilisation de la RA lors de l’achat10,11.

La facilité d’utilisation est définie comme l’efficacité, l’efficience et la satisfaction d’atteindre des objectifs spécifiés dans un contexte spécifié par des utilisateurs spécifiés12. Actuellement, il existe deux méthodes principales pour évaluer l’utilisabilité : les évaluations subjectives et objectives13. Les évaluations subjectives reposent principalement sur des méthodes d’auto-évaluation utilisant des questionnaires et des échelles. Suivant cette ligne de recherche, le questionnaire utilisé dans cette étude comprenait cinq caractéristiques associées au mode de recherche d’information pour atteindre un objectif: (1) efficacité, (2) facilité d’utilisation, (3) mémorisation (facile à retenir), (4) satisfaction (le mode de recherche d’information est confortable et agréable) et (5) généralisabilité à d’autres objets14,15,16. En outre, la charge cognitive, représentant la charge lors de l’exécution d’une tâche particulière sur le système cognitif d’un apprenant17, est un autre indicateur de base de la convivialité18,19. Ainsi, cette étude a également utilisé le NASA Task Load Index (NASA-TLX)13,20 comme mesure subjective pour mesurer la charge cognitive lors de l’achat en utilisant la RA par rapport aux achats utilisant les services de site Web. Il convient de noter que les méthodes d’auto-évaluation reposent sur la capacité et la volonté des individus de signaler avec précision leurs attitudes et / ou leurs comportements antérieurs21, ce qui laisse ouverte la possibilité de fausses déclarations, de sous-déclaration ou de biais. Ainsi, les mesures objectives pourraient être un complément précieux aux méthodes subjectives traditionnelles22.

Les méthodes Neuro-Information-Systems (NeuroIS) sont utilisées pour évaluer objectivement la facilité d’utilisation de la RA. NeuroIS, inventé par Dimoka et al. lors de la conférence ICIS de 2007, attire de plus en plus l’attention dans le domaine des systèmes d’information (SI)23. NeuroIS utilise les théories et les outils des neurosciences cognitives pour mieux comprendre le développement, l’adoption et l’impact des technologies SI24,25. À ce jour, les outils de neurosciences cognitives, tels que l’imagerie par résonance magnétique fonctionnelle (IRMf), l’électroencéphalogramme (EEG), la tomodensitométrie par émission de positrons, la magnétoencéphalographie (MEG) et la spectroscopie fonctionnelle dans le proche infrarouge (fNIRS), sont couramment utilisés dans les études NeuroIS26,27. Par exemple, Dimoka et Davis ont utilisé l’IRMf pour mesurer les activations des sujets lorsqu’ils interagissaient avec le site Web, et ont révélé que la facilité d’utilisation perçue influençait l’activation dans le cortex préfrontal (PFC)28. De même, en utilisant l’EEG, Moridis et al. ont constaté que l’asymétrie frontale était étroitement associée à l’utilité29. Ces résultats indiquent que le PFC peut jouer un rôle clé dans la convivialité.

Bien que des réalisations aient été réalisées dans les études antérieures de NeuroIS, les paradigmes utilisés dans ces études avaient des mouvements corporels limités de sujets ayant une faible validité écologique, limitant leurs contributions théoriques et pratiques. L’interaction avec des technologies telles que la RA lors de l’achat nécessite des mouvements libres du corps, et les contraintes liées au sujet nuisent largement à l’expérience du consommateur, comme discuté dans He et coll.22. Ainsi, des outils d’imagerie cérébrale à haute validité écologique sont nécessaires pour un test d’utilisabilité des systèmes d’information. À cet égard, fNIRS présente des avantages techniques uniques: lors d’expériences fNIRS, les sujets peuvent se déplacer librement30 dans une certaine mesure. Par exemple, des études antérieures ont mesuré les activations cérébrales des sujets lors de plusieurs activités de plein air telles que le cyclisme à l’aide de fNIRS31 portable. De plus, fNIRS est peu coûteux et permet de mesurer les activations cérébrales pendant de longues périodes32. Dans cette étude, fNIRS a été utilisé pour mesurer objectivement le niveau de charge cognitive des sujets lors de l’utilisation des services d’achat de RA par rapport à un site Web.

L’oculométrie a été une technique psychophysiologique précieuse pour détecter l’attention visuelle des utilisateurs lors d’un test d’utilisabilité au cours des dernières années33 et a également été largement utilisée dans les études NeuroIS34. La technique repose sur l’hypothèse œil-esprit, qui suppose que l’attention de l’observateur va là où l’attention est dirigée, que l’attention visuelle représente le processus mental et que les modèles d’attention visuelle reflètent les stratégies cognitives humaines35,36,37. Dans le domaine de la recherche sur la RA, Yang et coll. ont utilisé l’oculométrie pour constater que la publicité pour la RA améliorait l’attitude des consommateurs à l’égard de la publicité en augmentant leur curiosité et leur attention38. Dans la présente étude, le suivi oculaire a été utilisé pour mesurer l’attention des sujets, y compris des paramètres tels que la durée totale de fixation, la durée moyenne de fixation, la fréquence de saccade, la durée moyenne de saccade et la longueur moyenne du trajet de balayage.

En résumé, cette étude propose une méthode de test d’utilisabilité qui combine des évaluations subjectives et objectives avec des applications AR à titre d’exemple. Un questionnaire d’utilisabilité et une échelle NASA-TLX ont été utilisés pour l’évaluation subjective, et des mesures multimodales combinant fNIRS et suivi oculaire ont été utilisées pour l’évaluation objective39,40.

Conception expérimentale
Matériaux expérimentaux: Pour simuler un contexte d’achat réel, une étagère de produits a été construite dans un laboratoire et deux marques différentes d’eau minérale ont été placées sur l’étagère en tant que matériaux expérimentaux. En tant que biens essentiels, l’eau minérale a été choisie parce que les participants n’auraient pas de biais dans les évaluations subjectives sur la base de leurs antécédents professionnels, de leur sexe et de leur capacité d’achat. Le prix, la capacité et la familiarité des marques ont été contrôlés (voir le tableau des matériaux) afin d’éliminer l’interférence de variables non pertinentes.

Le test d’utilisabilité comprenait deux conditions : une application de RA basée sur un téléphone intelligent (figure supplémentaire 1) et un site Web (figure supplémentaire 2). L’application AR a été programmée sur la base d’un moteur AR. Le site Web a été développé en utilisant Python, basé sur Bootstrap pour le front-end et Flask pour le back-end. L’application AR et le site Web ont été exécutés et consultés sur un smartphone. Parmi les deux marques différentes d’eau minérale, l’une a été utilisée comme matériel expérimental dans l’état AR, et l’autre a été utilisée dans l’état de site Web.

Tâches expérimentales : Les participants ont été invités à effectuer quatre tâches de recherche d’informations dérivées de contextes d’applications IoT : la qualité de l’eau, la température de stockage, le régime alimentaire correspondant et le prix au litre. Ces quatre éléments d’information sont ce à quoi les consommateurs prêtent normalement attention lorsqu’ils achètent de l’eau minérale. Il n’y avait aucune contrainte de temps pour que les participants accomplissent les tâches.

Qualité de l’eau: La qualité de l’eau minérale comprend généralement deux indicateurs: le total des solides dissous (TDS) et la valeur du pH. Le TDS reflète la teneur en minéraux et la valeur du pH décrit l’acidité/alcalinité de l’eau. Ces deux indicateurs sont liés aux oligo-éléments contenus dans l’eau minérale et influencent le goût. Par exemple, Bruvold et Ongerth ont divisé la qualité sensorielle de l’eau en cinq qualités en fonction de sa teneur TDS41. Marcussen et coll. ont constaté que l’eau possède de bonnes qualités sensorielles de l’ordre de 100 à 400 mg/L de TDS42. La valeur TDS et pH des deux marques d’eau minérale utilisées dans cette étude a été mesurée à l’aide de TDS et de pH-mètres, respectivement, puis marquée sur l’application AR et le site Web. Lors de l’exécution de la tâche, les participants devaient indiquer les valeurs TDS et pH de l’eau minérale et confirmer si ces valeurs se situaient dans la plage nominale. Dans la condition AR, les participants pouvaient acquérir cette information en scannant la bouteille d’eau. Dans l’état du site Web, les participants devaient effectuer quatre étapes : (1) trouver un code numérique au dos de la bouteille d’eau minérale, (2) entrer le code numérique dans une boîte de requête pour obtenir les valeurs TDS et pH pour l’eau minérale, (3) rechercher la plage nominale d’eau minérale sur le site Web et (4) indiquer verbalement si la valeur TDS et pH se situe dans la plage nominale du produit.

Température de stockage: La qualité de l’eau minérale peut diminuer pendant le transport et le stockage en raison des changements de température. Des expériences ont montré que la température appropriée pour l’eau minérale se situe entre 5 °C et 25 °C pendant le transport et le stockage. Dans cette plage de température, l’eau n’a pas de mauvaise odeur43. Dans la présente expérience, la température de stockage des deux types d’eau minérale à des endroits différents a été indiquée sur l’application AR et sur le site Web. Lors de l’exécution de la tâche, les participants devaient indiquer l’emplacement de stockage et la température correspondante de l’eau. Dans la condition AR, les participants pouvaient acquérir cette information en scannant la bouteille d’eau. Dans l’état du site Web, les participants pouvaient acquérir cette information en entrant le code numérique dans une boîte de requête.

Régime alimentaire correspondant: Différentes marques d’eau minérale conviennent à différents menus en raison de leur composition minérale unique et de leur teneur en bulles44. Dans la présente expérience, les recommandations alimentaires pour les deux eaux minérales ont été marquées sur l’application AR et le site Web. Lors de l’exécution de la tâche, les participants devaient indiquer comment l’eau minérale correspondait à la nourriture du menu. Dans la condition AR, les participants pouvaient acquérir cette information en scannant la bouteille d’eau. Dans l’état du site Web, les participants pouvaient rechercher cette information sur le site Web.

Prix par litre: Actuellement, les étiquettes sur les bouteilles d’eau minérale en Chine n’affichent pas les informations de prix par litre. Il est donc difficile pour les consommateurs de distinguer la différence de prix unitaire des différents types d’eau minérale. Par conséquent, la présente expérience exigeait que les participants déclarent le prix par litre. Dans l’application AR, les participants pouvaient obtenir le prix par litre directement en scannant la bouteille d’eau. Dans l’état du site Web, l’information pourrait être calculée à partir du prix unitaire et du volume sur l’étiquette.

Cette étude a utilisé un plan intra-participant, avec des critères d’inclusion et d’exclusion des participants décrits dans le tableau 1. Au total, 40 participants ont terminé l’expérience (20 hommes et 20 femmes, âge moyen = 21,31 ± 1,16 ans). Tous les participants étaient des étudiants de premier cycle de l’Université des sciences et technologies du Jiangsu et ont été répartis au hasard en deux groupes (A et B). Afin d’éviter l’effet d’ordre, l’ordre expérimental a été contrebalancé entre les deux groupes (A/B). Plus précisément, un groupe a d’abord exécuté la condition AR, puis la condition de site Web, tandis que l’autre groupe a exécuté le site Web en premier, puis la condition AR. Les participants devaient terminer la préparation de l’expérience, porter les instruments et effectuer les tâches expérimentales. L’intervalle entre les expériences a été fixé à 10 s pour permettre à l’activation corticale de revenir au niveau de base, évitant ainsi l’influence croisée dans la tâche suivante. À la fin de l’expérience AR / site Web, les participants devaient remplir le questionnaire d’utilisabilité et l’échelle NASA-TLX. L’organigramme expérimental est illustré à la figure 1. Une photographie de l’installation expérimentale est présentée à la figure 2.

Tableau 1 : Critères d’inclusion et d’exclusion de l’étude. Veuillez cliquer ici pour télécharger ce tableau.

Figure 1
Figure 1 : Organigramme expérimental. Chaque expérience a duré ~45 min, avec une période de repos de 10 s entre les tâches. Veuillez cliquer ici pour voir une version agrandie de cette figure.

Figure 2
Figure 2 : Exemple de configuration de la scène expérimentale. Le matériel expérimental, le participant et l’équipement sont présentés. Veuillez cliquer ici pour voir une version agrandie de cette figure.

Protocol

Cette étude a été menée conformément aux principes de la Déclaration d’Helsinki. Tous les participants ont été informés du but et de la sécurité de l’expérience et ont signé le formulaire de consentement éclairé avant la participation. Cette étude a été approuvée par le comité d’examen institutionnel de l’Université des sciences et technologies du Jiangsu. 1. Procédure expérimentale Préparation de l’expérienceExpliquez le co…

Representative Results

Les résultats représentatifs de cette étude comprennent les résultats du questionnaire d’utilisabilité, l’analyse des données de suivi oculaire, les données d’échelle NASA-TLX, l’analyse des données fNIRS et les changements dynamiques de la charge cognitive. Pour les résultats du questionnaire d’utilisabilité, une analyse des données de suivi oculaire, des données à l’échelle NASA-TLX et une analyse des données fNIRS, des tests de normalité et des tests de différences ont été effectués. P…

Discussion

Étapes critiques du protocole
Au cours de l’expérience, plusieurs étapes ont été envisagées pour assurer la fiabilité des résultats. Tout d’abord, les participants qui connaissent les marques d’eau minérale utilisées dans l’expérience ont été exclus, car ces participants auraient effectué la tâche en fonction de leur connaissance de la marque. Deuxièmement, les participants ont effectué une pré-expérience en utilisant d’autres marques d’eau minérale, qui a été utilis?…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Cette étude a été financée par le Projet de recherche en philosophie et en sciences sociales du Département provincial de l’éducation du Jiangsu (2018SJA1089), la bourse du gouvernement du Jiangsu pour les études à l’étranger (JS-2018-262), la Fondation des sciences naturelles de la province du Zhejiang (LY19G020018) et la Fondation nationale des sciences naturelles de Chine (NSFC) (72001096).

Materials

AR Engine Unity Technologies 2020.3.1 AR development platform
AR SDK PTC Vuforia Engine 9.8.5 AR development kit
Eye Tracker (eye tracking glasses) SMI, Germany SMI ETG Head-mounted eye tracking
system
Eye Tracker Recording software SMI, Germany iViewETG Software Eye Tracker Recording software
fNIRS probes Artinis Medical Systems BV, Netherlands Artinis PortaLite Light source: Light emitting diodes
Wavelengths: Standard nominal 760 and 850 nm
fNIRS software Artinis Medical Systems BV, Netherlands OxySoft 3.2.70 fNIRS data recording and analysis software
Mineral Water Groupe Danone Badoit  Experimental material in the AR condition   Capacity: 330ml
Price: Equation 16
Mineral Water Nestlé Acqua Panna Experimental material in the website condition Capacity: 250ml
Price: Equation 15.4
Skin Preparation Gel Weaver and Company Nuprep Clean the forehead skin of the participants
Smartphone Xiaomi Redmi K30 Ultra Smartphone-based AR application and website

References

  1. Ameen, N., Hosany, S., Tarhini, A. Consumer interaction with cutting-edge technologies: Implications for future research. Computers in Human Behavior. 120, 106761 (2021).
  2. Javornik, A. Augmented reality: Research agenda for studying the impact of its media characteristics on consumer behaviour. Journal of Retailing and Consumer Services. 30, 252-261 (2016).
  3. Caboni, F., Hagberg, J. Augmented reality in retailing: a review of features, applications and value. International Journal of Retail & Distribution Management. 47 (11), 1125-1140 (2019).
  4. Kumar, H. Augmented reality in online retailing: a systematic review and research agenda. International Journal of Retail & Distribution Management. 50 (4), 537-559 (2022).
  5. Yim, M. Y. C., Park, S. Y. I am not satisfied with my body, so I like augmented reality (AR): Consumer responses to AR-based product presentations. Journal of Business Research. 100, 581-589 (2019).
  6. Chylinski, M., et al. Augmented reality marketing: A technology-enabled approach to situated customer experience. Australasian Marketing Journal. 28 (4), 374-384 (2020).
  7. Davis, F. D. . A Technology Acceptance Model for Empirically Testing New End-User Information Systems: Theory and Results. , (1985).
  8. Venkatesh, V., Morris, M. G., Davis, G. B., Davis, F. D. User acceptance of information technology: Toward a unified view. MIS Quarterly. 27 (3), 425-478 (2003).
  9. Davis, F. D. Perceived usefulness, perceived ease of use, and user acceptance of information technology. MIS Quarterly. 13 (3), 319-340 (1989).
  10. Chen, R., Perry, P., Boardman, R., McCormick, H. Augmented reality in retail: a systematic review of research foci and future research agenda. International Journal of Retail & Distribution Management. 50 (4), 498-518 (2022).
  11. Poushneh, A., Vasquez-Parraga, A. Z. Discernible impact of augmented reality on retail customer’s experience, satisfaction and willingness to buy. Journal of Retailing and Consumer Services. 34, 229-234 (2017).
  12. ISO. ISO 1998. Ergonomic requirements for office work with visual display terminals (VDTs)-Part 11: guidance on usability. ISO. , (2022).
  13. Hornbæk, K. Current practice in measuring usability: Challenges to usability studies and research. International Journal of Human-Computer Studies. 64 (2), 79-102 (2006).
  14. Tullis, T., Albert, B. . Measuring the User Experience: Collecting, Analyzing, and Presenting Usability Metrics. , (2008).
  15. Shneiderman, B., Plaisant, C., Cohen, M., Jacobs, S. M., Elmqvist, N. . Designing the User Interface: Strategies for Effective Human-Computer Interaction. , (2017).
  16. Morillo, P., Orduña, J. M., Casas, S., Fernández, M. A comparison study of AR applications versus pseudo-holographic systems as virtual exhibitors for luxury watch retail stores. Multimedia Systems. 25 (4), 307-321 (2019).
  17. Paas, F. G., Van Merriënboer, J. J. Instructional control of cognitive load in the training of complex cognitive tasks. Educational Psychology Review. 6 (4), 351-371 (1994).
  18. Ismail, R., Fabil, N., Saleh, A. Extension of pacmad model for usability evaluation metrics using goal question metrics (Gqm) approach. Journal of Theoretical and Applied Information Technology. 79 (1), 90-100 (2015).
  19. Fan, X., Chai, Z., Deng, N., Dong, X. Adoption of augmented reality in online retailing and consumers’ product attitude: A cognitive perspective. Journal of Retailing and Consumer Services. 53, 101986 (2020).
  20. Hart, S. G., Staveland, L. E. Development of NASA-TLX (Task Load Index): Results of empirical and theoretical research. Advances in Psychology. 52, 139-183 (1988).
  21. Petty, R. E., Cacioppo, J. T., Schumann, D. Central and peripheral routes to advertising effectiveness: The moderating role of involvement. Journal of Consumer Research. 10 (2), 135-146 (1983).
  22. He, L., Pelowski, M., Yu, W., Liu, T. Neural resonance in consumers’ right inferior frontal gyrus predicts attitudes toward advertising. Psychology & Marketing. 38 (9), 1538-1549 (2021).
  23. Riedl, R., Fischer, T., Léger, P. M., Davis, F. D. A decade of NeuroIS research: Progress, challenges, and future directions. ACM SIGMIS Database: the DATA BASE for Advances in Information Systems. 51 (3), 13-54 (2020).
  24. Vom Brocke, J., Liang, T. P. Guidelines for Neuroscience Studies in Information Systems Research. Journal of Management Information Systems. 30 (4), 211-234 (2014).
  25. Dimoka, A., Pavlou, P. A., Davis, F. NeuroIS: The potential of cognitive neuroscience for information systems research. Information Systems Research. 22 (4), 687-702 (2011).
  26. de Guinea, A. O., Titah, R., Léger, P. M. Explicit and implicit antecedents of users’ behavioral beliefs in information systems: A neuropsychological investigation. Journal of Management Information Systems. 30 (4), 179-210 (2014).
  27. Dimoka, A. How to conduct a Functional Magnetic Resonance (fmri) study in social science research. MIS Quarterly. 36 (3), 811-840 (2012).
  28. Dimoka, A., Davis, F. D. Where does TAM reside in the brain? The neural mechanisms underlying technology adoption. ICIS 2008 Proceedings. , 1-19 (2008).
  29. Moridis, C. N., Terzis, V., Economides, A. A., Karlovasitou, A., Karabatakis, V. E. Using EEG frontal asymmetry to predict IT user’s perceptions regarding usefulness, ease of use and playfulness. Applied Psychophysiology and Biofeedback. 43 (1), 1-11 (2018).
  30. Pinti, P., et al. A review on the use of wearable functional near-infrared spectroscopy in naturalistic environments. Japanese Psychological Research. 60 (4), 347-373 (2018).
  31. Piper, S. K., et al. A wearable multi-channel fNIRS system for brain imaging in freely moving subjects. Neuroimage. 85, 64-71 (2014).
  32. Quaresima, V., Ferrari, M. Functional Near-Infrared Spectroscopy (fNIRS) for assessing cerebral cortex function during human behavior in natural/social situations: A concise review. Organizational Research Methods. 22 (1), 46-68 (2019).
  33. Wang, J., et al. Exploring relationships between eye tracking and traditional usability testing data. International Journal of Human-Computer Interaction. 35 (6), 483-494 (2019).
  34. Dimoka, A., et al. On the use of neurophysiological tools in IS research: Developing a research agenda for NeuroIS. MIS Quarterly. 36, 679-702 (2012).
  35. Just, M. A., Carpenter, P. A. Eye fixations and cognitive processes. Cognitive Psychology. 8 (4), 441-480 (1976).
  36. Alex, P., Ball, L. J. Eye Tracking in Human-Computer Interaction and Usability Research: Current Status and Future. Encyclopedia of Human Computer Interaction, IGI Global. , 211-219 (2006).
  37. Just, M. A., Carpenter, P. A. A theory of reading: from eye fixations to comprehension. Psychological Review. 87 (4), 329 (1980).
  38. Yang, S., Carlson, J. R., Chen, S. How augmented reality affects advertising effectiveness: The mediating effects of curiosity and attention toward the ad. Journal of Retailing and Consumer Services. 54, 102020 (2020).
  39. Debie, E., et al. Multimodal fusion for objective assessment of cognitive workload: A review. IEEE Transactions on Cybernetics. 51 (3), 1542-1555 (2021).
  40. Işbilir, E., Çakır, M. P., Acartürk, C., Tekerek, A. &. #. 3. 5. 0. ;. Towards a multimodal model of cognitive workload through synchronous optical brain imaging and eye tracking measures. Frontiers in Human Neuroscience. 13, 375 (2019).
  41. Bruvold, W. H., Ongerth, H. J. Taste quality of mineralized water. Journal-American Water Works Association. 61 (4), 170-174 (1969).
  42. Marcussen, H., Holm, P. E., Hansen, H. Chr.B. Composition, flavor, chemical food safety, and consumer preferences of bottled water. Comprehensive Reviews in Food Science and Food Safety. 12 (4), 333-352 (2013).
  43. Whelton, A. J., Dietrich, A. M. Relationship between intensity, concentration, and temperature for drinking water odorants. Water Research. 38 (6), 1604-1614 (2004).
  44. (LIFESTYLE) What your choice of water says about you. FT live Available from: https://m.ftchinese.com/story/001006284/en?archive (2006)
  45. Pellegrini-Laplagne, M., et al. Effect of simultaneous exercise and cognitive training on executive functions, baroreflex sensitivity, and pre-frontal cortex oxygenation in healthy older adults: a pilot study. GeroScience. , (2022).
  46. Delpy, D. T., et al. Estimation of optical pathlength through tissue from direct time of flight measurement. Physics in Medicine & Biology. 33 (12), 1433-1442 (1988).
  47. Han, W., Gao, L., Wu, J., Pelowski, M., Liu, T. Assessing the brain ‘on the line’: An ecologically-valid assessment of the impact of repetitive assembly line work on hemodynamic response and fine motor control using fNIRS. Brain and Cognition. 136, 103613 (2019).
  48. Spiers, H. J., Maguire, E. A. Decoding human brain activity during real-world experiences. Trends in Cognitive Sciences. 11 (8), 356-365 (2007).
  49. Spence, C. Neuroscience-Inspired Design: From Academic Neuromarketing to Commercially Relevant Research. Organizational Research Methods. 22 (1), 275-298 (2019).
  50. Grasso-Cladera, A., Costa-Cordella, S., Rossi, A., Fuchs, N. F., Parada, F. J. Mobile brain/body imaging: Challenges and opportunities for the implementation of research programs based on the 4E perspective to cognition. Adaptive Behavior. , 1-26 (2022).
  51. Krampe, C., Strelow, E., Haas, A., Kenning, P. The application of mobile fNIRS to "shopper neuroscience" – first insights from a merchandising communication study. European Journal of Marketing. 52, 244-259 (2018).
  52. Meade, A. W., Watson, A. M., Kroustalis, C. M. Assessing common methods bias in organizational research. 22nd annual meeting of the society for industrial and organizational psychology. , 1-10 (2007).
  53. Liang, T. P., Lin, Y. L., Shiau, W. L., Chen, S. F. Investigating common method bias via an EEG study of the flow experience in website design. Journal of Electronic Commerce Research. 22 (4), 305-321 (2021).
  54. Kim, Y. M., Rhiu, I., Yun, M. H. A systematic review of a virtual reality system from the perspective of user experience. International Journal of Human-Computer Interaction. 36 (10), 893-910 (2020).

Play Video

Cite This Article
Wu, J., Zhang, D., Liu, T., Yang, H. H., Wang, Y., Yao, H., Zhao, S. Usability Evaluation of Augmented Reality: A Neuro-Information-Systems Study. J. Vis. Exp. (189), e64667, doi:10.3791/64667 (2022).

View Video