Summary

理解功能性近红外光谱 (fNIRS) 超扫描研究中跨脑相干性的新框架

Published: October 06, 2023
doi:

Summary

小波变换相干性 (WTC) 是评估信号之间耦合的常用方法,用于功能性近红外光谱 (fNIRS) 超扫描研究。本文提出了一个用于评估信号相互作用方向性的工具箱。

Abstract

尽管功能性近红外光谱(fNIRS)超扫描研究越来越多,但使用小波变换相干性(WTC)评估两个神经信号之间的耦合似乎忽略了相互作用的方向性。该领域目前缺乏一个框架,使研究人员能够确定使用WTC函数获得的高相干值是否反映了同相同步(即,神经激活同时出现在二元组的两个成员中),滞后同步(即神经激活在二元组的一个成员之前在另一个成员之前看到), 或反相位同步(即,神经激活在二元组的一个成员中增加,在另一个成员中减少)。为了满足这一需求,本文提出了一种互补且更灵敏的方法来分析两个神经信号的相位相干性。该工具箱允许研究人员通过将使用传统WTC获得的相位角值分类为同相同步、滞后同步和反相位同步来估计耦合方向性。该工具箱还允许研究人员评估整个任务中交互的动态如何发展和变化。使用这种新颖的WTC方法和工具箱,将通过它们在fNIRS超扫描研究中的使用来促进我们对复杂社会互动的理解。

Introduction

近年来,为理解社会行为的神经基础而进行的研究类型发生了变化 1,2.传统上,社会神经科学的研究集中在社会相关任务中一个孤立大脑的神经激活。然而,神经影像技术的进步现在允许在社交互动期间检查一个或多个人大脑中的神经激活,因为它发生在“现实生活”环境中3.在“现实生活”环境中,个人能够自由移动,随着信息交换和社会伙伴相互接收反馈,大脑激活的模式可能会发生变化4.

超扫描是一种通过同时测量两个或多个个体的大脑活动来评估这种双向信息交换的方法5.一项新兴的研究利用了功能性近红外光谱 (fNIRS),这是一种非侵入性神经成像技术,与其他神经成像技术相比,它不太容易受到运动伪影的影响6通过fNIRS进行的超扫描允许在现实生活中评估脑间同步(IBS),同时互动伙伴可以自由自然地移动。这与婴儿和幼儿的工作尤其相关,他们往往非常活跃。据报道,IBS 反映了互动伙伴之间的相互理解,这是有效社会互动和沟通的基础,并调解了共同的意向性 1,7,8

有几种方法用于评估两个大脑的IBS。这些方法包括时间序列相关性,例如互相关和皮尔逊相关系数 9,10(参见 Scholkmann 等人的评论 10)。其他方法包括评估频域中的耦合强度。这些方法包括锁相值(PLV)和相干性(参见Czeszumski等人的评论11)。fNIRS研究中最常见的方法之一是使用小波变换相干性(WTC),这是两个时间序列的互相关性作为频率和时间10的函数的度量。

WTC使用相关分析来计算时频域中两个时间序列之间的相干性和相位滞后。FNIRS 超扫描研究使用 WTC 来估计许多功能领域的 IBS,包括行动监测 12、合作和竞争行为513、14、15、模仿16、母婴问题解决 17 和教学行为18192021.通常,在超扫描研究中,将实验任务期间由WTC测量的跨脑相干性与控制任务期间的跨脑相干性进行比较。这些发现通常以WTC“热图”呈现,该图显示了每个时间点和频率下两个大脑的连贯性(见图1)。

正如 Czesumaski 等人 11 所建议的,WTC 已成为分析 fNIRS 超扫描的标准分析方法。WTC 分析是一种灵活的、“与工具无关”的数据可视化和解释方法22.相干系数热图提供了一种叙述性的分析形式,可以轻松识别同步或异步行为的时期以及完成任务期间的大脑活动强度,这是WTC的主要优势,使其成为应用研究的有力工具22。与相关技术相比,WTC具有优势。相关性对血流动力学反应函数 (HRF) 的形状很敏感,这被认为在个体之间(特别是在年龄方面)和不同大脑区域之间有所不同。相比之下,世贸中心不受(HRF)23区域间变化的影响。研究人员使用小波方法研究了fMRI时间序列。Zhang等[24 ]比较了常用的功能连通性指标,包括Pearson相关、偏相关、互信息和小波相干变换(WTC)。他们使用源自静息态fMRI数据和视频观看的自然刺激fMRI数据的大规模功能连接模式进行了分类实验。他们的研究结果表明,WTC在分类(特异性、灵敏度和准确性)方面表现最好,这意味着WTC是研究功能性脑网络的首选功能连接指标,至少在分类应用中是这样24

Figure 1
图 1:小波变换相干性 (WTC)。 WTC 将两个时间序列之间的相干性和相位角显示为时间(x 轴)和频率(y 轴)的函数。相干性增加用图中的红色表示,图中的小箭头表示两个时间序列的相位角。向右箭头表示同相同步;向下和向上的箭头表示滞后同步;向左箭头表示反相位同步30。该图改编自 Pan et al.19请点击这里查看此图的较大版本.

最近,Hamilton25 阐明了fNIRS超扫描研究中跨脑相干数据解释的几个局限性。汉密尔顿的主要担忧之一是,连贯性测量(例如,WTC)仅将效应报告为对称(即,两个大脑是相关的,显示出相同的变化模式)。然而,许多社交互动是不对称的(例如,说话者和听众之间的信息流),因为两个参与者可能扮演不同的角色,目前尚不清楚WTC是否可以捕获这些信息。在这里,这个问题通过一个新的框架来解决,该框架允许通过使用交叉小波相位来检测方向性来直接解释交叉小波功率。该框架还将允许检查交互的动态如何在整个任务中发展和变化。

WTC和相关方法评估功能连接,而其他方法评估有效连接,试图提取一个神经元素对另一个神经元素的因果影响。传递熵是信息论领域的一种度量,它描述了共同依赖过程之间的传递26.另一种相关方法是格兰杰因果关系分析(GCA),它被描述为等同于转移熵26

在现有的fNIRS超扫描研究文献中,Granger因果关系分析(GCA)已被广泛用于估计在各种不同任务中获得的fNIRS时间序列数据之间的耦合方向性,例如合作5、教学19和模仿16。GCA 采用向量自回归模型来评估大脑数据中时间序列之间耦合的方向性。格兰杰因果关系基于预测和优先性:“如果 X 的过去包含有助于预测 Y 未来的信息,而不是 Y 过去已经存在的信息,则称变量 X 为变量 Y’G-cause‘”27。因此,从两个方向分析G因果关系:1)从受试者A到受试者B,2)从受试者B到受试者A。

虽然GCA分析是一种补充分析,旨在确定使用WTC函数获得的高相干值是否反映了IBS或滞后同步(一个信号领先另一个信号),但它无法确定是否发生了反相位同步。在传统的神经影像学研究中,只扫描一名参与者(即“单脑”方法),反相模式意味着一个大脑区域的活动增加,而另一个大脑区域的活动减少28。在超扫描文献中,反相位同步的存在可能表明一个受试者的神经激活增加,同时,另一个受试者的神经激活减少。因此,需要提供一个可以检测方向性的综合模型。更具体地说,除了同相同步和滞后同步之外,该模型还能够检测反相位同步(其中一个人的活动方向与其伴侣的活动方向相反)。

为了解决WTC仅显示对称效应(两个大脑都显示出相同的变化模式)25的问题,提出了一种通过检查同步相位(即同相、滞后或反相位)来识别相互作用类型的新方法(见 图2)。为此,开发了一个使用WTC方法对不同类型的相互作用进行分类的工具箱。通过使用来自交叉小波变换分析的相对相位数据对相互作用类型进行分类。

Figure 2
图 2:简单正弦波的不同相位关系图示。 (A) 当信号 1(蓝线 s)和信号 2(橙线s)这两个信号在同一时间点达到各自的最大值、最小值和零值时,称它们显示同相同步32。(B) 当一个信号在同一时间点达到其最大值而另一个信号达到零值时,称它们表现出滞后同步(一个信号领先 90°)32,33,34。(C)当两个时间序列向相反方向移动时,即一个信号在同一时间点达到最大值,另一个信号达到最小值,这称为反相位同步28。(D-P)在两个时间序列之间的所有其他相位关系中,一个信号领先于另一个信号。在所有正相中,信号 2 领先信号 1(例如,面板 EFMN),而在所有负相中,信号 1 领先信号 2(例如,面板 DGHOP)。值得注意的是,当阶段的绝对值较高时,哪个时间序列领先于另一个时间序列变得更加明显(例如,面板 J 中的领导力比面板 I 中的领导力更独特,而在面板 K 中,领导力比面板 L 更独特)。请点击这里查看此图的较大版本.

Protocol

该研究在佛罗里达大西洋大学(FAU)进行,并得到了FAU机构审查委员会(IRB)的批准。 1. 使用Homer3软件(材料表)对fNIRS超扫描数据进行预处理 注:Homer3 是一个 MATLAB 应用程序,用于分析 fNIRS 数据以获得大脑激活的估计值和图谱29。Homer3 可以从以下链接 (https://openfnirs.org/software/homer/) 下载和安装。 打开 MATLAB,然?…

Representative Results

本节演示了可以使用工具箱(可在 https://www.ariel.ac.il/wp/sns/download/ 或 https://github.com/Minisharmaa/Leader-Follower-By-Phase 下载)执行的分析类型。对于这些分析,使用了用少量婴儿-父母二元组样本收集的fNIRS数据。使用经过验证的行为任务(自由游戏任务31)测试了六对母婴二人组,该任务尽可能接近现实生活中的婴儿与母亲的互动。在实验之前,婴儿和父母被配备了一套定制的光电设?…

Discussion

fNIRS研究中最常用的方法之一是小波变换相干性(WTC),它是两个时间序列作为频率和时间10函数的互相关性的度量。WTC使用相关分析(补充文件1)计算两个时间序列之间的相干性和相位滞后。FNIRS 超扫描研究使用 WTC 来估计许多功能领域的 IBS,包括行动监测 12、合作和竞争行为513、14、15、模仿16、母婴问题解…

Declarações

The authors have nothing to disclose.

Acknowledgements

感谢国家自然科学基金(第62207025号)、教育部人文社会科学研究项目(第22YJC190017号)和中央高校基本科研业务费专项资金对潘亚峰的支持。

Materials

NIRScout   NIRx Medical Technologies, LLC n.a. 8 sources, 8 detectors
MATLAB The Mathworks, Inc. Matlab 2022a In this protocol, several toolboxes and buit in MATLAB functions were used: HOMER3 toolbox was used to convert Intensity to OD, to remove motion artifacts through its function hmrMotionCorrectWavelet with default parameters and to convert OD to Conc. Wavelet Toolbox was used to compute WTC.

Referências

  1. Gvirts, H. Z., Perlmutter, R. What guides us to neurally and behaviorally align with anyone specific? A neurobiological model based on fNIRS hyperscanning studies. The Neuroscientist. 26 (2), 108-116 (2019).
  2. Balconi, M., Fronda, G., Vanutelli, M. E. Donate or receive? Social hyperscanning application with fNIRS. Current Psychology. 38 (4), 991-1002 (2019).
  3. Redcay, E., Schilbach, L. Using second-person neuroscience to elucidate the mechanisms of social interaction. Nature Reviews Neuroscience. 20 (8), 495-505 (2019).
  4. Shamay-Tsoory, S. G., Mendelsohn, A. Real-life neuroscience: An ecological approach to brain and behavior research. Perspectives on Psychological Science. 14 (5), 841-859 (2019).
  5. Cui, X., Bryant, D. M., Reiss, A. L. NIRS-based hyperscanning reveals increased interpersonal coherence in superior frontal cortex during cooperation. NeuroImage. 59 (3), 2430-2437 (2012).
  6. Quaresima, V., Ferrari, M. Functional near-infrared spectroscopy (fNIRS) for assessing cerebral cortex function during human behavior in natural/social situations: A concise review. Organizational Research Methods. 22 (1), 46-68 (2016).
  7. Fishburn, F. A., et al. Putting our heads together: interpersonal neural synchronization as a biological mechanism for shared intentionality. Social Cognitive and Affective Neuroscience. 13 (8), 841-849 (2018).
  8. Hasson, U., Ghazanfar, A. A., Galantucci, B., Garrod, S., Keysers, C. Brain-to-brain coupling: A mechanism for creating and sharing a social world. Trends in Cognitive Sciences. 16 (2), 114-121 (2012).
  9. Chang, C., Glover, G. H. Time-frequency dynamics of resting-state brain connectivity measured with fMRI. NeuroImage. 50 (1), 81-98 (2010).
  10. Scholkmann, F., Holper, L., Wolf, U., Wolf, M. A new methodical approach in neuroscience: Assessing inter-personal brain coupling using functional near-infrared imaging (fNIRI) hyperscanning. Frontiers in Human Neuroscience. 7, 813 (2013).
  11. Czeszumski, A., et al. Hyperscanning: A valid method to study neural inter-brain underpinnings of social interaction. Frontiers in Human Neuroscience. 14, 39 (2020).
  12. Dommer, L., Jäger, N., Scholkmann, F., Wolf, M., Holper, L. Between-brain coherence during joint n-back task performance: A two-person functional near-infrared spectroscopy study. Behavioural Brain Research. 234 (2), 212-222 (2012).
  13. Osaka, N., Minamoto, T., Yaoi, K., Azuma, M., Osaka, M. Neural synchronization during cooperated humming: A hyperscanning study using fNIRS. Procedia – Social and Behavioral Sciences. 126, 241-243 (2014).
  14. Wang, C., Zhang, T., Shan, Z., Liu, J., Yuan, D., Li, X. Dynamic interpersonal neural synchronization underlying pain-induced cooperation in females. Human Brain Mapping. 40 (11), 3222-3232 (2019).
  15. Cheng, X., Li, X., Hu, Y. Synchronous brain activity during cooperative exchange depends on gender of partner: A fNIRS-based hyperscanning study. Human Brain Mapping. 36 (6), 2039-2048 (2015).
  16. Holper, L., Scholkmann, F., Wolf, M. Between-brain connectivity during imitation measured by fNIRS. NeuroImage. 63 (1), 212-222 (2012).
  17. Nguyen, T., et al. The effects of interaction quality on neural synchrony during mother-child problem solving. Cortex. 124, 235-249 (2020).
  18. Zheng, L., et al. Enhancement of teaching outcome through neural prediction of the students’ knowledge state. Human Brain Mapping. 39 (7), 3046-3057 (2018).
  19. Pan, Y., Novembre, G., Song, B., Li, X., Hu, Y. Interpersonal synchronization of inferior frontal cortices tracks social interactive learning of a song. NeuroImage. 183, 280-290 (2018).
  20. Pan, Y., et al. Instructor-learner brain coupling discriminates between instructional approaches and predicts learning. NeuroImage. 211, 116657 (2020).
  21. Liu, J., et al. Interplay between prior knowledge and communication mode on teaching effectiveness: Interpersonal neural synchronization as a neural marker. NeuroImage. 193, 93-102 (2019).
  22. Léné, P., et al. Wavelet transform coherence: An innovative method to investigate social interaction in NeuroIS. Lecture Notes in Information Systems and Organisation. 32, 147-154 (2020).
  23. Nguyen, T., Hoehl, S., Vrtička, P. A guide to parent-child fNIRS hyperscanning data processing and analysis. Sensors. 21 (12), 4075 (2021).
  24. Zhang, Y., Han, J., Hu, X., Guo, L., Liu, T. Data-driven evaluation of functional connectivity metrics. Proceedings – International Symposium on Biomedical Imaging. , 532-535 (2013).
  25. Hamilton, A. F. d. e. C. Hyperscanning: Beyond the hype. Neuron. 109 (3), 404-407 (2021).
  26. Barnett, L., Barrett, A. B., Granger Seth, A. K. causality and transfer entropy are equivalent for Gaussian variables. Physical Review Letters. 103 (23), 2-5 (2009).
  27. Barnett, L., Seth, A. K. The MVGC multivariate Granger causality toolbox: A new approach to Granger-causal inference. Journal of Neuroscience Methods. 223, 50-68 (2014).
  28. Li, D., Zhou, C. Organization of anti-phase synchronization pattern in neural networks: What are the key factors. Frontiers in Systems Neuroscience. 5, 100 (2011).
  29. Huppert, T. J., Diamond, S. G., Franceschini, M. A., Boas, D. A. HomER: A review of time-series analysis methods for near-infrared spectroscopy of the brain. Applied Optics. 48 (10), D280-D298 (2009).
  30. Grinsted, A., Moore, J. C., Jevrejeva, S. Application of the cross wavelet transform and wavelet coherence to geophysical time series. Nonlinear Processes in Geophysics. 11 (5-6), 561-566 (2004).
  31. Feldman, R. Parent-infant synchrony. Current Directions in Psychological Science. 16 (6), 340-345 (2007).
  32. Fell, J., Axmacher, N. The role of phase synchronization in memory processes. Nature Reviews Neuroscience. 12 (2), 105-118 (2011).
  33. Olcay, B. O., Karaçalı, B. Evaluation of synchronization measures for capturing the lagged synchronization between EEG channels: A cognitive task recognition approach. Computers in Biology and Medicine. 114, 103441 (2019).
  34. Stam, C. J. Nonlinear dynamical analysis of EEG and MEG: Review of an emerging field. Clinical Neurophysiology. 116 (10), 2266-2301 (2005).
  35. Mallat, S. . A Wavelet Tour of Signal Processing. , (2009).
  36. Kleinbub, J. R., Ramseyer, F. T. . rMEA: An R package to assess nonverbal synchronization in motion energy analysis time-series. 31 (6), 817-830 (2020).
  37. Pan, Y., Novembre, G., Song, B., Zhu, Y., Hu, Y. Dual brain stimulation enhances interpersonal learning through spontaneous movement synchrony. Social Cognitive and Affective Neuroscience. 16 (1-2), 210-221 (2021).
  38. Ramseyer, F., Tschacher, W. Nonverbal synchrony in psychotherapy: Coordinated body movement reflects relationship quality and outcome. Journal of Consulting and Clinical Psychology. 79 (3), 284-295 (2011).
  39. Zhang, X., Noah, J. A., Dravida, S., Hirsch, J. Optimization of wavelet coherence analysis as a measure of neural synchrony during hyperscanning using functional near-infrared spectroscopy. Neurophotonics. 7 (1), 015010 (2020).
  40. Walton, A. E., Richardson, M. J., Langland-Hassan, P., Chemero, A. Improvisation and the self-organization of multiple musical bodies. Frontiers in Psychology. 6, 313 (2015).
  41. Varlet, M., Marin, L., Lagarde, J., Bardy, B. G. Social postural coordination. Journal of Experimental Psychology: Human Perception and Performance. 37 (2), 473-483 (2011).
  42. Hale, J., Ward, J. A., Buccheri, F., Oliver, D., Hamilton, A. F. d. e. C. Are you on my wavelength? Interpersonal coordination in dyadic conversations. Journal of Nonverbal Behavior. 44 (1), 63-83 (2020).
  43. Fujiwara, K., Daibo, I. Evaluating interpersonal synchrony: Wavelet transform toward an unstructured conversation. Frontiers in Psychology. 7, 516 (2016).
  44. Nozawa, T., Sasaki, Y., Sakaki, K., Yokoyama, R., Kawashima, R. Interpersonal frontopolar neural synchronization in group communication: An exploration toward fNIRS hyperscanning of natural interactions. NeuroImage. 133, 484-497 (2016).
  45. Dai, R., et al. Holistic cognitive and neural processes: A fNIRS-hyperscanning study on interpersonal sensorimotor synchronization. Social Cognitive and Affective Neuroscience. 13 (11), 1141-1154 (2018).
  46. Lu, K., Qiao, X., Yun, Q., Hao, N. Educational diversity and group creativity: Evidence from fNIRS hyperscanning. NeuroImage. 243, 118564 (2021).
check_url/pt/65347?article_type=t

Play Video

Citar este artigo
Gvirts Provolovski, H. Z., Sharma, M., Gutman, I., Dahan, A., Pan, Y., Stotler, J., Wilcox, T. New Framework for Understanding Cross-Brain Coherence in Functional Near-Infrared Spectroscopy (fNIRS) Hyperscanning Studies. J. Vis. Exp. (200), e65347, doi:10.3791/65347 (2023).

View Video