Summary

電気生理学を用いた視覚語認識における音韻論的過程と意味過程の相互作用

Published: June 29, 2021
doi:

Summary

我々は、視覚語認識におけるフォンロジーと意味論の相対的活性化シーケンスを探求するためのプロトコルを提示する。この結果は、インタラクティブなアカウントとの整合性、意味表現および音韻表現が対話的に処理され、より高レベルの言語表現が早期処理に影響を及ぼす可能性があることを示している。

Abstract

論争は常に読解能力に関連する研究に存在してきた。印刷された単語が正交情報に基づいてフィードフォワード的に認識されるかどうか、その後、イオン学やセマンティックなどの他の表現が活性化されるのか、またはそれらが完全にインタラクティブで高レベルの意味情報であるかどうかが早期処理に影響を及ぼすかどうか。干渉パラダイムは、同じ先行ターゲットペアを使用して、音韻と意味活性化の相対的な順序を探求する、提示された音韻的および意味判断タスクのプロトコルに実装された。高周波および低周波ターゲットワードの前には、意味的に関連する、音韻関連(同音異義音語)、または無関係の3つの条件が付いた。結果は、低周波ワードペアの誘導P200成分が、意味的および音韻的なタスクの両方において高周波語よりも有意に大きいことを示した。また、意味的タスクにおける同二音異義と音韻的に関連する対の両方が、制御条件と比較してN400の減少を引き起こし、単語周波数を独立に行う。音韻判定タスクにおける低周波ペアでは、意味的に関連する単語ペアによってリリースされたP200は、制御条件のそれよりも有意に大きかったことは注目に値する。全体的に、音韻論的なタスクにおける意味的な処理と、意味的なタスクにおける音韻処理は、高頻度と低頻度の両方の単語で見つかり、意味論と音韻論の相互作用がタスクに依存しない方法で動作する可能性が示唆された。ただし、この対話が発生した特定の時間は、タスクと頻度の影響を受けている可能性があります。

Introduction

あらゆる単語認識モデルにおける重要な問題は、意味的アクセスの過程におけるフォンロジーの役割を理解することです 1.アルファベット言語の場合、多くの研究は一貫して英語2、3、4、ヘブライ語5、フランス6、スペイン語7を含むセマンティックアクセスにおいて重要な役割を果たしていると見なしています。つまり、文字認識には正射音だけでなく、音韻的な処理や意味的な処理も含まれます。インタラクティブな接続モデルにおけるこの観察は、ネットワーク全体で活性化された拡張によって説明され、そこでorthographyは加重接続を介した音韻表現および意味表現に関連する8.この活性化の急増は、音韻表現と意味表現が正投影入力9に応答して自動的に活性化されることを前提とする視覚単語認識モデルのコアメカニズムを提供する。

しかし、インタラクティブオートメーションの仮説を裏付ける現在の実証的証拠は依然として議論の余地がある。いくつかの研究は、音韻的および意味表現の活性化は、タスクの要求または注意によって調整または防止することができると主張する、 これは、単語知覚10,11に関与する高レベルのプロセスに一定のトップダウンの影響を意味する。しかし、前述の説明は、これらの表現がタスクとは全く無関係であるか、または直接アクセスできない12の視覚語認識における音韻的および意味的影響を報告するという多くの知見によって疑問視されており、それによって、読み取りプロセス中に意味論と音韻論に自動的かつ強制的にアクセスすることができるという見解を支持する13.したがって、視覚ワード認識における音韻的および意味的な活性化が、特定のタスクに依存するのか、それともタスクに依存しない方法で強制的かつ自動的に発生するのか、という不確実性があります。

前述の質問に対する答えは、中国人の読者にとって難しい。英語と比較して、中国語は、文字が音素14ではなく形態素を表すロゴグラフィックスクリプトです。現在、中国語の単語に意味的にアクセスするためのフォンロジーの役割は議論の余地があります。いくつかの研究は、フォンロジーは、中国語の単語15、16、17への意味的アクセスに重要な役割を果たしている主張している。しかし、他の人は反対の見解を持っています 18,19.前述の中国の音韻処理研究を評価した結果、実験パラダイムと特定の研究方法が異なることがわかりました。全体として、それは主に2つのパラダイムに分かれていた:単語プライミング15、18、19と文17、20、21の違反パラダイム。ターゲット語は、通常、違反パラダイム22に文の最後に埋め込まれます。言語の仕組みでは、短い2語のフレーズは、23を処理するのが難しい完全な文よりも管理しやすい単位です。さらに、構文、文脈、その他の要因など、文の中で制御が難しい変数は、異なる結論24に至る可能性があります。プライミングパラダイムという言葉は、アルファベット言語でも中国語でも、単語認識モデルを探索するために一般的に使用される方法です。このパラダイムのタスクは、プライムが先行する対象語が実際の単語か仮語かを判断することであり、その結果を示す。つまり、このパラダイムには通常、1 つの構文タスクのみが含まれます。しかし、単一の語彙決定タスクは、フォンロジーとセマンティクスの活性化がタスクに依存するかどうかという問題を解決するのに最良の選択ではないかもしれません。したがって、この質問を調べるには、2 つの異なるタスクの方が適している可能性があります。

そこで、この研究は、中国語の単語認識におけるフォンロジーの役割を探り、同時に、フォンロジーとセマンティクスの活性化がタスクに依存しないかどうかを判断することを目的とした。我々の研究には、干渉パラダイムを用いた2つのタスク(意味判断と音韻判断)が含まれています。我々の知る限りでは、この干渉パラダイムを用いた中国の二文字化合物認識の初めての事象関連ポテンシャル(ERP)研究であり、この方法は、英字言語の研究ではめったに現れない。具体的には、意味判断タスクでは、参加者は、対象の単語とその前例が意味的に関連しているかどうかを判断する必要がありますが、音韻的なタスクでは、ペアの単語が同じ発音を持っているかどうかを判断する必要があります。

前者は、音韻的処理を必要としない意味マッチングタスクであり、後者は、優先的意味処理を必要としない音韻判断タスクである。そこで、意味判断タスクでホモフォンペアと無関係な対照群を比較し、音源が意味処理に与える影響と影響を明らかにした。同様に、音韻判断タスクで意味的に関連する単語ペアと無関係な制御条件を比較し、意味論が音韻処理に及ぼす影響を明らかにした。また、上記の問題は、高周波語および低周波語で検証された。したがって、この補完的な意味と音韻的判断タスクは、中国語の単語認識における音韻処理の重要性を明らかにするだけでなく、音韻論と意味論が相互作用するかどうか、そしてどのように相互作用するかを明らかにすることができる。

音韻論と意味論のプロセスが早く、自動で、そしてインタラクティブであるならば、音韻学的および意味的活性化の効果は、2つのタスクの応答時間で観察されるべきである。ERPの場合、音韻学的および意味的プロセスは、2つの異なる電気生理学的マーカー2、7をトリガする。さらに、時間コースと空間分布は異なるはずです。初期陽性成分(P200)は、音韻処理を反映し、典型的な意味処理マーカーN400も20,21を同定する必要があります。意味的なタスクの音韻的に関連する対と、音韻的なタスクにおける意味的関連のペアの両方がN400の有意な減少を引き起こすと仮定し、これは、音韻処理が字句セマンティックレベルでの活性化の程度につながる可能性があることを示したであろう。また、音韻処理を特徴づけるP200が意味判断タスクや音韻判断タスクに現れたかどうかを監視した。音韻判断タスクでは、意味に関連した条件がP200を引き起こし、これは音韻処理に対する意味論の初期の影響の証拠と見なすことができる。

Protocol

本研究に用いる議定書は清華大学の機関審査委員会によって承認された。 1. 刺激の構築とプレゼンテーション 刺激構造 刺激準備:約140の中国の2文字化合物を含むターゲットワードを準備し、そのうち低周波と高周波の単語が半分を占めます。各ターゲットの前に、音韻的に同一の単語(同音語)、関連する意味を持つ単語、無関係な制御ワードの3つの類似体?…

Representative Results

このプロトコルは、中国の2文字化合物認識におけるフォンロジーの役割を調査し、単語認識モデル26を推測するために、最近の研究で使用されました。この研究で使用されるすべての刺激は完全に開示された26.グローバルフィールドパワー(GFP)に基づいて3つのタイムウィンドウが選択されました:それぞれ100-150 ms、160〜280 ms、およびN1、P200、N400コンポーネ?…

Discussion

実験結果と意義:
このプロトコルの目的は、次の例を推測することであった: 1) 単語認識モデルがフィードフォワードモデルかインタラクティブモデルか、2)異なるタスクの下で高い頻度と低頻度の中国の二文字合成認識における音韻的および意味パターン間の相互作用。ERP技術を用いた音韻的・意味合いの干渉パラダイムを採用した。同音異義語とターゲットに対する無関係?…

Disclosures

The authors have nothing to disclose.

Acknowledgements

この研究は、中国国立自然科学財団(62036001)の主要プログラムによって支援されました。

Materials

BrainAmp DC amplifier system (Brain Products GmbH) Brain Products, Gilching, Germany BrainAmp S/N AMP13061964DC Input 5.6DC=150mA Operation 7mA Standby
Easycap (Brain Products GmbH) Brain Products, Gilching, Germany 62 Ag/AgCl electrodes with a configuration of the international 10–20 system of electrode

References

  1. Carreiras, M., Armstrong, B. C., Perea, M., Frost, R. The what, when, where, and how of visual word recognition. Trends in Cognitive Sciences. 18 (2), 90-98 (2014).
  2. Grainger, J., Kiyonaga, K., Holcomb, P. J. The time course of orthographic and phonological code activation. Psychological Science. 17 (12), 1021-1026 (2006).
  3. Ashby, J. Phonology is fundamental in skilled reading: Evidence from ERPs. Psychonomic Bulletin Review. 17 (1), 95-100 (2010).
  4. Wilson, L. B., Tregellas, J. R., Slason, E., Pasko, B. E., Rojas, D. C. Implicit phonological priming during visual word recognition. Neuroimage. 55 (2), 724-731 (2011).
  5. Frost, R., Ahissar, M., Gotesman, R., Tayeb, S. Are phonological effects fragile? The effect of luminance and exposure duration on form priming and phonological priming. Journal of Memory and Language. 48 (2), 346-378 (2003).
  6. Ferrand, L., Grainger, J. Effects of orthography are independent of phonology in masked form priming. The Quarterly Journal of Experimental Psychology. 47 (2), 365-382 (1994).
  7. Carreiras, M., Perea, M., Vergara, M., Pollatsek, A. The time course of orthography and phonology: ERP correlates of masked priming effects in Spanish. Psychophysiology. 46 (5), 1113-1122 (2009).
  8. Pattamadilok, C., et al. Automaticity of phonological and semantic processing during visual word recognition. Neuroimage. 149, 244-255 (2017).
  9. Harm, M. W., Seidenberg, M. S. Computing the meanings of words in reading: Cooperative division of labor between visual and phonological processes. Psychological Review. 111 (3), 662-720 (2004).
  10. Brown, M. S., Roberts, M. A., Besner, D. Semantic processing in visual word recognition: Activation blocking and domain specificity. Psychonomic Bulletin & Review. 8 (4), 778-784 (2001).
  11. Devlin, J. T., Matthews, P. M., Rushworth, M. F. S. Semantic processing in the left inferior prefrontal cortex: A combined functional magnetic resonance imaging and transcranial magnetic stimulation study. Journal of Cognitive Neuroscience. 15 (1), 71-84 (2003).
  12. Rodd, J. M. When do leotards get their spots? Semantic activation of lexical neighbors in visual word recognition. Psychonomic Bulletin & Review. 11 (3), 434-439 (2004).
  13. Frost, R. Toward a strong phonological theory of visual word recognition: True issues and false trails. Psychological Bulletin. 123 (1), 71-99 (1998).
  14. Yu, L., Reichle, E. D. Chinese versus English: Insights on cognition during reading. Trends in Cognitive Sciences. 21 (10), 721-724 (2017).
  15. Tan, L. H., Perfetti, C. A. Phonological activation in visual identification of Chinese two-character words. Journal of Experimental Psychology: Learning, Memory, and Cognition. 25 (2), 382 (1999).
  16. Liu, Y., Perfetti, C. A., Hart, L. ERP evidence for the time course of graphic, phonological, and semantic information in Chinese meaning and pronunciation decisions. Journal of Experimental Psychology: Learning, Memory, and Cognition. 29 (6), 1231 (2003).
  17. Ren, G. -. Q., Liu, Y., Han, Y. -. C. Phonological activation in chinese reading: an event-related potential study using low-resolution electromagnetic tomography. Neuroscience. 164 (4), 1623-1631 (2009).
  18. Wang, K., Mecklinger, A., Hofmann, J., Weng, X. From orthography to meaning: an electrophysiological investigation of the role of phonology in accessing meaning of Chinese single-character words. Neuroscience. 165 (1), 101-106 (2010).
  19. Wong, A. -. K., Wu, Y., Chen, H. -. C. Limited role of phonology in reading Chinese two-character compounds: Evidence from an ERP study. Neuroscience. 256, 342-351 (2014).
  20. Meng, X., Jian, J., Shu, H., Tian, X., Zhou, X. ERP correlates of the development of orthographical and phonological processing during Chinese sentence reading. Brain research. 1219, 91-102 (2008).
  21. Liu, B., Jin, Z., Qing, Z., Wang, Z. The processing of phonological, orthographical, and lexical information of Chinese characters in sentence contexts: an ERP study. Brain research. 1372, 81-91 (2011).
  22. Leminen, A., Smolka, E., Dunabeitia, J. A., Pliatsikas, C. Morphological processing in the brain: The good (inflection), the bad (derivation) and the ugly (compounding). Cortex. 116, 4-44 (2019).
  23. Pylkkänen, L. The neural basis of combinatory syntax and semantics. Science. 366 (6461), 62-66 (2019).
  24. Halgren, E., et al. N400-like magnetoencephalography responses modulated by semantic context, word frequency, and lexical class in sentences. Neuroimage. 17 (3), 1101-1116 (2002).
  25. Huang, Y., Jiang, M., Guo, Q., Wang, Y., Yang, F. -. P. G. Dissociation of the confounding influences of expectancy and integrative difficulty residing in anomalous sentences in event-related potential studies. Journal of Visualized Experiments. (147), e59436 (2019).
  26. Wang, Y., Jiang, M., Huang, Y., Qiu, P. An ERP study on the role of phonological processing in reading two-character compound chinese words of high and low frequency. Frontiers in Psychology. 12, 637238 (2021).
  27. Carreiras, M., Vergara, M., Barber, H. Early event-related potential effects of syllabic processing during visual word recognition. Journal of Cognitive Neuroscience. 17 (11), 1803-1817 (2005).
  28. Hauk, O., Davis, M. H., Ford, M., Pulvermuller, F., Marslen-Wilson, W. D. The time course of visual word recognition as revealed by linear regression analysis of ERP data. Neuroimage. 30 (4), 1383-1400 (2006).

Play Video

Cite This Article
Wang, Y., Jiang, M., Xu, X., Huang, Y. Interaction between Phonological and Semantic Processes in Visual Word Recognition using Electrophysiology. J. Vis. Exp. (172), e62673, doi:10.3791/62673 (2021).

View Video