Summary

Interactie tussen fonologische en semantische processen in visuele woordherkenning met behulp van elektrofysiologie

Published: June 29, 2021
doi:

Summary

We presenteren een protocol om de relatieve activeringsvolgorde van fonologie en semantiek in visuele woordherkenning te verkennen. De resultaten tonen aan dat in overeenstemming met interactieve verslagen, semantische en fonologische representaties interactief kunnen worden verwerkt en dat taalkundige representaties op een hoger niveau van invloed kunnen zijn op vroege verwerking.

Abstract

Controverses hebben altijd bestaan in onderzoek met betrekking tot leesvaardigheid; over de vraag of gedrukte woorden op een feedforward-manier worden waargenomen op basis van orthografische informatie waarna andere representaties, zoals fonologie en semantiek worden geactiveerd, of dat deze volledig interactief zijn en semantische informatie op hoog niveau van invloed is op vroege verwerking. Een interferentieparadigma werd geïmplementeerd in het gepresenteerde protocol van fonologische en semantische beoordelingstaken die dezelfde vooraf-doelparen gebruikten om de relatieve volgorde van fonologische en semantische activering te verkennen. De hoog- en laagfrequente doelwoorden werden voorafgegaan door drie voorwaarden: semantisch verwant, fonologisch verwant (homofonen) of niet-verwant. De resultaten toonden aan dat de geïnduceerde P200-component van laagfrequente woordparen significant groter was dan hoogfrequente woorden in zowel de semantische als de fonologische taken. Bovendien veroorzaakten zowel de homofonen in de semantische taak als de semantisch verwante paren in de fonologische taak een vermindering van N400 in vergelijking met de controleconditie, woordfrequentie-onafhankelijk. Het is vermeldenswaard dat voor de laagfrequente paren in de fonologische oordeelstaak, de P200 die vrijkwam door de semantisch verwante woordparen significant groter was dan die in de controleconditie. Over het algemeen werden semantische verwerking in fonologische taken en fonologische verwerking in semantische taken gevonden in zowel hoog- als laagfrequente woorden, wat suggereert dat de interactie tussen semantiek en fonologie op een taakonafhankelijke manier kan werken. De specifieke tijd waarop deze interactie plaatsvond, kan echter zijn beïnvloed door de taak en frequentie.

Introduction

Het kritieke probleem in elk woordherkenningsmodel is het begrijpen van de rol van fonologie in het proces van semantische toegang1. Voor alfabetische talen beschouwen veel studies fonologie consequent als een belangrijke rol spelend bij semantische toegang, waaronder Engels2,3,4,Hebreeuws5,Frans6en Spaans7. Met andere woorden, geschreven woordherkenning omvat niet alleen orthografische, maar ook fonologische en semantische verwerking. Deze waarneming in het interactieve connectionistische model wordt verklaard door uitbreidingen die in het hele netwerk worden geactiveerd, waarbij orthografie wordt geassocieerd met fonologische en semantische representaties door middel van gewogen verbindingen8. Deze proliferatie van activering biedt het kernmechanisme voor het visuele woordherkenningsmodel, dat ervan uitgaat dat fonologische en semantische representaties automatisch worden geactiveerd als reactie op orthografische invoer9.

Het huidige empirische bewijs dat de hypothese van interactieve automatisering ondersteunt, blijft echter controversieel. Sommige studies beweren dat de activering van fonologische en semantische representaties kan worden aangepast of voorkomen door taakeisen of aandacht, wat een zekere top-down invloed impliceert op de processen op hoog niveau die betrokken zijn bij woordperceptie10,11. De bovengenoemde beschrijving is echter in twijfel getrokken door vele bevindingen die fonologische en semantische effecten in visuele woordherkenning rapporteren, hoewel deze representaties volledig irrelevant zijn voor de taak of niet rechtstreeks toegankelijk zijn12, waardoor de opvatting wordt ondersteund dat semantiek en fonologie automatisch en met geweld toegankelijk zijn tijdens het leesproces13 . Daarom is er onzekerheid over de vraag of de fonologische en semantische activering in visuele woordherkenning afhankelijk is van de specifieke taak of dat deze met geweld en automatisch op een taakonafhankelijke manier plaatsvindt.

Het antwoord op bovengenoemde vraag is moeilijk voor Chinese lezers. In vergelijking met het Engels is Chinees een logografisch schrift waarvan de tekens morfemen vertegenwoordigen in plaats van fonemen14. Op dit moment blijft de rol van fonologie voor semantische toegang tot Chinese woorden controversieel. Sommige studies hebben beweerd dat fonologie een belangrijke rol speelt bij semantische toegang tot Chinese woorden15,16,17. Anderen hebben echter de tegenovergestelde meninggevoerd 18,19. Na evaluatie van het bovengenoemde onderzoek voor Chinese fonologische verwerking, ontdekten we dat het experimentele paradigma en specifieke onderzoeksmethoden verschillen. Over het algemeen was het voornamelijk verdeeld in twee paradigma’s: woordpriming15,18,19 en schendingsparadigma in de zin17,20,21. Het doelwoord is meestal ingebed aan het einde van de zin in het overtredingsparadigma22. In termen van taalmechanisme is een korte zin van twee woorden een beter beheersbare eenheid dan een volledige zin die moeilijk te verwerken is23. Bovendien kunnen variabelen die moeilijk te controleren zijn in een zin, zoals syntaxis, context of andere factoren, tot verschillende conclusies leiden24. Het woord priming paradigma is een methode die vaak wordt gebruikt om woordherkenningsmodellen te verkennen, of het nu in alfabetische talen of Chinees is. De taak van dit paradigma is om te beoordelen of het doelwoord voorafgegaan door de priemgetallen een echt woord of pseudowoord is; dat wil zeggen, dit paradigma bevat meestal slechts één lexicale taak. Een enkele lexicale beslissingstaak is echter misschien niet de beste keuze om het probleem op te lossen of de activering van fonologie en semantiek afhankelijk is van de taak. Daarom kunnen twee verschillende taken meer geschikt zijn om deze vraag te onderzoeken.

Daarom was dit onderzoek gericht op het onderzoeken van de rol van fonologie in Chinese woordherkenning en tegelijkertijd proberen te bepalen of de activering van fonologie en semantiek taakonafhankelijk is. Ons onderzoek omvat twee taken met behulp van het interferentieparadigma: semantisch oordeel en fonologisch oordeel. Voor zover we weten, is dit de eerste event-related potential (ERP) studie van Chinese twee-karakter compound herkenning met behulp van dit interferentieparadigma, en deze methode komt zelden voor in studies van alfabetische talen. In het bijzonder moeten deelnemers bij de semantische beoordelingstaak beoordelen of het doelwoord en zijn precedent semantisch verwant zijn, terwijl ze in de fonologische taak moeten beoordelen of de gepaarde woorden dezelfde uitspraak hebben.

De eerste is een semantische matchingtaak die geen a priori fonologische verwerking vereist, en de laatste is een fonologische beoordelingstaak die geen a priori semantische verwerking vereist. Daarom vergeleken we homofone paren en niet-gerelateerde controlegroepen in de semantische beoordelingstaak om te onthullen of en hoe fonologie de semantische verwerking beïnvloedt. Op dezelfde manier vergeleken we semantisch gerelateerde woordparen met niet-gerelateerde controleomstandigheden in de fonologische oordeelstaak om te onthullen of en hoe semantiek de fonologische verwerking beïnvloedt. Bovendien werd het bovengenoemde probleem geverifieerd in hoog- en laagfrequente woorden. Deze aanvullende semantische en fonologische oordeelstaak kan dus niet alleen het belang van fonologische verwerking in de Chinese woordherkenning onthullen, maar ook onthullen of en hoe fonologie en semantiek op elkaar inwerken.

Als de fonologie en semantische processen vroeg, automatisch en interactief zijn, moet het effect van fonologische en semantische activering worden waargenomen in de responstijd van de twee taken. Voor ERP activeren fonologische en semantische processen twee verschillende elektrofysiologische markers2,7. Bovendien moeten hun tijdslopen en hun ruimtelijke verdelingen anders zijn. Een vroege positieve component (P200) moet de fonologische verwerking weerspiegelen en de typische semantische verwerkingsmarker N400 moet ook worden geïdentificeerd20,21. We gingen ervan uit dat zowel de fonologisch verwante paren in de semantische taak als de semantisch-gerelateerde paren in de fonologische taak een significante afname van N400 zouden veroorzaken, wat zou hebben aangegeven dat fonologische verwerking kan leiden tot een zekere mate van activering op lexicale-semantische niveaus. Daarnaast hebben we gemonitord of de P200, die fonologische verwerking kenmerkt, voorkwam in de semantische oordeelstaak of de fonologische oordeelstaak. In de fonologische oordeelstaak activeren semantisch gerelateerde aandoeningen de P200, wat kan worden gezien als bewijs van de vroege invloed van semantiek op fonologische verwerking.

Protocol

Het protocol dat voor deze studie werd gebruikt, werd goedgekeurd door de Institutional Review Board van de Tsinghua University. 1. Stimuli constructie en presentatie Prikkels constructie Stimulivoorbereiding: Bereid doelwoorden voor die ongeveer 140 Chinese verbindingen van twee tekens bevatten, waarvan laag- en hoogfrequente woorden goed zijn voor de helft. Voorafgaan aan elk doel drie analogen: een fonologisch identiek woord (homoniem woord), een woord met verwante beteken…

Representative Results

Dit protocol werd gebruikt in een recente studie om de rol van fonologie in chinese twee karakters samengestelde herkenning te onderzoeken en om het woordherkenningsmodel26af te leiden . Alle stimuli die in deze studie werden gebruikt, werden volledig onthuld26. Drie tijdvensters werden geselecteerd op basis van global field power (GFP): bij 100-150 ms, 160-280 ms en 300- 500 ms voor N1-, P200- en N400-componenten, respectievelijk26. De gemiddelde am…

Discussion

Experimentele resultaten en betekenis:
Het doel van dit protocol was om het volgende af te leiden: 1) of het woordherkenningsmodel een feedforward-model of een interactief model is en 2) de interactie tussen de fonologische en semantische patronen in Chinese twee karakters samengestelde herkenning van hoge en lage frequentie onder verschillende taken. Een interferentieparadigma van fonologische en semantische matchingtaken met behulp van de ERP-techniek werd aangenomen. De ERP-antwoorden voorafgegaan …

Disclosures

The authors have nothing to disclose.

Acknowledgements

Dit werk werd ondersteund door het Major Program van de National Natural Science Foundation of China (62036001).

Materials

BrainAmp DC amplifier system (Brain Products GmbH) Brain Products, Gilching, Germany BrainAmp S/N AMP13061964DC Input 5.6DC=150mA Operation 7mA Standby
Easycap (Brain Products GmbH) Brain Products, Gilching, Germany 62 Ag/AgCl electrodes with a configuration of the international 10–20 system of electrode

References

  1. Carreiras, M., Armstrong, B. C., Perea, M., Frost, R. The what, when, where, and how of visual word recognition. Trends in Cognitive Sciences. 18 (2), 90-98 (2014).
  2. Grainger, J., Kiyonaga, K., Holcomb, P. J. The time course of orthographic and phonological code activation. Psychological Science. 17 (12), 1021-1026 (2006).
  3. Ashby, J. Phonology is fundamental in skilled reading: Evidence from ERPs. Psychonomic Bulletin Review. 17 (1), 95-100 (2010).
  4. Wilson, L. B., Tregellas, J. R., Slason, E., Pasko, B. E., Rojas, D. C. Implicit phonological priming during visual word recognition. Neuroimage. 55 (2), 724-731 (2011).
  5. Frost, R., Ahissar, M., Gotesman, R., Tayeb, S. Are phonological effects fragile? The effect of luminance and exposure duration on form priming and phonological priming. Journal of Memory and Language. 48 (2), 346-378 (2003).
  6. Ferrand, L., Grainger, J. Effects of orthography are independent of phonology in masked form priming. The Quarterly Journal of Experimental Psychology. 47 (2), 365-382 (1994).
  7. Carreiras, M., Perea, M., Vergara, M., Pollatsek, A. The time course of orthography and phonology: ERP correlates of masked priming effects in Spanish. Psychophysiology. 46 (5), 1113-1122 (2009).
  8. Pattamadilok, C., et al. Automaticity of phonological and semantic processing during visual word recognition. Neuroimage. 149, 244-255 (2017).
  9. Harm, M. W., Seidenberg, M. S. Computing the meanings of words in reading: Cooperative division of labor between visual and phonological processes. Psychological Review. 111 (3), 662-720 (2004).
  10. Brown, M. S., Roberts, M. A., Besner, D. Semantic processing in visual word recognition: Activation blocking and domain specificity. Psychonomic Bulletin & Review. 8 (4), 778-784 (2001).
  11. Devlin, J. T., Matthews, P. M., Rushworth, M. F. S. Semantic processing in the left inferior prefrontal cortex: A combined functional magnetic resonance imaging and transcranial magnetic stimulation study. Journal of Cognitive Neuroscience. 15 (1), 71-84 (2003).
  12. Rodd, J. M. When do leotards get their spots? Semantic activation of lexical neighbors in visual word recognition. Psychonomic Bulletin & Review. 11 (3), 434-439 (2004).
  13. Frost, R. Toward a strong phonological theory of visual word recognition: True issues and false trails. Psychological Bulletin. 123 (1), 71-99 (1998).
  14. Yu, L., Reichle, E. D. Chinese versus English: Insights on cognition during reading. Trends in Cognitive Sciences. 21 (10), 721-724 (2017).
  15. Tan, L. H., Perfetti, C. A. Phonological activation in visual identification of Chinese two-character words. Journal of Experimental Psychology: Learning, Memory, and Cognition. 25 (2), 382 (1999).
  16. Liu, Y., Perfetti, C. A., Hart, L. ERP evidence for the time course of graphic, phonological, and semantic information in Chinese meaning and pronunciation decisions. Journal of Experimental Psychology: Learning, Memory, and Cognition. 29 (6), 1231 (2003).
  17. Ren, G. -. Q., Liu, Y., Han, Y. -. C. Phonological activation in chinese reading: an event-related potential study using low-resolution electromagnetic tomography. Neuroscience. 164 (4), 1623-1631 (2009).
  18. Wang, K., Mecklinger, A., Hofmann, J., Weng, X. From orthography to meaning: an electrophysiological investigation of the role of phonology in accessing meaning of Chinese single-character words. Neuroscience. 165 (1), 101-106 (2010).
  19. Wong, A. -. K., Wu, Y., Chen, H. -. C. Limited role of phonology in reading Chinese two-character compounds: Evidence from an ERP study. Neuroscience. 256, 342-351 (2014).
  20. Meng, X., Jian, J., Shu, H., Tian, X., Zhou, X. ERP correlates of the development of orthographical and phonological processing during Chinese sentence reading. Brain research. 1219, 91-102 (2008).
  21. Liu, B., Jin, Z., Qing, Z., Wang, Z. The processing of phonological, orthographical, and lexical information of Chinese characters in sentence contexts: an ERP study. Brain research. 1372, 81-91 (2011).
  22. Leminen, A., Smolka, E., Dunabeitia, J. A., Pliatsikas, C. Morphological processing in the brain: The good (inflection), the bad (derivation) and the ugly (compounding). Cortex. 116, 4-44 (2019).
  23. Pylkkänen, L. The neural basis of combinatory syntax and semantics. Science. 366 (6461), 62-66 (2019).
  24. Halgren, E., et al. N400-like magnetoencephalography responses modulated by semantic context, word frequency, and lexical class in sentences. Neuroimage. 17 (3), 1101-1116 (2002).
  25. Huang, Y., Jiang, M., Guo, Q., Wang, Y., Yang, F. -. P. G. Dissociation of the confounding influences of expectancy and integrative difficulty residing in anomalous sentences in event-related potential studies. Journal of Visualized Experiments. (147), e59436 (2019).
  26. Wang, Y., Jiang, M., Huang, Y., Qiu, P. An ERP study on the role of phonological processing in reading two-character compound chinese words of high and low frequency. Frontiers in Psychology. 12, 637238 (2021).
  27. Carreiras, M., Vergara, M., Barber, H. Early event-related potential effects of syllabic processing during visual word recognition. Journal of Cognitive Neuroscience. 17 (11), 1803-1817 (2005).
  28. Hauk, O., Davis, M. H., Ford, M., Pulvermuller, F., Marslen-Wilson, W. D. The time course of visual word recognition as revealed by linear regression analysis of ERP data. Neuroimage. 30 (4), 1383-1400 (2006).

Play Video

Cite This Article
Wang, Y., Jiang, M., Xu, X., Huang, Y. Interaction between Phonological and Semantic Processes in Visual Word Recognition using Electrophysiology. J. Vis. Exp. (172), e62673, doi:10.3791/62673 (2021).

View Video