Summary

Interazione tra processi fonologici e semantici nel riconoscimento visivo delle parole utilizzando l'elettrofisiologia

Published: June 29, 2021
doi:

Summary

Presentiamo un protocollo per esplorare la relativa sequenza di attivazione della fonologia e della semantica nel riconoscimento visivo delle parole. I risultati mostrano che, coerentemente con i resoconti interattivi, le rappresentazioni semantiche e fonologiche possono essere elaborate in modo interattivo e le rappresentazioni linguistiche di livello superiore possono influenzare l’elaborazione precoce.

Abstract

Le controversie sono sempre esistite nella ricerca relativa alle capacità di lettura; sul fatto che le parole stampate siano percepite in modo feedforward basato su informazioni ortografiche dopo di che vengono attivate altre rappresentazioni, come la fonologia e la semantica, o se queste siano completamente interattive e le informazioni semantiche di alto livello influenzino l’elaborazione precoce. Un paradigma di interferenza è stato implementato nel protocollo presentato di compiti di giudizio fonologico e semantico che utilizzava le stesse coppie precedente-bersaglio per esplorare l’ordine relativo di attivazione fonologica e semantica. Le parole target ad alta e bassa frequenza sono state precedute da tre condizioni: semanticamente correlate, fonologiche (omofoni) o non correlate. I risultati hanno mostrato che la componente P200 indotta delle coppie di parole a bassa frequenza era significativamente maggiore delle parole ad alta frequenza sia nei compiti semantici che fonologici. Inoltre, sia gli omofoni nel compito semantico che le coppie semanticamente correlate nel compito fonologico hanno causato una riduzione di N400 rispetto alla condizione di controllo, parola indipendente dalla frequenza. Vale la pena notare che per le coppie a bassa frequenza nel compito di giudizio fonologico, il P200 rilasciato dalle coppie di parole semanticamente correlate era significativamente più grande di quello nella condizione di controllo. Nel complesso, l’elaborazione semantica nei compiti fonologici e l’elaborazione fonologica nei compiti semantici sono state trovate sia nelle parole ad alta che a bassa frequenza, suggerendo che l’interazione tra semantica e fonologia può operare in modo indipendente dal compito. Tuttavia, il momento specifico in cui si è verificata questa interazione potrebbe essere stato influenzato dall’attività e dalla frequenza.

Introduction

Il problema critico in qualsiasi modello di riconoscimento delle parole è comprendere il ruolo della fonologia nel processo di accesso semantico1. Per le lingue alfabetiche, molti studi considerano costantemente la fonologia come un ruolo importante nell’accesso semantico, tra cui inglese2,3,4,ebraico5,francese6e spagnolo7. In altre parole, il riconoscimento delle parole scritte coinvolge non solo l’elaborazione ortografica ma anche fonologica e semantica. Questa osservazione nel modello connessionista interattivo è spiegata da estensioni attivate in tutta la rete, dove l’ortografia è associata a rappresentazioni fonologiche e semantiche attraverso connessioni ponderate8. Questa proliferazione di attivazione fornisce il meccanismo centrale per il modello di riconoscimento visivo delle parole, che presuppone che le rappresentazioni fonologiche e semantiche vengano attivate automaticamente in risposta all’input ortografico9.

Tuttavia, le attuali prove empiriche a sostegno dell’ipotesi dell’automazione interattiva rimangono controverse. Alcuni studi sostengono che l’attivazione di rappresentazioni fonologiche e semantiche può essere regolata o impedita da richieste di compiti o attenzione, il che implica una certa influenza dall’alto verso il basso sui processi di alto livello coinvolti nella percezione delle parole10,11. Tuttavia, la suddetta descrizione è stata messa in discussione da molti risultati che riportano effetti fonologici e semantici nel riconoscimento visivo delle parole anche se queste rappresentazioni sono completamente irrilevanti per il compito o non sono accessibili direttamente12, supportando così l’opinione che la semantica e la fonologia possono essere accessibili automaticamente e forzatamente durante il processo di lettura13 . Pertanto, vi è incertezza sul fatto che l’attivazione fonologica e semantica nel riconoscimento visivo delle parole dipenda dal compito specifico o se si verifichi forzatamente e automaticamente in modo indipendente dal compito.

La risposta alla domanda di cui sopra è difficile per i lettori cinesi. Rispetto all’inglese, il cinese è una scrittura logografica i cui caratteri rappresentano morfemi invece di fonemi14. Allo stato attuale, il ruolo della fonologia per l’accesso semantico alle parole cinesi rimane controverso. Alcuni studi hanno affermato che la fonologia gioca un ruolo importante nell’accesso semantico alle parole cinesi15,16,17. Altri, invece, hanno sostenuto il punto di vista opposto18,19. Dopo aver valutato la suddetta ricerca per l’elaborazione fonologica cinese, abbiamo scoperto che il paradigma sperimentale e i metodi di ricerca specifici differiscono. Nel complesso, è stato principalmente diviso in due paradigmi: parola priming15,18,19 e paradigma di violazione nella frase17,20,21. La parola di destinazione è solitamente incorporata alla fine della frase nel paradigma di violazione22. In termini di meccanismo linguistico, una breve frase di due parole è un’unità più gestibile di una frase completa che è difficile da elaborare23. Inoltre, le variabili difficili da controllare in una frase, come la sintassi, il contesto o altri fattori, possono portare a conclusioni diverse24. Il paradigma di priming delle parole è un metodo comunemente usato per esplorare i modelli di riconoscimento delle parole, sia nelle lingue alfabetiche che in cinese. Il compito di questo paradigma è quello di giudicare se la parola bersaglio preceduta dai numeri primi è una parola reale o una pseudoparola; cioè, questo paradigma di solito contiene solo un compito lessicale. Tuttavia, un singolo compito decisionale lessicale potrebbe non essere la scelta migliore per risolvere il problema se l’attivazione della fonologia e della semantica dipenda dal compito. Pertanto, due diversi compiti possono essere più adatti per esplorare questa domanda.

Pertanto, questa ricerca mirava a esplorare il ruolo della fonologia nel riconoscimento delle parole cinesi e contemporaneamente tentare di determinare se l’attivazione della fonologia e della semantica è indipendente dal compito. La nostra ricerca include due compiti utilizzando il paradigma dell’interferenza: il giudizio semantico e il giudizio fonologico. Per quanto ne sappiamo, questo è il primo studio sul potenziale correlato agli eventi (ERP) del riconoscimento composto cinese a due caratteri utilizzando questo paradigma di interferenza, e questo metodo appare raramente negli studi sulle lingue alfabetiche. In particolare, nel compito di giudizio semantico, i partecipanti devono giudicare se la parola target e il suo precedente sono semanticamente correlati, mentre nel compito fonologico, devono giudicare se le parole accoppiate hanno la stessa pronuncia.

Il primo è un compito di corrispondenza semantica che non richiede un’elaborazione fonologica a priori, e il secondo è un compito di giudizio fonologico che non richiede un’elaborazione semantica a priori. Pertanto, abbiamo confrontato coppie di omofoni e gruppi di controllo non correlati nel compito di giudizio semantico per rivelare se e come la fonologia influisce sull’elaborazione semantica. Allo stesso modo, abbiamo confrontato coppie di parole semanticamente correlate con condizioni di controllo non correlate nel compito di giudizio fonologico per rivelare se e come la semantica influisce sull’elaborazione fonologica. Inoltre, il problema di cui sopra è stato verificato in parole ad alta e bassa frequenza. Pertanto, questo compito di giudizio semantico e fonologico complementare può non solo rivelare l’importanza dell’elaborazione fonologica nel riconoscimento delle parole cinesi, ma anche rivelare se e come la fonologia e la semantica interagiscono.

Se la fonologia e i processi semantici sono precoci, automatici e interattivi, l’effetto dell’attivazione fonologica e semantica dovrebbe essere osservato nel tempo di risposta dei due compiti. Per ERP, i processi fonologici e semantici innescano due diversi marcatori elettrofisiologici2,7. Inoltre, i loro corsi di tempo e le loro distribuzioni spaziali dovrebbero essere diversi. Una componente positiva iniziale (P200) dovrebbe riflettere l’elaborazione fonologica e il tipico marcatore di elaborazione semantica N400 dovrebbe anche essere identificato20,21. Abbiamo ipotizzato che sia le coppie fonologicamente correlate nel compito semantico che le coppie semantiche correlate nel compito fonologico avrebbero causato una significativa diminuzione di N400, il che avrebbe indicato che l’elaborazione fonologica può portare a un certo grado di attivazione a livelli lessico-semantici. Inoltre, abbiamo monitorato se il P200, che caratterizza l’elaborazione fonologica, è apparso nel compito di giudizio semantico o nel compito di giudizio fonologico. Nel compito del giudizio fonologico, le condizioni semantiche innescano il P200, che può essere visto come prova dell’influenza precoce della semantica sull’elaborazione fonologica.

Protocol

Il protocollo utilizzato per questo studio è stato approvato dall’Institutional Review Board della Tsinghua University. 1. Costruzione e presentazione degli stimoli Costruzione di stimoli Preparazione degli stimoli: prepara parole target contenenti circa 140 composti cinesi a due caratteri, di cui le parole a bassa e alta frequenza rappresentano la metà. Precede ogni bersaglio con tre analoghi: una parola fonologicamente identica (parola omonima), una parola con significato…

Representative Results

Questo protocollo è stato utilizzato in un recente studio per indagare il ruolo della fonologia nel riconoscimento composto cinese a due caratteri e per dedurre il modello di riconoscimento delleparole 26. Tutti gli stimoli utilizzati in questo studio sono stati completamente divulgati26. Tre finestre temporali sono state selezionate sulla base della potenza di campo globale (GFP): a 100-150 ms, 160-280 ms e 300-500 ms per i componenti N1, P200 e N400, rispettivamente<sup …

Discussion

Risultati sperimentali e significato:
Lo scopo di questo protocollo era quello di dedurre quanto segue: 1) se il modello di riconoscimento delle parole è un modello feedforward o un modello interattivo e 2) l’interazione tra i modelli fonologici e semantici nel riconoscimento composto a due caratteri cinese di alta e bassa frequenza in diversi compiti. È stato adottato un paradigma di interferenza del compito di corrispondenza fonologica e semantica utilizzando la tecnica ERP. Le risposte ERP preced…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Questo lavoro è stato sostenuto dal Major Program della National Natural Science Foundation of China (62036001).

Materials

BrainAmp DC amplifier system (Brain Products GmbH) Brain Products, Gilching, Germany BrainAmp S/N AMP13061964DC Input 5.6DC=150mA Operation 7mA Standby
Easycap (Brain Products GmbH) Brain Products, Gilching, Germany 62 Ag/AgCl electrodes with a configuration of the international 10–20 system of electrode

References

  1. Carreiras, M., Armstrong, B. C., Perea, M., Frost, R. The what, when, where, and how of visual word recognition. Trends in Cognitive Sciences. 18 (2), 90-98 (2014).
  2. Grainger, J., Kiyonaga, K., Holcomb, P. J. The time course of orthographic and phonological code activation. Psychological Science. 17 (12), 1021-1026 (2006).
  3. Ashby, J. Phonology is fundamental in skilled reading: Evidence from ERPs. Psychonomic Bulletin Review. 17 (1), 95-100 (2010).
  4. Wilson, L. B., Tregellas, J. R., Slason, E., Pasko, B. E., Rojas, D. C. Implicit phonological priming during visual word recognition. Neuroimage. 55 (2), 724-731 (2011).
  5. Frost, R., Ahissar, M., Gotesman, R., Tayeb, S. Are phonological effects fragile? The effect of luminance and exposure duration on form priming and phonological priming. Journal of Memory and Language. 48 (2), 346-378 (2003).
  6. Ferrand, L., Grainger, J. Effects of orthography are independent of phonology in masked form priming. The Quarterly Journal of Experimental Psychology. 47 (2), 365-382 (1994).
  7. Carreiras, M., Perea, M., Vergara, M., Pollatsek, A. The time course of orthography and phonology: ERP correlates of masked priming effects in Spanish. Psychophysiology. 46 (5), 1113-1122 (2009).
  8. Pattamadilok, C., et al. Automaticity of phonological and semantic processing during visual word recognition. Neuroimage. 149, 244-255 (2017).
  9. Harm, M. W., Seidenberg, M. S. Computing the meanings of words in reading: Cooperative division of labor between visual and phonological processes. Psychological Review. 111 (3), 662-720 (2004).
  10. Brown, M. S., Roberts, M. A., Besner, D. Semantic processing in visual word recognition: Activation blocking and domain specificity. Psychonomic Bulletin & Review. 8 (4), 778-784 (2001).
  11. Devlin, J. T., Matthews, P. M., Rushworth, M. F. S. Semantic processing in the left inferior prefrontal cortex: A combined functional magnetic resonance imaging and transcranial magnetic stimulation study. Journal of Cognitive Neuroscience. 15 (1), 71-84 (2003).
  12. Rodd, J. M. When do leotards get their spots? Semantic activation of lexical neighbors in visual word recognition. Psychonomic Bulletin & Review. 11 (3), 434-439 (2004).
  13. Frost, R. Toward a strong phonological theory of visual word recognition: True issues and false trails. Psychological Bulletin. 123 (1), 71-99 (1998).
  14. Yu, L., Reichle, E. D. Chinese versus English: Insights on cognition during reading. Trends in Cognitive Sciences. 21 (10), 721-724 (2017).
  15. Tan, L. H., Perfetti, C. A. Phonological activation in visual identification of Chinese two-character words. Journal of Experimental Psychology: Learning, Memory, and Cognition. 25 (2), 382 (1999).
  16. Liu, Y., Perfetti, C. A., Hart, L. ERP evidence for the time course of graphic, phonological, and semantic information in Chinese meaning and pronunciation decisions. Journal of Experimental Psychology: Learning, Memory, and Cognition. 29 (6), 1231 (2003).
  17. Ren, G. -. Q., Liu, Y., Han, Y. -. C. Phonological activation in chinese reading: an event-related potential study using low-resolution electromagnetic tomography. Neuroscience. 164 (4), 1623-1631 (2009).
  18. Wang, K., Mecklinger, A., Hofmann, J., Weng, X. From orthography to meaning: an electrophysiological investigation of the role of phonology in accessing meaning of Chinese single-character words. Neuroscience. 165 (1), 101-106 (2010).
  19. Wong, A. -. K., Wu, Y., Chen, H. -. C. Limited role of phonology in reading Chinese two-character compounds: Evidence from an ERP study. Neuroscience. 256, 342-351 (2014).
  20. Meng, X., Jian, J., Shu, H., Tian, X., Zhou, X. ERP correlates of the development of orthographical and phonological processing during Chinese sentence reading. Brain research. 1219, 91-102 (2008).
  21. Liu, B., Jin, Z., Qing, Z., Wang, Z. The processing of phonological, orthographical, and lexical information of Chinese characters in sentence contexts: an ERP study. Brain research. 1372, 81-91 (2011).
  22. Leminen, A., Smolka, E., Dunabeitia, J. A., Pliatsikas, C. Morphological processing in the brain: The good (inflection), the bad (derivation) and the ugly (compounding). Cortex. 116, 4-44 (2019).
  23. Pylkkänen, L. The neural basis of combinatory syntax and semantics. Science. 366 (6461), 62-66 (2019).
  24. Halgren, E., et al. N400-like magnetoencephalography responses modulated by semantic context, word frequency, and lexical class in sentences. Neuroimage. 17 (3), 1101-1116 (2002).
  25. Huang, Y., Jiang, M., Guo, Q., Wang, Y., Yang, F. -. P. G. Dissociation of the confounding influences of expectancy and integrative difficulty residing in anomalous sentences in event-related potential studies. Journal of Visualized Experiments. (147), e59436 (2019).
  26. Wang, Y., Jiang, M., Huang, Y., Qiu, P. An ERP study on the role of phonological processing in reading two-character compound chinese words of high and low frequency. Frontiers in Psychology. 12, 637238 (2021).
  27. Carreiras, M., Vergara, M., Barber, H. Early event-related potential effects of syllabic processing during visual word recognition. Journal of Cognitive Neuroscience. 17 (11), 1803-1817 (2005).
  28. Hauk, O., Davis, M. H., Ford, M., Pulvermuller, F., Marslen-Wilson, W. D. The time course of visual word recognition as revealed by linear regression analysis of ERP data. Neuroimage. 30 (4), 1383-1400 (2006).

Play Video

Cite This Article
Wang, Y., Jiang, M., Xu, X., Huang, Y. Interaction between Phonological and Semantic Processes in Visual Word Recognition using Electrophysiology. J. Vis. Exp. (172), e62673, doi:10.3791/62673 (2021).

View Video