Examinando o processamento sintático online de frases complexas faladas em Chinês usando tarefas de interferência de modal duplo
概要
Aqui, apresentamos um protocolo empregando tarefas de interferência Dual-modal para examinar o processamento on-line de frases relativas à cláusula relativa chinesa falada. Duas experiências do exemplar que envolvem o processamento auditivo com interferências intra e extrasentential são descritas. O paradigma fornece uma metodologia para abordar a natureza da memória de trabalho e seus efeitos no processamento de sentenças.
Abstract
A memória de trabalho (WM) desempenha um papel central na compreensão de sentenças complexas. Sua função no processamento de frases de complexo falado é especialmente evidente porque o processamento de sentenças de complexo falado é intensivo de memória. O paradigma de interferência Dual-modal tem sido usado para examinar como o sistema WM está envolvido no processamento sintático complexo. Este artigo apresenta dois experimentos de exemplo envolvendo processamento auditivo com interferências intra ou extrasentenciais. No primeiro experimento, estímulos auditivos [frases relativas à cláusula relativa de fala-chinês (RC) com dois tipos sintáticos: sujeito-gapped (SRC) versus objeto-gapped (ORC)] são interferiu através de uma tarefa de decisão lexical visualmente apresentada dentro de uma sentença e manipuladas usando três timepoints de interferência diferentes. No segundo experimento, os mesmos estímulos auditivos, apresentados por meio de uma técnica móvel de janela auditiva, são interferentes através de uma tarefa de recall digital visualmente apresentada além da sentença e manipuladas por meio de três cargas de memória digital. Avaliando como a tarefa preliminar de compreender as sentenças de RC é afetada pela tarefa secundária, nós podemos abordar a edição controversa a respeito da assimetria chinesa do processamento de RC. Nossos resultados revelam diferentes padrões de processamento de RC em comparação aos relatados em estudos prévios. O experimento 1 não manifesta vantagens de processamento de RC claras em SRC ou ORC; no entanto, uma preferência por ORC é observada nas extremidades das sentenças, e uma preferência por SRC é encontrada no local do verbo principal. Da mesma forma, o experimento 2 apresenta um padrão dinâmico. Em uma carga sem dígitos, os SRCs mostram vantagens de processamento na região do marcador RC. No entanto, interferência de carga de maior dígito, os ORCs mostram vantagens de processamento na mesma região. Estes resultados conduzem à conjectura que nenhuma assimetria de processamento óbvia ou intrínseca existe no processamento de RCs chineses. usando a abordagem de avaliação de interferência específica durante o processamento sintático, esses experimentos demonstram futuras pesquisas aplicativos que exploram as métricas de processamento de frases faladas envolvendo memória de trabalho.
Introduction
O papel da memória de trabalho (WM) durante o processamento da sentença falada é evidente: devido à natureza transitória da fala, os ouvintes devem manter as formas acústicas do componente em suas memórias até serem processadas. Este aspecto torna-se ainda mais importante durante o processamento de frases sintaticamente complexas. A atribuição de relações sintáticas a palavras em frases complexas envolve a realização de operações computacionais em itens retidos na memória por curtos períodos de tempo, resultando em uma demanda de memória mais alta. No entanto, como o sistema WM está envolvido no processamento da sentença falada é controverso.
Esta controvérsia envolve dois grandes discordâncias: alguns pesquisadores argumentam que existe um único sistema WM que é usado para todas as tarefas verbais1,2— emoutras palavras, o processamento sintático depende dos mesmos recursos de memória usados por mais processos cognitivos gerais. Este é o modelo de recurso único. Outros afirmaram que determinar o significado de uma sentença com base em sua estrutura sintática envolve um sistema WM especializado separado daquele utilizado para outras tarefas verbais3,4. Nesta veia, o processamento sintático é modular. Este é o modelo de recurso de interpretação de frases separadas.
Na pesquisa Psicolinguística, o paradigma de interferência Dual-modal tem sido utilizado para examinar as duas contas concorrentes. Baseado na suposição que a capacidade dearmazenamento de WMé limitada5,6, oparadigma endereça edições complicando uma tarefa preliminar com uma tarefa de intervenção secundária. Dado que a tarefa preliminar compete para recursos limitados com a tarefa de intervenção secundária, a dificuldade aumenta e a tarefa preliminar exibe uns tempos de reação mais longos. Diante dessa situação, a abordagem de interferência Dual-modal possibilita avaliar a carga de processamento e a extensão do envolvimento do WM quando um participante recebe uma tarefa que exige o cumprimento de ambas as tarefas simultaneamente.
Frases contendo componentes RC, que causam mais dificuldades de compreensão devido às suas estruturas sintáticas complexas, são amplamente utilizadas para investigar como o sistema WM está envolvido no processamento de sentenças complexas. No entanto, embora o processamento de sentenças complexas coloca uma maior demanda sobre os recursos de WM associados ao processamento de fala, é menos claro se o WM que é pensado para contribuir para os custos de movimentos sintáticos em línguas com cabeça-inicial RC construções (como o inglês) reflete a complexidade sintática das línguas com RCs Head-final (tais como o chinês). Através do uso de um paradigma de interferência Dual-modal, o estudo atual lança luz sobre esta questão.
As dificuldades associadas ao processamento de duas estruturas RC, sujeito-gapped e objeto-gapped cláusulas relativas (SRCs vs. ORCs), têm sido objecto de amplo debate. Estas controvérsias são observadas principalmente em linguagens tipologicamente diferentes. Na cabeça-línguas iniciais tais como o inglês, em que uma cláusula relativa segue o substantivo principal que modifica, o achado geral é que os SRCs como no exemplo 1 (a) abaixo são processados mais fàcilmente do que ORCs no exemplo 1 (b).
Como mostrado no exemplo (1), em inglês, a localização superficial da lacuna difere minimamente entre SRCs e ORCs. Esta lacuna é indexada como e1, a posição vazia após o substantivo principal ‘actor‘ (chamado Filler) deixado por sua remoção fora do rc. No entanto, SRCs e ORCs diferem substancialmente em termos da estrutura gramatical e função da lacuna no domínio RC. O custo de memória para integrar e resolver a dependência estrutural entre o enchimento e a lacuna é um alvo apto para o estudo experimental e tem sido amplamente utilizado para obter insights sobre o papel da WM no processamento e compreensão da linguagem.
Por exemplo, compreender e processar esses RCs pós-nominais requer indexar o substantivo principal ‘ator‘ como um sujeito funcional ou o objeto do verbo ‘CRITICADO‘ em src e Orc e, em seguida, armazenar o substantivo principal em WM para que possa ser mais tarde atribuído ao sujeito gramatical do verbo ‘admitido‘ na cláusula principal.
Em contraste com o achado consistente com as linguagens iniciais que compreendessem os SRCs é mais fácil do que compreender os ORCs, foram relatados resultados mistos sobre a assimetria de processamento do RC para o chinês, que é uma linguagem de cabeça-final em que um parente cláusula precede o substantivo principal. Alguns observaram uma vantagem de processamento de SRC, enquanto outros relataram o padrão oposto (ou seja, uma vantagem de processamento ORC). As últimas linhas de pesquisa também propuseram que a assimetria de processamento do RC pode ser modulada por WM, como sugerido pelos resultados obtidos a partir de estudos de desempenho de leitura autopasseado7,8,9.
Como mencionado acima, há dois modelos concorrentes em relação ao papel que o WM desempenha no processamento sintático (complexo). Um deles é que “o processamento sintático é modular”, e o outro é que “o processamento sintático é geral”. Frases complexas com diferenças bem conhecidas na dificuldade de compreensão, ou seja, SRCs versus ORCs em inglês, são freqüentemente usadas em tarefas de interferência Dual-modal (DMI) para examinar essas duas asserções em relação à questão da modularidade, pois a envolvimento da WM é reivindicada para paralelo a assimetria de processamento. Assim, induzir a carga de memória simultânea por meio de tarefas interferentes demonstra os efeitos WM no processamento sintático. A lógica é que se um único sistema WM verbal ou sistemas sintáticos modulares separados existirem, envolver o sistema com uma tarefa interferente torna o processamento sintático menos eficiente devido às limitações de recursos de WM. A forma como o processamento de frases sintaticamente mais complexas (ORC, em inglês) sofre em tarefas de DMI se compara ao processamento de frases sintaticamente mais simples (SRC, em inglês) fornece evidências sobre o efeito específico do WM e indica a extensão para que o WM está envolvido.
Em contraste com as linguagens iniciais como o inglês, os RCs chineses manifestam uma formação de cabeça-final e exibem uma relação Gap-Filler . O elemento indexado movido-para fora, o Gap, precede o substantivo principal que se associam com ele, como ilustrado em 2 (a), SRC, e 2 (b), ORC.
A controvérsia que decorre do processamento de RCs chineses é que os SRCs não são consistentemente relatados como mais fáceis de processar do que os ORCs, e essa discrepância tem sido um desafio para as teorias do processamento e compreensão da linguagem. Como o conteúdo prenominal antes do relativizador ‘ DE ‘ deve ser armazenado em WM até depois da lacuna — o substantivo cabeça movido ‘ ator ‘, é vinculado e recuperado — entender esse processo ainda ajuda na obtenção de insights sobre o papel do WM no processamento de linguagem.
No presente estudo, o processamento da sentença de RC falada é examinado porque a escuta é altamente compressiva durante o processamento e está intimamente relacionada ao funcionamento do WM. O paradigma de interferência modal duplo é usado porque a interferência é uma função de esquecimento bem estabelecida na memória auditiva de curto prazo. Representações armazenadas na memória podem ser degradadas e posteriormente perdidas quando ocorrerem eventos interferentes10. Os distratores que variam ao longo de diferentes aspectos (no caso atual: intralinguístico e extradigital, veja abaixo) para a sentença falada canônica nos permitem medir o custo de integração do Input incremental durante diferentes fases de processamento e diferentes condições de interferência.
Com base na posição que processa mais sintaticamente complexas frases sobrecargas WM mais do que processar frases mais simples, pode-se supor que manipular o tipo de interferência durante o curso de compreensão deve ter efeitos sobre processamento de sentenças. Por implicação, o processamento de sentenças sintaticamente mais complexas exigirá um tempo de audição proporcionalmente maior ou desproporcionalmente maior online e mostrará pior desempenho na avaliação da compreensão da sentença pós-online do que a vontade Processando construções sintaticamente mais simples. O estudo atual examina a hipótese de que a interferência durante o processamento da sentença pode indexar o envolvimento do WM e praticamente coloca seu valor além da questão da modularidade sintática: propõe a ideia de que a controvérsia sobre o processamento chinês do RC pode ser elucidado através da investigação da WM devido ao seu papel fundamental na compreensão da linguagem. Conseqüentemente, o significado Unido ao uso de tarefas de DMI no processamento chinês de RC fornece um trajeto a resolver o debate em curso a respeito do chinês RC que processa a assimetria.
Este artigo apresenta dois experimentos de exemplo envolvendo processamento auditivo usando interferência intra e extrasentencial. O objetivo destes dois experimentos foi explorar até que ponto WM está envolvido no processamento chinês RC diferentes tipos de interferência.
No primeiro experimento, uma tarefa de decisão lexical visualmente apresentada foi utilizada como interferência intrasentencial. Como tarefa de interferência secundária, a palavra/não palavra tarefa de decisão lexical (LDT) foi introduzida em três pontos durante a apresentação auditiva da sentença de cláusula relativa do alvo, permitindo assim que a dificuldade de processamento seja mensurada nesses pontos. A maior preocupação neste experimento é como a lacuna na cláusula relativa (RC) está associada com o preenchimento na cláusula matricial (MC) e se afeta o processamento de MC subsequente. Portanto, os três sítios de sondagem a serem medidos foram ajustados após a região MC. Um exemplo, replicado a partir de (2), dos três sites de sondagem indicados com setas e alinhado com a concatenação sintática correspondente, é ilustrado no exemplo 3, onde 3 (a) mostra SRC e 3 (b) mostra ORC.
A Figura 1 mostra o procedimento de interferência com a apresentação auditiva contínua do RC pelo LDT em qualquer um dos três sítios de sondagem. O projeto do sincronismo segue o protocolo convencional da tarefa de LDT em um estudo de processamento chinês precedente11. Por exemplo, cada avaliação de LDT Visual começa com um sinal cruzado “+” que indica um ponto de fixação no centro do monitor para 500 MS, seguido pelo estímulo de LDT Visual, que é exibido na tela para 3.000 MS e desaparece imediatamente após o assunto faz a decisão lexical. Um assunto típico conclui o experimento 1, incluindo a sessão prática, dentro de 30 a 35 minutos.
Figura 1: procedimento de interferência Intrasentencial com uma tarefa de decisão lexical.
Por favor clique aqui para ver uma versão maior desta figura.
Os três sites de sondagem, juntamente com a tarefa LDT:
1. posição 1 (P1): região pós-sMC
A primeira posição (P1) a ser medida é imediatamente após o assunto do MC na região após o limite de RC. Espera-se que a carga de processamento incorra neste site. Para uma coisa, antes deste ponto (SMC), assunto-Gap e objeto-Gap construção dentro do domínio RC forma contrastiva verbo-objeto (VO) e sujeito-verbo (SV) estruturas, respectivamente. Para outro, para integrar os constituintes na região RC com o substantivo principal no MC, os ouvintes devem identificar o papel gramatical da lacuna e vinculá-lo com o próximo substantivo cabeça de enchimento
2. posição 2 (P2): região pós-VMC
A segunda posição (P2) a ser medida é imediatamente após o verbo na cláusula Matrix (VMC). Este site também é assumido para induzir a carga de processamento. A integração da informação verbal requer que os ouvintes recuperem os argumentos substantivos na sentença e identifiquem o agente do verbo matricial do domínio RC precedente ou do substantivo principal que o RC modifica.
3. posição 3 (P3): região pós-sentença
A terceira posição (P3) a ser medida é imediatamente após o término da sentença. Estudos prévios sobre o processamento propõem que haja um efeito wrap-up de fim de sentença — um fenômeno no qual as informações não sintáticas (por exemplo, discurso e nível semântico) são consideradas no final de uma sentença para ativar e completar a compreensão12 ,13. Portanto, a carga de processamento deve aumentar em direção ao final da sentença devido à necessidade de integrar essa informação não sintática14,15. A posição 3 é assumida para mostrar uma degradação na carga de processamento porque a resolução de sentença foi tentada em torno deste site.
No segundo experimento, adotou-se uma tarefa de janela de movimento auditivo (AMW). A técnica de AMW é considerada capaz de captar padrões de alocação de recursos durante o processamento linguístico online e tem sido amplamente utilizada nas tentativas de distinguir entre as duas abordagens WM concorrentes16,17. Presume-se que a interferência extrasentencial deve custar ouvintes tempo extra durante o curso de processamento da sentença transiente próxima falada. o paradigma da AMW, os participantes ouviram frases que foram segmentadas em palavras, e pressionaram uma tecla no teclado para iniciar a reprodução do segmento subsequente. Assim, as durações das pausas entre pressionamentos de teclas para iniciar o segmento subsequente e controlar o fluxo de informações recebidas refletem a capacidade de resposta dos participantes às características linguísticas em questão. Por exemplo, se a interferência extrasentencial tiver determinados efeitos no processamento de sentenças de complexidade sintática diferente, os participantes exibirão durações de pausa correspondentemente mais longas antes de iniciar os segmentos subsequentes. Os procedimentos são esquematizados e apresentados na Figura 2.
Figura 2: procedimento de interferência Extrasentencial com uma tarefa de recall de dígitos.
Por favor clique aqui para ver uma versão maior desta figura.
O seguinte protocolo mostra como os investigadores usam uma tarefa de decisão lexical visualmente apresentada como a interferência investigação e a carga aritmética simultânea da interferência como a interferência extrasentential para investigar a participação de WM e o processamento assimetria de RCs chineses e elaborar a lógica subjacente.
Protocol
Representative Results
Discussion
Este estudo demonstra que o uso de métodos de DMI com ambas as tarefas de interferência intra e extrasentenciais pode ajudar a elucidar o papel do WM no processamento da sentença falada e lançar luz sobre a questão da assimetria de processamento do RC chinês. Como esperado, medindo a extensão a que a interferência de uma tarefa secundária afetou desempenhos dos ouvintes no processamento preliminar da sentença, nós podemos inferir os testes padrões do processamento chinês de RC e chegar em uma solução viáv…
開示
The authors have nothing to disclose.
Acknowledgements
Este estudo foi apoiado por doações do Ministério da ciência e tecnologia, Taiwan, R.O.C. [NSC-101-2410-H-439-001] para o primeiro autor, Tuyuan Cheng. Os autores agradecem aos membros do laboratório, Yang ya-Hui e Chen Pei-Han, em NTIN, por sua assistência na preparação e condução do experimento.
Materials
| E-Prime | Psychology Software Tools | version Professional 2.0 | |
| Headphone | Logitech | ||
| Praat | Praat | 5.3.43 | The online software used to edit the sound files for listening; http://www.fon.hum.uva.nl/praat/ |
| Serial Response Box | Psychology Software Tools | ||
| Standard PC | ASUS K42Jv laptop |
参考文献
- Just, M. A., Carpenter, P. A. A capacity theory of comprehension: Individual differences in working memory. Psychological Review. 99, 122-149 (1992).
- King, J., Just, M. A. Individual differences in syntactic processing: The role of working memory. Journal of Memory and Language. 30, 580-602 (1991).
- Caplan, D., Waters, G. S. Verbal working memory and sentence comprehension. Behavioral & Brain Sciences. 22, 77-94 (1999).
- Waters, G., Caplan, D., Yampolsky, S. On-line syntactic processing under concurrent memory load. Psychonomic Bulletin & Review. 10 (1), 88-95 (2003).
- Cowan, N. . Working Memory Capacity. , (2005).
- Miller, G. A. The magical number seven, plus or minus two: Some limits on our capacity for processing information. Psychological Review. 63, 81-97 (1956).
- Chen, B., Ning, A., Bi, H., Dunlap, S. Chinese subject-relative clauses are more difficult to process than the object-relative clauses. Acta Psychologica. 129, 61-65 (2008).
- Gibson, E., Wu, H. H. Processing Chinese relative clauses in context. Language and Cognitive Processes. 28, 125-155 (2013).
- Hsiao, F., Gibson, E. Processing relative clauses in Chinese. Cognition. 90, 3-27 (2003).
- Lewandowsky, S., Oberauer, K., Brown, G. D. A. No temporal decay in verbal short-term memory. Trends in Cognitive Science. 13, 120-126 (2009).
- Wu, J. T., Chou, T. L., Liu, I. M., Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. The locus of the character/word frequency effect. Advances in the study of Chinese language processing. , 31-58 (1994).
- Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. Tasks and timing in the perception of linguistic anomaly. Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).
- Swinney, D., Zurif, E. Syntactic processing in aphasia. Brain and Language. 50 (2), 225-239 (1995).
- Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia. Brain and Language. 61 (2), 169-182 (1998).
- Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. Measuring processing load during sentence comprehension: visuomotor tracking. Aphasiology. 14 (5-6), 501-513 (2000).
- Waters, G. S., Caplan, D. Age, working memory, and on-line syntactic processing in sentence comprehension. Psychology and Aging. 16, 128-144 (2001).
- Waters, G. S., Caplan, D. Working memory and online syntactic processing in Alzheimer’s disease: Studies with auditory moving window presentation. Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).
- Cheng, T., Cheung, H., Wu, J. Spoken relative clause processing in Chinese: measure from an alternative task. Language and Linguistics. 12 (3), 669-705 (2011).
- Cheng, T., Wu, J., Huang, S. Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses. Journal of Psycholinguistic Research. 47 (5), 1035-1055 (2018).
- CKIP. . Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , (1994).
- MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. Step—A system for teaching experimental psychology using E-Prime. Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).
- Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique. Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).
- Daneman, M., Carpenter, P. A. Individual differences in working memory and reading. Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).
- Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs. Frontiers in Psychology. 9, 1-18 (2018).
- Mitchell, D. C., Green, D. W. The effects of context and content on immediate processing in reading. Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).
