Summary

Изучение онлайн синтаксической обработки разговорных сложных приговоров на китайском языке с использованием задач двойного модального интерференции

Published: September 05, 2019
doi:

Summary

Здесь мы представляем протокол, использующий задачи двойного модального вмешательства для изучения онлайн-обработки разговорно-китайских относительных предложений. Описаны два образцовых эксперимента, связанных со слуховой обработкой с внутри- и экстрасентиальными интерференцией. Парадигма обеспечивает методологию для решения характера рабочей памяти и ее влияния на обработку предложений.

Abstract

Рабочая память (WM) играет центральную роль в понимании сложных предложений. Его функция в обработке разговорных сложных предложений особенно очевидна, потому что разговорная сложная обработка предложений является интенсивной памятью. Парадигма двойного модального вмешательства используется для изучения того, как система Ом участвует в сложной синтаксической обработке. В этой статье представлены два образцовых эксперимента, связанных со слуховой обработкой с внутри- или экстрасентиальными помехами. В первом эксперименте слуховые стимулы (говоря-китайские относительные предложения (RC) с двумя синтаксическими типами: субъект-сgapped (SRC) против объектно-сgapped (ORC) » мешают через визуально представленную лексическую задачу принятия решений в предложении и манипулировали с использованием трех различных временных точек интерференции. Во втором эксперименте, те же слуховые стимулы, представленные с помощью слуховой техники перемещения окна, мешают с помощью визуально представленной цифровой задачи отзыва за пределами предложения и манипулировали с помощью трех цифровых нагрузок памяти. Путем оценивать как главным образом задача постигать предложения RC повлияна на вторичной задачей, мы можем tackle состязательный вопрос относительно китайской асимметрии обработки RC. Наши результаты показывают различные модели обработки RC по сравнению с теми, о которых сообщалось в предыдущих исследованиях. Эксперимент 1 не проявляет четких преимуществ обработки RC ни в SRC, ни в ORC; однако предпочтение ОРК наблюдается в конце предложений, и предпочтение SRC находится на основном сайте глагола. Аналогичным образом, Эксперимент 2 представляет собой динамическую закономерность. При недозначной нагрузке SRCs показывают преимущества обработки в области маркера RC. Однако при взаимодействии с высокой цифрой нагрузки ОРКПоказывают показывают преимущества обработки в одном регионе. Эти результаты приводят к гипотезе, что в обработке китайских RCs не существует очевидной или внутренней асимметрии обработки. приложения, исследовающие метрики обработки разговорных предложений, связанных с рабочей памятью.

Introduction

Роль рабочей памяти (WM) при обработке разговорного предложения очевидна: из-за преходящего характера речи слушатели должны сохранять акустические формы компонента в своих воспоминаниях до тех пор, пока они не будут обработаны. Этот аспект становится еще более важным при обработке синтаксически сложных предложений. Назначение синтаксических отношений словам в сложных предложениях включает выполнение вычислительных операций на элементах, сохраненных в памяти в течение коротких периодов времени, что приводит к более высокому спросу на память. Однако, как система WM участвует в обработке устных предложений является спорным.

Это противоречие включает в себя два основных разногласия: некоторые исследователи утверждают, что одна система WM существует, который используется для всех словесных задач1,2– другими словами, синтаксическая обработка опирается на те же ресурсы памяти, используемые более когнитивных процессов. Это модель с одним ресурсом. Другие утверждают, что определение значения предложения на основе его синтаксической структуры включает в себя специализированную систему WM отдельно от той, которая используется для других словесных задач3,4. В этом отношении синтаксическая обработка является модульной. Это модель ресурсов отдельного предложения и интерпретации.

В психолингвистических исследованиях парадигма двойного модального вмешательства использовалась для изучения двух конкурирующих счетов. Исходя из предположения, что емкость хранилища WM ограничена5,6, парадигма решает вопросы, усложняя основную задачу с вторичной задачой вмешательства. Учитывая, что основная задача конкурирует за ограниченные ресурсы со второстепенной задачей вмешательства, сложность возрастает, и основная задача показывает более длительное время реакции. Учитывая эту ситуацию, двойной модаальный интерференционный подход позволяет оценить нагрузку на обработку и степень участия ВМ, когда участнику дается задача, требующая выполнения обеих задач одновременно.

Предложения, содержащие компоненты RC, которые вызывают больше трудностей с пониманием из-за их хорошо известных сложных синтаксических структур, широко используются для исследования того, как система Ом участвует в обработке сложных предложений. Однако, хотя обработка сложных предложений придает более высокий спрос на ресурсы WM, связанные с обработкой речи, менее ясно, способствует ли WM, который, как полагают, способствует затратам на синтаксические движения на языках с первоначальным RC конструкции (например, английский) отражают синтаксическую сложность языков с замыкает тройку (например, китайский). Благодаря использованию парадигмы двойного модального вмешательства нынешнее исследование проливает свет на этот вопрос.

Трудности, связанные с обработкой двух структур РК, предметно-зазорных и связанных с объективом относительных положений (СРК против ОРК), стали предметом широкого обсуждения. Эти споры в основном наблюдаются на разных языках, которые типологически различны. В начальных языках, таких как английский, в котором относительная оговорка следует за существительным головой, которое она изменяет, общий вывод состоит в том, что SRCs, такие как в примере 1(a) ниже, обрабатываются легче, чем ОРК в примере 1(b).

Equation 1

Как показано на примере (1), на английском языке расположение поверхности разрыва минимально отличается между SRCs и ORCs. Этот пробел индексируется как e1, пустое положение после головного существительного ‘актера‘ (так называемый наполнитель),оставленный его удалением из RC. Однако СРк и ОРК существенно различаются по грамматической структуре и функции разрыва в области РК. Затраты на память для интеграции и решения структурной зависимости между наполнителем и пробелом являются меткой мишенью для экспериментального исследования и широко используются для получения информации о роли WM в обработке языка и понимании.

Например, понимание и обработка этих постноминальных RCs требует индексации головного существительного ‘актера‘ как функциональный объект или объект глагола ‘критиковали‘ в SRC и ORC, а затем хранить головное существительное в WM, чтобы он мог позже назначен грамматический предмет глагола ‘признал‘ в основном положении.

В отличие от последовательного вывода с главными языками, которые постигает SRCs легче, чем понимание ORCs, смешанные результаты были зарегистрированы в отношении асимметрии обработки RC для китайского языка, который является заголовком языка, в котором родственник положение предшествует головке существительное. Некоторые из них отметили преимущество обработки SRC, в то время как другие сообщили об противоположной картине (т.е. преимущество обработки ORC). Последние строки исследования также предложил, что RC обработки асимметрии могут быть модулированы WM, как это предлагается по результатам, полученным из исследований самостоятельно развивающейся производительности чтения7,8,9.

Как уже упоминалось выше, существуют две конкурирующие модели, касающиеся роли, которую Играет WM в (сложной) синтаксической обработке. Один из них заключается в том, что “синтаксическая обработка является модульной”, а другая заключается в том, что “синтаксическая обработка является общей”. Сложные предложения с хорошо известными различиями в сложности понимания, т.е. СРК против ОРК на английском языке, часто используются в задачах двойного модального интерференции (DMI) для изучения этих двух утверждений в отношении вопроса о модульности, поскольку участие WM, как утверждается, параллельно с асимметрией обработки. Таким образом, индуцирование параллельной нагрузки памяти через задачи вмешательства демонстрирует влияние WM на синтаксическую обработку. Обоснование заключается в том, что независимо от того, существует ли единая словесная система WM или отдельные модульные синтаксические системы, привлечение системы к мешающей задаче делает синтаксическую обработку менее эффективной из-за ограниченности ресурсов WM. Способ обработки синтаксически более сложных предложений (ORC, на английском языке) страдает в DMI задач по сравнению с обработкой синтаксически более простые предложения (SRC, на английском языке) предоставляет доказательства относительно конкретного эффекта WM и указывает степень которые WM участвует.

В отличие от начальных языков, таких как английский, китайские RCs проявляется голова окончательного формирования и экспонатов разрыв-наполнитель отношений. Индексированный элемент перемещения, зазор, предшествует существительному, связывающему с ним, как показано в 2 а), SRC и 2 (b), ORC.

Equation 1

Споры, вытекающие из обработки китайских RCs является то, что SRCs не постоянно сообщается, как легче обрабатывать, чем ORCs, и это несоответствие создает проблемы для теорий обработки языка и понимания. Потому что предварительное содержание до релятивизатора ‘DE’ должны храниться в WM до тех пор, пока после разрыва-перемещенного головного существительного ‘актер’, связаним и извлечены-понимание этого процесса по-прежнему помогает в получении понимания роли WM в обработке языка.

В текущем исследовании, разговорная обработка предложения RC рассматривается, потому что прослушивание является очень сжатым во время обработки и тесно связано с функционированием WM. Используется парадигма двойного модального вмешательства, поскольку интерференция является устоявшейся функцией забвечи в кратковременной слуховой памяти. Представления, хранящиеся в памяти, могут быть деградированы и впоследствии потеряны при вмешательстве событий10. Отвлекающие, которые различаются по различным аспектам (в данном случае: интралингвитивные и экстрацифровые, см. ниже) к канонической произнесенное предложение позволяют нам измерить стоимость интеграции инкрементных входных данных на различных этапах обработки и под различные условия интерференции.

Основываясь на позиции, что обработка более синтаксически сложных предложений перегружает WM больше, чем обработка более простых предложений, можно предположить, что манипулирование типом помех в ходе понимания должно иметь последствия для обработки предложения. Подразумевается, что обработка синтаксически более сложных предложений потребует либо пропорционально больше или непропорционально больше времени прослушивания в Интернете и показать худшую производительность в пост-онлайн оценка предложения, чем будет обработка синтаксически более простых конструкций. В настоящем исследовании рассматривается гипотеза о том, что вмешательство при обработке предложений может индексировать участие WM и практически ставит его значение за пределы вопроса о синтаксической модульности: он предлагает идею, что споры по поводу китайской обработки RC может быть в ходе расследования ВМ из-за его основополагающей роли в понимании языка. Таким образом, значение, придаваемые к использованию dMI задач в китайской обработке RC обеспечивает путь к решению текущих дебатов относительно китайской асимметрии обработки RC.

В этой статье представлены два образцовых эксперимента, связанных со слуховой обработкой с использованием как внутри-, так и экстрасентациального вмешательства. Цельэтих двух экспериментов заключалась в изучении того, в какой степени WM занимается обработкой китайских РК под различными типами помех.

В первом эксперименте в качестве внутринаправленного вмешательства использовалась визуально представленная лексическая задача принятия решений. В качестве второстепенной задачи вмешательства в этих точках в трех точках была введена задача по принятию лексических решений словом/несловом (LDT), что позволило измерить сложность обработки в этих точках. Основная проблема в этом эксперименте заключается в том, как пробел в относительном положении (RC) связан с наполнителем в матричной оговорке (MC) и влияет ли он на обработку последующего MC. Таким образом, три зондирующих участка, которые должны быть измерены были установлены после региона MC. Пример, реплицированный из (2) из трех зондирующих сайтов, указанных стрелками и приведенных в соответствие с соответствующей синтаксической конкатией, иллюстрируется в примере 3, где 3 (a) показывает SRC и 3(b) показывает ORC.

Equation 1

На рисунке 1 показана процедура вмешательства в непрерывную слуховую презентацию RC LDT на любом из трех зондирующих сайтов. Дизайн синхронизации следует обычному протоколу задачи LDT в предыдущем китайском исследовании обработки11. Например, каждое визуальное испытание LDT начинается с перекрестного знака “К”, который указывает точку фиксации в центре монитора на 500 мс, а затем визуальный стимул LDT, который отображается на экране в течение 3000 мс и исчезает сразу после того, как объект делает лексическое решение. Типичный предмет завершает эксперимент 1, включая практический сеанс, в течение 30-35 минут.

Figure 1
Рисунок 1: Процедура внутричувственного вмешательства с лексической задачей принятия решений.
Пожалуйста, нажмите здесь, чтобы просмотреть большую версию этой цифры.

Три зондирующих сайта вместе с задачей LDT:

1. Позиция 1 (P1): Регионпост-S MC

Первая позиция (P1), которая будет измерена сразу после субъекта MC в регионе после границы RC. Ожидается, что на этом участке будет нагружена нагрузка на обработку. С одной стороны, до этого момента (SMC), объект-пробел и объект-пробел строительства в домене RC форме контрастных глагольн-объект (VO) и предмет-глагол (SV) структур, соответственно. С другой стороны, чтобы интегрировать составляющих в регионе RC с головой существительных в MC, слушатели должны определить грамматические роль пробела и связать его с предстоящим наполнителя голову существитель

2. Позиция 2 (P2): Регион после VMC

Вторая позиция (P2), которая будет измерена сразу после глагола в матричной оговорке (VMC). Предполагается, что этот сайт также вызывает нагрузку на обработку. Интеграция вербальной информации требует от слушателей получения существительного аргументов в предложении и идентификации агента матричного глагола либо из предыдущего домена RC, либо из головного существительного, которое изменяет RC.

3. Позиция 3 (P3): Область postsentence

Третья позиция (P3), которая будет измерена, сразу после окончания предложения. Предыдущие исследования по обработке предполагают, что существует эффект итогового заключения в конце предложения – явление, при котором несинтаксическая информация (например, дискурс и семантический уровень) рассматривается в конце предложения для активации и полного понимания12 ,13. Таким образом, нагрузка на обработку должна увеличиться ближе к концу предложения в связи с необходимостью интеграции этой несинтаксической информации14,15. Позиция 3 должна показать деградацию нагрузки обработки, поскольку разрешение предложения было предпринято вокруг этого сайта.

Во втором эксперименте была принята задача слухового движущегося окна (AMW). Метод AMW считается способным фиксировать закономерности распределения ресурсов во время онлайн-лингвистической обработки и широко используется в попытках различать два конкурирующих подхода WM16,17. Предполагается, что экстрасентиальное вмешательство должно стоить слушателям дополнительного времени в ходе обработки переходного предстоящего произнесенного предложения. В парадигме AMW участники услышали предложения, которые были разделены на слова, и нажали клавишу на клавиатуре, чтобы начать воспроизведение последующего сегмента. Таким образом, продолжительность пауз между клавиатурами для инициирования последующего сегмента и контроля потока поступающей информации отражает отзывчивость участников к конкретным лингвистическим особенностям, о котором идет речь. Например, если экстрасентиальное вмешательство оказывает определенное влияние на обработку предложений различной синтаксической сложности, участники будут проявлять соответственно более длительную продолжительность паузы перед началом последующих сегментов. Процедуры схематизироваться и представлены на рисунке 2.

Figure 2
Рисунок 2: Процедура экстрасентенциального вмешательства с задачей отзыва цифр.
Пожалуйста, нажмите здесь, чтобы просмотреть большую версию этой цифры.

Следующий протокол показывает, как исследователи используют визуально представленную лексическую задачу принятия решений в качестве внутрицептивного вмешательства и одновременной арифметической нагрузки интерференции как экстрасентиальное вмешательство для расследования участия ВМ и обработки асимметрия китайских RCs и выработать основную логику.

Protocol

Администрация этих экспериментов следовала всем правилам этики исследования. Все испытуемые предоставили информированное устное и письменное согласие до проведения экспериментов. Все процедуры, формы согласия и экспериментальный протокол были одобрены Комитетом по этике исследова…

Representative Results

Эффект интерференции наблюдался как в двухмодальных внутри-ЛДТ, так и в задаче внецифровой нагрузки. Учитывая три участка зонда в Эксперименте 1, результаты RT внутри-LDT задачи продемонстрировали динамическую картину обработки RC как функцию двух типов RC. Как показано на рисун…

Discussion

Это исследование показывает, что использование методов DMI с как внутри-, так и экстрасентиальными задачами вмешательства может помочь прояснить роль WM в обработке разговорного предложения и пролить свет на вопрос китайской асимметрии обработки RC. Как и ожидалось, путем измерения степе…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Это исследование было поддержано грантами от Министерства науки и техники, Тайвань, R.O.C. (NSC-101-2410-H-439-001) первому автору, Туюань Ченг. Авторы благодарят членов лаборатории, Ян Я-Хуэй и Чэнь Пэй-Хань, в NTIN, за их помощь в подготовке и проведении эксперимента.

Materials

E-Prime Psychology Software Tools version Professional 2.0
Headphone Logitech
Praat Praat 5.3.43 The online software used to edit the sound files for listening; http://www.fon.hum.uva.nl/praat/
Serial Response Box Psychology Software Tools
Standard PC ASUS K42Jv laptop

References

  1. Just, M. A., Carpenter, P. A. A capacity theory of comprehension: Individual differences in working memory. Psychological Review. 99, 122-149 (1992).
  2. King, J., Just, M. A. Individual differences in syntactic processing: The role of working memory. Journal of Memory and Language. 30, 580-602 (1991).
  3. Caplan, D., Waters, G. S. Verbal working memory and sentence comprehension. Behavioral & Brain Sciences. 22, 77-94 (1999).
  4. Waters, G., Caplan, D., Yampolsky, S. On-line syntactic processing under concurrent memory load. Psychonomic Bulletin & Review. 10 (1), 88-95 (2003).
  5. Cowan, N. . Working Memory Capacity. , (2005).
  6. Miller, G. A. The magical number seven, plus or minus two: Some limits on our capacity for processing information. Psychological Review. 63, 81-97 (1956).
  7. Chen, B., Ning, A., Bi, H., Dunlap, S. Chinese subject-relative clauses are more difficult to process than the object-relative clauses. Acta Psychologica. 129, 61-65 (2008).
  8. Gibson, E., Wu, H. H. Processing Chinese relative clauses in context. Language and Cognitive Processes. 28, 125-155 (2013).
  9. Hsiao, F., Gibson, E. Processing relative clauses in Chinese. Cognition. 90, 3-27 (2003).
  10. Lewandowsky, S., Oberauer, K., Brown, G. D. A. No temporal decay in verbal short-term memory. Trends in Cognitive Science. 13, 120-126 (2009).
  11. Wu, J. T., Chou, T. L., Liu, I. M., Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. The locus of the character/word frequency effect. Advances in the study of Chinese language processing. , 31-58 (1994).
  12. Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. Tasks and timing in the perception of linguistic anomaly. Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).
  13. Swinney, D., Zurif, E. Syntactic processing in aphasia. Brain and Language. 50 (2), 225-239 (1995).
  14. Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia. Brain and Language. 61 (2), 169-182 (1998).
  15. Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. Measuring processing load during sentence comprehension: visuomotor tracking. Aphasiology. 14 (5-6), 501-513 (2000).
  16. Waters, G. S., Caplan, D. Age, working memory, and on-line syntactic processing in sentence comprehension. Psychology and Aging. 16, 128-144 (2001).
  17. Waters, G. S., Caplan, D. Working memory and online syntactic processing in Alzheimer’s disease: Studies with auditory moving window presentation. Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).
  18. Cheng, T., Cheung, H., Wu, J. Spoken relative clause processing in Chinese: measure from an alternative task. Language and Linguistics. 12 (3), 669-705 (2011).
  19. Cheng, T., Wu, J., Huang, S. Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses. Journal of Psycholinguistic Research. 47 (5), 1035-1055 (2018).
  20. CKIP. . Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , (1994).
  21. MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. Step—A system for teaching experimental psychology using E-Prime. Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).
  22. Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique. Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).
  23. Daneman, M., Carpenter, P. A. Individual differences in working memory and reading. Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).
  24. Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs. Frontiers in Psychology. 9, 1-18 (2018).
  25. Mitchell, D. C., Green, D. W. The effects of context and content on immediate processing in reading. Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).

Play Video

Cite This Article
Cheng, T., Wu, J. Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks. J. Vis. Exp. (151), e59660, doi:10.3791/59660 (2019).

View Video