تتبع العين خلال فهم اللغة يقع بصريا: المرونة والتقييدات في الكشف عن السياق البصرية آثار
Summary
تستعرض هذه المادة بالعين تتبع منهجية للدراسات في فهم اللغة. للحصول على بيانات موثوق بها، يجب أن تتبع الخطوات الرئيسية للبروتوكول. ومن بين هذه هي الإعداد الصحيحة لتعقب العين (مثلاً، ضمان نوعية جيدة من الصور العين والرأس) ومعايرة دقيقة.
Abstract
هذا العمل هو وصف وتقييم منهجية مصممة لقياس الجوانب المختلفة من التفاعل بين معالجة اللغة وتصور العالم المرئي. تسجيل أنماط نظرات العين قدمت أدلة جيدة لمساهمة كل من سياق مرئي والمعارف اللغوية العالمية لفهم اللغة. البحوث الأولية تقييم تأثيرات سياق الكائن لاختبار نظريات نمطية في معالجة اللغة. وفي المقدمة، يصف لنا كيف اتخذت التحقيقات اللاحقة دور السياق الأوسع visual في لغة معالجة كموضوع بحث في حد ذاته، يسأل أسئلة مثل كيف يسهم في تصورنا البصرية للأحداث والمتكلمين الفهم أبلغ بتجربة كومبريهينديرس. بين جوانب دراسة السياق البصرية هي الإجراءات، والأحداث، والمتكلم لغض البصر، وتعبيرات الوجه العاطفية،، فضلا عن تكوينات الكائن المكاني. بعد لمحة عامة عن طريقة تتبع العين وتطبيقاته المختلفة، نحن قائمة الخطوات الرئيسية للمنهجية في البروتوكول، والتي توضح كيفية استخدامه بنجاح لدراسة اللغة يقع ضعاف الفهم. قسم الأخير يعرض ثلاث مجموعات من النتائج التمثيلية ويوضح فوائد وتقييدات لتتبع العين للتحقيق في التفاعل بين تصور لفهم العالم واللغة البصرية.
Introduction
البحث psycholinguistic قد أبرزت أهمية تحليل حركة العين في فهم العمليات التي تورط في فهم اللغة. هو جوهر الاستدلال عمليات الفهم من السجل نظرات فرضية يرتبط الإدراك ب حركات العين5. وهناك ثلاثة أنواع رئيسية من حركات العين: ساككاديس والحركات فيستيبولو العين وحركات السعي نحو سلس. ساككاديس هي حركات سريعة والقذائف التسيارية التي يحدث معظمها غير مدركة، وارتبطت موثوق بالتحولات في الاهتمام6. وتعتبر لحظات الاستقرار النسبي نظرات بين ساككاديس، المعروف باسم تثبيتات، الفهرس الحالي الانتباه البصري. قياس موضع التثبيتات ومدتها فيما يتعلق بالعمليات الإدراكية يعرف باسم ‘العين تتبع الأسلوب’. وعمل التنفيذ المبكر لهذا الأسلوب لدراسة القراءة والفهم في السياقات اللغوية دقة (انظر راينر7 استعراض). في هذا النهج، مدة تفتيش منطقة الكلمة أو الجملة المقترنة مع معالجة صعوبة. العين تتبع، ولكن أيضا تم تطبيقها على دراسة فهم اللغة المنطوقة أثناء التفتيش على الكائنات في العالم (أو على جهاز كمبيوتر عرض2). وتسترشد التفتيش على الكائنات في هذا الإصدار ‘العالم المرئي’ تتبع العين، لغة. عندما نسمع كومبريهينديرس حمار، على سبيل المثال، عمليات التفتيش لحمار وحشي على الشاشة هو اتخاذها لتعكس أنهم يفكرون في الحيوان. في ما يعرف باسم نموذج العالم المرئي، هو اتخاذ نظرات العين كومبريهيندير لتعكس فهم اللغة المنطوقة وتفعيل المعارف المرتبطة بها (مثلاً المستمعين أيضا تفتيش حمار عندما يسمعون الرعي، مما يدل الإجراء التي يؤديها حمار)2. عمليات التفتيش هذه تشير إلى ارتباط منهجي بين اللغة-عالم العلاقات و حركات العين2. طريقة شائعة لقياس هذا الارتباط بحساب نسبة تتطلع إلى مختلف المناطق المحددة مسبقاً على شاشة. وهذا ما يسمح الباحثون مقارنة مباشرة (عبر الشروط، بالمشاركين والبنود) مقدار الاهتمام الذي يولي لكائنات مختلفة في وقت معين وكيفية تغيير هذه القيم في القرار ميلي ثانية.
بحوث في علم اللغة النفسي قد استغل تعقب العين في العالمين المرئي لندف فرضيات النظرية المتنافسة عن بعضها البعض فيما يتعلق ببنية العقل1. تثبيتات العين على كائنات يصور، علاوة على ذلك، كشفت عن أن كومبريهينديرس يمكن – سياق اللغوي مقيدة بما فيه الكفاية على افتراض – القيام بتفسير الدلالات الإضافية8 وحتى وضع التوقعات حول الأحرف القادمة 9-هذه البيانات نظرات العين لها أيضا تسليط الضوء على طائفة من مواصلة عمليات الفهم، مثل الغموض اللغوي القرار10،11، الضمير القرار12، توضيح دور الهيكلية والموضوعية عن طريق تعيين المعلومات في سياق البصرية13،،من1416، وعمليات عملي15، ضمن أشياء أخرى كثيرة4. ومن الواضح أن حركات العين للكائنات من خلال فهم اللغة يمكن أن تكون مفيدة لعمليات المتورطين.
العين تتبع طريقة غير الغازية ويمكن استخدامها مع الأطفال الرضع، مستخدمين لغة الشباب، وكبار السن. ميزة مفتاح أنه، خلافا لردود الشروريه إلى تحقيقات أو يضغط زر الرد في مهام التحقق، فإنه يقدم أفكاراً على مر الزمن في قرار ميلي ثانية إلى كيف اللغة يوجه الاهتمام وكيف سياق البصرية (في شكل الكائنات، الإجراءات، الأحداث، والمتكلم لغض البصر، وتعبيرات الوجه العاطفية، كذلك تكوينات الكائن المكاني) يسهم في معالجة اللغة. ويكمل استمرارية هذا التدبير خلال الفهم الجملة جيدا مع تدابير أخرى بعد انتهاء الجملة وتجربة ما بعد مثل من العلني صورة/فيديو-الجملة التحقق وأسئلة الفهم والذاكرة أذكر المهام. ردود صريحة في هذه المهام يمكن أن تثري تفسير السجل نظرات العين بتوفير نظرة ثاقبة نتائج عملية الفهم والذاكرة، والتعلم2. الجمع بين تتبع العين مع هذه المهام الأخرى كشفت عن مدى تعدل الجوانب المختلفة سياق البصرية الانتباه البصري والفهم (فوري، فضلا عن تأخر) عبر مراحل العمر.
العرض التقديمي للغة (منطوقه أو مكتوبة) ومشاهد يمكن أن تكون متزامنة أو متتابعة. على سبيل المثال، كنوفيرلي والمتعاونين مع17 قدم المشهد ms 1,000 قبل الجملة المنطوقة، وأنه ما زال حاضرا أثناء الفهم. أفادوا بالأدلة التي تسهم في تصوير قصاصات فنية لإحداث العمل بالقرار من غموض الهيكلية المحلية الألمانية هذا الموضوع-فعل-الكائن (سفو) بالمقارنة مع الجمل الكائن-فعل-الموضوع (أوفس). كنوفيرلي وكروكر18 قدم مشهد clipart قبل جملة مكتوبة واختبارها على إدماج الأحداث clipart تزايدي أثناء فهم الجملة. ولاحظوا آثار التطابق تدريجية، بمعنى أن مرات المشتركين القراءة من مكونات الجملة كانت أطول عند هذه متطابقة (مقابل مطابقة) الحدث يصور في المشهد السابق. في الخيار عرض حافز آخر، المشاركون أولاً اقرأ جملة تصف علاقة مكانية وثم شاهدت مشهد معين ترتيب المكانية التي تنطوي على كائن رسومات سطر19. قيمت هذه الدراسة توقعات النماذج الحسابية اللغة المكانية عن طريق طرح المشاركون معدل تناسب العقوبة نظراً للمشهد، مع حركات العين التي سجلت أثناء الاستجواب مشهد. أنماط نظرات المشاركين كانت عن طريق الشكل للكائن الذي كانت تواجه التضمين – يؤكد تنبؤات النموذج جزئيا وتوفير البيانات اللازمة لصقل نموذج.
في حين أن العديد من الدراسات قد استخدمت clipart تصوير17،18،19،20،21،،من2223، من الممكن أيضا الجمع بين العالم الحقيقي الكائنات، وأشرطة الفيديو من هذه الكائنات، أو صوراً ثابتة مع اللغة المنطوقة1،،من2124،،من2526،46. استخدام كنوفيرلي والزملاء وضع العالم الحقيقي24 واباشيدزه والزملاء يستخدم تنسيق عرض أشرطة فيديو لدراسة عمل الأحداث وآثار التوتر25. اختلاف المحتوى الدقيق من المشاهد (مثلاً، يصور الإجراءات أم لا)22،،من2738 من الممكن ويمكن أيضا أن تكشف عن آثار السياق visual. التحقيق دراسة ذات صلة بها رودريغيز والمتعاونين26 تأثير منبهات الجنس المرئية المسجلة على شريط فيديو في الفهم الجمل المنطوقة وقدم بعد ذلك. وشاهد المشاركون أشرطة الفيديو عرض الأيدي الذكور أو الإناث أداء عمل النمطية المتعلقة بالجنسين. ثم، أنهم علموا جملة أما حدث عمل أقل من الذكور أو الإناث بينما كان يتفقد شاشة عرض صورتين جنبا إلى جنب، واحدة لرجل والآخر امرأة في نفس الوقت. هذه البيئة البصرية واللغوية الغنية يسمح المؤلفون إلى ندف أربا آثار اللغة بوساطة المعرفة النمطية في الفهم من آثار العظة الجنسين قدم بصريا (اليد).
وقد استهدفت تطبيق مزيد من هذا النموذج التغيرات الإنمائية في معالجة اللغة. حركات العين للكائنات من خلال فهم اللغة المنطوقة كشفت آثار الأحداث يصور في 4-5-العمر27،28 وفي البالغين الأكبر سنا29 في الوقت الحقيقي، ولكن تأخر إلى حد ما مقارنة بالشباب. Kröger والمتعاونين مع22 دراسة آثار العظة عروضي وحالة مناسبة داخل تجربة ومقارنة هذه عبر التجارب في البالغين والأطفال. تفتيش المشاركين مشهد حدث عمل غامضة أثناء الاستماع إلى جملة ألمانية ذات صلة لا لبس فيه بعلامات الحالة. وكشف حركات العين أن أنماط عروضي المميزة ساعد الكبار ولا 4 أو 5–العمر عند ديسامبيجواتينج الذين–ما-إلى-منهم. ومع ذلك، أثرت حالة الجملة الأولى الوسم والكبار ولكن حركات العين للأطفال لا. وهذا يوحي بأن فهم 5 سنة الوسم القضية ليست قوية بما فيه الكفاية لتمكين تعيين الدور الموضوعي (انظر الدراسة اوزغي والمتعاونين مع30)، على الأقل ليس عندما عمل الأحداث لا تزيل غموض العلاقات دور المواضيعية. هذه النتائج مثيرة للاهتمام، نظراً إلى أن أنها تتناقض مع النتائج السابقة من آثار عروضي على دور المواضيعية التعيين31. واقترح Kröger والمتعاونين مع22 أن سياق البصرية (داعم أكثر أو أقل) المسؤول عن النتائج المتناقضة. أن عقد هذه التفسيرات، وأنها تبرز دور السياق في فهم اللغة عبر مراحل العمر.
العين تتبع أسلوب يجمع جيدا مع التدابير من الصورة-(أو الفيديو) الجملة التحقق المهام18،،من2026، صورة التحقق المهام32، الإحضار دراسات24، وتصنيف مهام19، أو استدعاء التجريبية بعد انتهاء المهام25،33. التحقيق أباشيدزه والمتعاونين معهم34 و قريصة والمتعاونين مع33 تفاعل المتكلم نظرات ونظرات34 والمتكلم أشرطة الفيديو عمل العالم الحقيقي و تصوير العمل33، على التوالي، كرموز مضمون الجملة القادمة. عن طريق الجمع بين تتبع نظرات العين في مشهد خلال فهم اللغة بمهمة ذاكرة بعد تجريبية، التي اكتسبتها إلى فهم أفضل للطريقة التي تصور المستمعين غض البصر للمتكلم والإجراءات يصور تتفاعل وتؤثر على حد سواء معالجة اللغة فورا، واستدعاء الذاكرة. وكشفت النتائج مساهمة متميزة من الإجراءات مقابل النظرة المتكلم إلى الفهم في الوقت الحقيقي مقابل عمليات استدعاء الذاكرة تجربة ما بعد.
وفي حين يمكن أن تستخدم أسلوب التعقب بالعين مع قدرا كبيرا من المرونة، معايير معينة هي المفتاح. ويلخص البروتوكول التالي إجراء معممة التي يمكن تعديلها لأنواع مختلفة من الأسئلة البحثية وفقا للاحتياجات المحددة الباحثين. هذا البروتوكول إجراء موحد يعمل في “مختبر علم اللغة النفسي” في جامعة هومبولت زو برلين، فضلا عن اللغة والإدراك المختبر في المعرفي التفاعل تكنولوجيا التميز الكتلة (CITEC) في السابق جامعة بيليفيلد. ويصف البروتوكول سطح مكتب وإعداد عن بعد. ويوصي هذا الأخير لاستخدامها في الدراسات مع الأطفال أو البالغين الأكبر سنا. جميع التجارب المذكورة في نتائج الممثل استخدام جهاز تعقب عين معدل أخذ عينات من 1,000 هرتز وتستخدم جنبا إلى جنب مع عامل استقرار رأس، جهاز كمبيوتر لاختبار المشاركين (شاشة الكمبيوتر) وجهاز كمبيوتر لرصد التجربة حركات العين المشاركين (الكمبيوتر المضيف). والفرق الرئيسي من هذا الجهاز إلى سابقتها أنه يتيح لتعقب العين مجهر. يهدف البروتوكول إلى أن عامة بما فيه الكفاية للاستخدام مع الأجهزة تتبع العين الأخرى التي تشمل عامل استقرار رأس والاستفادة من جهاز كمبيوتر ثنائي الإعداد (المضيف + عرض). ومع ذلك، من المهم أن نضع في اعتبارنا أن الأجهزة الأخرى من المحتمل أن يكون أساليب مختلفة للتعامل مع مشاكل مثل الفشل المعايرة أو فقدان المسار، الذي ينبغي أن تشير الحالة المجرب للمستخدم اليدوي لأجهزتهم الخاصة.
Protocol
Representative Results
Discussion
وباختصار، كشفت المتغيرات استعراضها للعين تتبع في سياقات البصرية العديد من الطرق التي مشهد بصرية يمكن أن تؤثر على فهم اللغة. يوفر هذا الأسلوب مزايا حاسمة مقارنة بأساليب مثل قياس رد فعل مرات. على سبيل المثال، حركات العين الجارية توفر لنا نافذة في عمليات فهم اللغة وكيف تتفاعل هذه مع تصورنا للعالم المرئي على مر الزمن. وعلاوة على ذلك، أن المشاركين لا يتطلب بالضرورة لتنفيذ مهمة صريحة من خلال فهم اللغة (مثل الحكم جراماتيكاليتي من الجملة عن طريق زر صحافة). وهذا يسمح للباحثين استخدام الأسلوب مع السكان الذين قد يعانون من الاستجابات السلوكية العلنية عدا نظرات العين، مثل الرضع، الأطفال، وفي بعض الحالات، البالغين الأكبر سنا. العين تتبع صالحة إيكولوجيا في ذلك أنها تعكس الردود اهتمام المشاركين – لا تختلف عن الاستجواب البشر المرئية من الأمور ذات الصلة بالاتصالات في العالم من حولهم أثناء الاستماع أكثر أو أقل انتباهاً للتصريحات التي تتكشف.
واحد من الحدود (أو ربما الخصائص) لنموذج العالم المرئي أن ليس كل الأحداث يمكن أن يصور مستقيم ولا لبس فيه. ويمكن، بطبيعة الحال، يصور الأشياء الملموسة والأحداث. ولكن كيف المفاهيم المجردة أفضل يصور أقل وضوحاً. وهذا يمكن الحد من (أو تعريف) ثاقبة التفاعل بين معالجة اللغة وتصور العالم المرئي باستخدام نموذج العين تتبع عالم مرئي. تحديات أخرى تتعلق بفرضيات الربط بين عمليات الفهم والسلوك الملاحظ. تثبيتات العين هي استجابة سلوكية واحدة أن المرجح أن يعكس عمليات فرعية العديد من خلال فهم اللغة (مثلاً، الوصول معجمي، عمليات التكامل المرجعي، توقعات بوساطة اللغة، آثار السياق البصرية، بين أمور أخرى). وفي ضوء هذه الرؤية، الباحثين يجب أن تكون حذراً لا لأكثر-أو إساءة تفسير نمط الملاحظة النظرة. لمعالجة هذه المشكلة، والبحوث السابقة قد أبرز دور الفهم المهام الفرعية لتوضيح تفسير نظرات سجل40.
أحد السبل لتعزيز القدرة على تفسيرها لحركات العين دمجها مع تدابير أخرى مثل إمكانات الدماغ المتصلة بالحدث (نظم تخطيط موارد المؤسسات). بالتحقيق في هذه الظاهرة نفسها مع اثنين من الأساليب التي تكون قابلة للمقارنة في بهم الحبوبية الزمانية ومكمل في هذه الفرضيات ربط، يمكن أن يستبعد تفسيرات بديلة لنتائجها الباحثين وإثراء تفسير كل 41من التدابير الفردية. هذا النهج سعى عبر تجارب43، ولكن، أكثر في الآونة الأخيرة، أيضا في تجربة واحدة (أن كان ذلك في السياقات اللغوية دقة)44. البحث في المستقبل يمكن أن تستفيد كثيرا من هذا التكامل المنهجي، وواصل تركيبة مع المهام اللاحقة للمحاكمة ومرحلة ما بعد التجريبية.
العين تتبع الأسلوب يمكن تكرار النتائج المقررة، فضلا عن اختبار فرضيات جديدة، حول التفاعل بين الانتباه البصري في الكواليس مع فهم اللغة. يجب أن يتبع الإجراء الوارد في البروتوكول بعناية نظراً لأخطاء المجرب لو كانت بسيطة يمكن أن تؤثر على نوعية البيانات. قراءة الدراسات، على سبيل المثال، المناطق ذات الصلة تحليل كثيرا في كلمات مفردة أو حتى خطابات، بمعنى أن أخطاء المعايرة حتى الصغيرة قد يشوه النتائج (راجع المقال ب توظيفها والزملاء42). الخطوات 1-4 و 1، 5 من البروتوكول، والمعايرة لتعقب العين والانجراف الاختيار/الانجراف الصحيح، ذات أهمية خاصة نظراً لأنها تؤثر مباشرة على دقة تسجيل. يمكن أن يؤدي الفشل لمعايرة بشكل صحيح تعقب العين في تعقب عدم دقة تتبع حركات العين لمجالات اهتمام محددة سلفا. عدم تتبع هذه سيؤدي إلى نقاط البيانات وخسارة في القدرة الإحصائية الذي يمكن أن يكون مشكلة عند التحقيق في علاقات العالم إلى لغة دقيق جداً وتسفر عن أحجام صغيرة تأثير الإحصائية في عداد المفقودين (انظر الوصف تجارب غيرا وكنوفيرلي32 و منستر والزملاء37 من بين نتائج الممثل).
نظراً للحاجة إلى تحقيق أقصى قدر من السلطة وحساسية للمعدات، من المهم أن المجربون تعرف كيفية التعامل مع المشاكل التي تحدث بصورة روتينية أثناء جلسة تجريبية. على سبيل المثال، يمكن أن ينتج حركة المشاركين ارتداء النظارات وموقف التلميذ صعوبات المعايرة بسبب انعكاسات الضوء على العدسات النظارات أحد المشاركين. طريقة واحدة لحل هذه المشكلة هو مرآة صورة العين للمشترك على “جهاز عرض الكمبيوتر” وتشجيعهم على تحريك رؤوسهم حتى انعكاس الضوء على النظارات لم يعد مرئياً على الشاشة، مما يعني أنه لم يعد القبض على الكاميرا. يمكن أن يكون سببا آخر لعدم معايرة انقباض التلميذ، الذي قد يكون نتيجة التعرض المفرط للضوء. وفي هذه الحالة، تعتيم الضوء في المختبر سوف زيادة تمدد التلميذ وهكذا، تساعد في تعقب العين في الكشف بدقة عن التلميذ.
كفكر نهائي، نود لمواجهة احتمال نموذج البصرية في العالم بالنسبة للبحوث المتعلقة بتعلم اللغة الثانية. النموذج الفعل استخدمت بنجاح في psycholinguistic للبحث للتحقيق في ظواهر مثل التفاعل عبر اللغة المعجمية والصوتية46،،من4748. وبالإضافة إلى ذلك، كثيرا ما تم إبراز الارتباط الوثيق بين الانتباه البصري وتعلم اللغة في الأدب اللغويات التطبيقية في اكتساب اللغة الثانية49،،من5051. المحتمل أن تستمر البحوث في المستقبل على تعلم اللغة الثانية والاستفادة من موقع متميز لتعقب العين كأسلوب يوفر مؤشر للانتباه البصري في القرار ميلي ثانية.
Divulgations
The authors have nothing to disclose.
Acknowledgements
ومولت هذه البحوث ZuKo (مبادرة التميز، جامعة هومبولت زو برلين)، 277 الكتلة التميز ‘المعرفي التفاعل التكنولوجيا’ (مجلس الأبحاث الألمانية DFG)، و “البرنامج الإطاري السابع” للاتحاد الأوروبي للبحوث، التطور التكنولوجي، ومظاهره تحت اتفاق منحة جوان 316748 (لانبيرسيبت). الكتاب نعترف أيضا الدعم من “صناديق القاعدية” “مراكز التميز”، FB0003 المشروع من “برنامج البحث الترابطي اللجنة” (حكومة شيلي)، ومشروع “فوتيرو” في مركز التركيز إكسبراج (DFG). كنوفيرلي بيا شريطة أبلغ أول مشروع للمادة بموجب بروتوكول مختبر أن هيلين قريصة إنشاء مثيل في جامعة بيليفلد، والتي لا تزال تستخدم في جامعة هومبولت زو برلين. وساهمت جميع المؤلفين المحتويات بتقديم مدخلات عن الأساليب والنتائج في شكل أو آخر. كاميلو رونديروس رودريغيز وكنوفيرلي بيا بتنسيق المدخلات من المؤلفين، وفي تكرارات اثنين، إلى حد كبير تنقيح المسودة الأولية. إرنستو غيرا أنتجت الأرقام 2 – 4 على أساس مدخلات من منستر كاتيا وألبا رودريغيز إرنستو غيرا. وقدمت هيلين قريصة الشكل 1 وكنوفيرلي بيا بتحديثه. نشرت أجزاء من النتائج المبلغ عنها في أعمال “الاجتماع السنوي” “جمعية العلوم المعرفية”.
Materials
| Desktop mounted eye-tracker including head/chin rest | SR Research Ltd. | EyeLink 1000 plus | http://www.sr-research.com/eyelink1000plus.html |
| Software for the design and execution of an eye-tracking experiment | SR Research Ltd. | Experiment Builder | http://www.sr-research.com/eb.html |
References
- Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. Integration of visual and linguistic information in spoken language comprehension. Science. 268 (5217), 1632-1634 (1995).
- Cooper, R. M. The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language processing. Cognitive Psychology. 6 (1), 84-107 (1974).
- Knoeferle, P., Guerra, E., Finkbeiner, R., Meibauer, J., Schumacher, P. B. What is non-linguistic context? A view from language comprehension. In What is a Context? Linguistic Approaches and Challenges. , 129-150 (2012).
- Knoeferle, P., Guerra, E. Visually situated language comprehension. Language and Linguistics Compass. 10 (2), 66-82 (2016).
- Just, M. A., Carpenter, P. A. A theory of reading: From eye fixations to comprehension. Psychological Review. 87 (4), 329-354 (1980).
- Deubel, H., Schneider, W. X. Saccade target selection and object recognition: Evidence for a common attentional mechanism. Vision Research. 36 (12), 1827-1837 (1996).
- Rayner, K. Eye movements in reading and information processing: 20 years of research. Psychological Bulletin. 124 (3), 372-422 (1998).
- Sedivy, J. C., Tanenhaus, M. K., Chambers, C. G., Carlson, G. N. Achieving incremental semantic interpretation through contextual representation. Cognition. 71 (2), 109-147 (1999).
- Kamide, Y., Scheepers, C., Altmann, G. T. Integration of syntactic and semantic information in predictive processing: Cross-linguistic evidence from German and English. Journal of Psycholinguistic Research. 32 (1), 37-55 (2003).
- Allopenna, P. D., Magnuson, J. S., Tanenhaus, M. K. Tracking the time course of spoken word recognition using eye movements: Evidence for continuous mapping models. Journal of Memory and Language. 38 (4), 419-439 (1998).
- Tanenhaus, M. K., Magnuson, J. S., Dahan, D., Chambers, C. Eye movements and lexical access in spoken-language comprehension: Evaluating a linking hypothesis between fixations and linguistic processing. Journal of Psycholinguistic Research. 29 (6), 557-580 (2000).
- Arnold, J. E., Eisenband, J. G., Brown-Schmidt, S., Trueswell, J. C. The rapid use of gender information: Evidence of the time course of pronoun resolution from eyetracking. Cognition. 76 (1), B13-B26 (2000).
- Chambers, C. G., Tanenhaus, M. K., Magnuson, J. S. Actions and affordances in syntactic ambiguity resolution. Journal of Experimental Psychology: Learning, Memory, and Cognition. 30 (3), 687-696 (2004).
- Spivey, M. J., Tanenhaus, M. K., Eberhard, K. M., Sedivy, J. C. Eye movements and spoken language comprehension: Effects of visual context on syntactic ambiguity resolution. Cognitive Psychology. 45 (4), 447-481 (2002).
- Huang, Y. T., Snedeker, J. Online interpretation of scalar quantifiers: Insight into the semantics-pragmatics interface. Cognitive Psychology. 58 (3), 376-415 (2009).
- Trueswell, J. C., Sekerina, I., Hill, N. M., Logrip, M. L. The kindergarten-path effect: studying online sentence processing in young children. Cognition. 73 (2), 89-134 (1999).
- Knoeferle, P., Crocker, M. W., Scheepers, C., Pickering, M. J. The influence of the immediate visual context on incremental thematic role-assignment: evidence from eye movements in depicted events. Cognition. 95 (1), 95-127 (2005).
- Knoeferle, P., Crocker, M. W. Incremental Effects of Mismatch during Picture-Sentence Integration: Evidence from Eye-tracking. Proceedings of the 26th Annual Conference of the Cognitive Science Society. , 1166-1171 (2005).
- Kluth, T., Burigo, M., Schultheis, H., Knoeferle, P. The role of the center-of-mass in evaluating spatial language. Proceedings of the 13th Biannual Conference of the German Society for Cognitive Science. , 11-14 (2016).
- Burigo, M., Knoeferle, P. Visual attention during spatial language comprehension. PLoS One. 10 (1), (2015).
- Münster, K., Carminati, M. N., Knoeferle, P. How Do Static and Dynamic Emotional Faces Prime Incremental Semantic Interpretation? Comparing Older and Younger Adults. Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , 2675-2680 (2014).
- Kroeger, J. M., Münster, K., Knoeferle, P. Do Prosody and Case Marking influence Thematic Role Assignment in Ambiguous Action Scenes?. Proceedings of the 39th Annual Meeting of the Cognitive Science Society. , 2463-2468 (2017).
- Knoeferle, P., Crocker, M. W. The influence of recent scene events on spoken comprehension: evidence from eye movements. Journal of Memory and Language. 57 (4), 519-543 (2007).
- Knoeferle, P., Carminati, M. N., Abashidze, D., Essig, K. Preferential inspection of recent real-world events over future events: evidence from eye tracking during spoken sentence comprehension. Frontiers in Psychology. 2, 376 (2011).
- Abashidze, D., Knoeferle, P., Carminati, M. N. How robust is the recent-event preference?. Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , 92-97 (2014).
- Rodríguez, A., Burigo, M., Knoeferle, P. Visual constraints modulate stereotypical predictability of agents during situated language comprehension. Proceedings of the 38th Annual Meeting of the Cognitive Science Society. , 580-585 (2016).
- Zhang, L., Knoeferle, P. Visual Context Effects on Thematic Role Assignment in Children versus Adults: Evidence from Eye Tracking in German. Proceedings of the Annual Meeting of the Cognitive Science Society. , 2593-2598 (2012).
- Zhang, L., Kornbluth, L., Knoeferle, P. The role of recent versus future events in children’s comprehension of referentially ambiguous sentences: Evidence from eye tracking. Proceedings of the Annual Meeting of the Cognitive Science Society. , 1227-1232 (2012).
- Münster, K., Knoeferle, P. Situated language processing across the lifespan: A review. International Journal of English Linguistics. 7 (1), 1-13 (2017).
- Özge, D., et al. Predictive Use of German Case Markers in German Children. Proceedings of the 40th Annual Boston University Conference on Language Development. , 291-303 (2016).
- Weber, A., Grice, M., Crocker, M. W. The role of prosody in the interpretation of structural ambiguities: A study of anticipatory eye movements. Cognition. 99 (2), B63-B72 (2006).
- Guerra, E., Knoeferle, P. Effects of object distance on incremental semantic interpretation: similarity is closeness. Cognition. 133 (3), 535-552 (2014).
- Kreysa, H., Knoeferle, P., Nunnemann, E. Effects of speaker gaze versus depicted actions on visual attention during sentence comprehension. Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , 2513-2518 (2014).
- Abashidze, D., Knoeferle, P., Carminati, M. N. Eye-tracking situated language comprehension: Immediate actor gaze versus recent action events. Proceedings of the 37th Annual Meeting of the Cognitive Science Society. , 31-36 (2015).
- Crovitz, H. F., Zener, K. A Group-Test for Assessing Hand- and Eye-Dominance. The American Journal of Psychology. 75 (2), 271-276 (1962).
- Ehrenstein, W. H., Arnold-Schulz-Gahmen, B. E., Jaschinski, W. Eye preference within the context of binocular functions. Graefe’s Arch Clin Exp Ophthalmol. 243, 926 (2005).
- Münster, K., Carminati, M. N., Knoeferle, P. The Effect of Facial Emotion and Action Depiction on Situated Language Processing. Proceedings of the 37th Annual Meeting of the Cognitive Science Society. , 1673-1678 (2015).
- Lakoff, G., Johnson, M. . Metaphors We Live By. , (1980).
- Guerra, E., Knoeferle, P. Visually perceived spatial distance affects the interpretation of linguistically mediated social meaning during online language comprehension: An eye tracking reading study. Journal of Memory and Language. 92, 43-56 (2017).
- Kreysa, H., Knoeferle, P. Effects of speaker gaze on spoken language comprehension: task matters. Proceedings of the Annual Meeting of the Cognitive Science Society. , 1557-1562 (2012).
- Knoeferle, P., Roel, W. Language comprehension in rich non-linguistic contexts: Combining eye tracking and event-related brain potentials. Towards a cognitive neuroscience of natural language use. , 77-100 (2015).
- Raney, G. E., Campell, S. J., Bovee, J. C. Using eye movements to evaluate cognitive processes involved in text comprehension. Journal of Visualized Experiments. (83), e50780 (2014).
- Knoeferle, P., Habets, B., Crocker, M. W., Muente, T. F. Visual scenes trigger immediate syntactic reanalysis: evidence from ERPs during situated spoken comprehension. Cerebral Cortex. 18 (4), 789-795 (2008).
- Dimigen, O., Sommer, W., Hohlfeld, A., Jacobs, A. M., Kliegl, R. Coregistration of eye movements and EEG in natural reading: Analyses and review. Journal of Experimental Psychology: General. 140 (4), 552-572 (2011).
- Knoeferle, P., Kreysa, H. Can speaker gaze modulate syntactic structuring and thematic role assignment during spoken sentence comprehension?. Frontiers in Psychology. 3, 538 (2012).
- Chambers, C. G., Cooke, H. Lexical competition during second-language listening: Sentence context, but not proficiency, constrains interference from the native lexicon. Journal of Experimental Psychology: Learning, Memory, and Cognition. 35 (4), 1029 (2009).
- Duyck, W., Van Assche, E., Drieghe, D., Hartsuiker, R. J. Visual word recognition by bilinguals in a sentence context: Evidence for nonselective lexical access. Journal of Experimental Psychology: Learning, Memory, and Cognition. 33 (4), 663 (2007).
- Weber, A., Cutler, A. Lexical competition in non-native spoken-word recognition. Journal of Memory and Language. 50 (1), 1-25 (2004).
- Verhallen, M. J., Bus, A. Young second language learners’ visual attention to illustrations in storybooks. Journal of Early Childhood Literacy. 11 (4), 480-500 (2011).
- Robinson, P., Mackey, A., Gass, S. M., Schmidt, R. Attention and awareness in second language acquisition. The Routledge Handbook of Second Language Acquisition. , 247-267 (2012).
- Tomlin, R. S., Villa, V. Attention in cognitive science and second language acquisition. Studies in Second Language Acquisition. 16 (2), 183-203 (1994).
