כאן, אנו מציגים פרוטוקול המתמרן את נראות בן שיחו כדי לבחון את השפעתו על ייצור מחוות בתקשורת בין-אישית. פרוטוקול זה גמיש למשימות שבוצעו, למחוות שנבחנו ולאופן התקשורת. הוא אידיאלי לאוכלוסיות עם אתגרי תקשורת, כגון לומדי שפה שנייה ואנשים על הספקטרום האוטיסטי.
ההבנה מדוע דוברים משנים את מחוות הידיים שלהם בדיבור משותף כאשר הם מדברים עם בני שיח מספקת תובנה רבת ערך לגבי האופן שבו מחוות אלה תורמות לתקשורת בין-אישית בהקשרים פנים אל פנים ובהקשרים וירטואליים. הפרוטוקולים הנוכחיים מתמרנים את הנראות של הדוברים ובני שיחם במקביל בהקשר פנים אל פנים כדי לבחון את השפעת הנראות על הפקת מחוות כאשר התקשורת מאתגרת. בפרוטוקולים אלה, הדוברים משלימים משימות כגון הוראת מילים משפה שנייה לא מוכרת או לספר את אירועי הקריקטורות לבן שיח שהוא משתתף אחר או קונפדרציה. בעת ביצוע משימות אלה, הדוברים גלויים או לא גלויים לבן שיחם, והדובר גלוי או לא גלוי למשתתף. במטלת למידת המילים, הדוברים ובני שיחו הגלויים זה לזה מייצרים יותר מחוות ייצוגיות, המעבירות משמעות באמצעות צורת יד ותנועה, ומחוות דיקטיות (הצבעה) מאשר דוברים ובני שיח שאינם גלויים זה לזה. בפרוטוקול הסיפור מחדש של הנרטיב, מתבגרים עם הפרעת הספקטרום האוטיסטי (ASD) הפיקו יותר מחוות כאשר דיברו עם בני שיח גלויים מאשר בני שיח שאינם נראים לעין. חוזקה מרכזית של הפרוטוקול הנוכחי היא גמישותו מבחינת המשימות, האוכלוסיות והמחוות שנבדקו, וניתן ליישם את הפרוטוקול הנוכחי בשיחות ועידה בווידאו כמו גם בהקשרים פנים אל פנים. לפיכך, לפרוטוקול הנוכחי יש פוטנציאל לקדם את ההבנה של ייצור מחוות על ידי הבהרת תפקידה בתקשורת בין-אישית באוכלוסיות עם אתגרי תקשורת.
מחוות דיבור משותף (עד כה, מחוות) – תנועות ידיים משמעותיות המיוצרות במקביל לדיבור – תורמות לתקשורת בין אישית על ידי העברת מידע המשלים תוכן מילולי1. על פי הטקסונומיה הנפוצה ביותר 2,3, ניתן לחלק את המחוות לשלוש קטגוריות: מחוות ייצוגיות, המעבירות רפרנטים באמצעות צורתם ותנועתם (למשל, נפנוף הידיים קדימה ואחורה יחד כדי להעביר טיסה); מחוות פעימה, המעבירות הדגשה באמצעות תנועות ניקוב פשוטות (למשל, הזזת היד הדומיננטית מעט כלפי מטה בשילוב עם כל מילה בביטוי “ברגע זה”); ומחוות דיקטיות, אשר מושכות תשומת לב לנוכחות או היעדר ישות באמצעות הצבעה (למשל, הנפת האגודל לאחור כדי להצביע על משהו מאחורי עצמך). ניתן לחלק את המחוות הייצוגיות לשתי קטגוריות נוספות: מחוות איקוניות, המעבירות רפרנטים קונקרטיים (למשל, ציפור), ומחוות מטפוריות, המעבירות רפרנטים מטאפוריים (למשל, אקסטזי). מכיוון שמחווה ודיבור נובעים מאותו תוכן מושגי, הם קשורים זה לזה במשמעות 4,5. על ידי שימוש כמדיום חזותי איקוני לתקשורת, מחוות יכולות לעזור לפצות כאשר אתגרים בהבנת השפה המדוברת מתעוררים6, בין אם בשל גורמים בודדים כגון מיומנות מוגבלת בשפה המדוברת 7,8 או גורמים סביבתיים כגון קושי בשמיעת דיבור 9,10. לפיכך, מחוות הן חלק בלתי נפרד מהבנת תקשורת בין-אישית בהקשרים פנים אל פנים ווירטואליים, ומספקות תובנה לגבי האופן שבו דוברים ומאזינים מעבירים ומבינים מידע באופן רב-מודאלי.
מספר משימות אינטראקטיביות מובנות פותחו כדי למדוד כיצד מחווה משפיעה על תקשורת בין-אישית. משימות אלה כוללות ראיונות, שבהם המשתתפים מגיבים לשאלות על ידי תיאור חוויותיהם האישיות11,12; תיאור תמונה, שבו תמונה סטטית מוצגת למשתתפים כדי לתאר13,14; פתרון חידות, שבו המשתתפים מתארים כיצד לפתור חידה על ידי כיוון מרחבי נכוןשל רכיבים 15,16; מתן הנחיות, שבו המשתתפים מונחים לתת הנחיות למקום שאינו מוכר למאזינים 17,18,19; וסיפור נרטיבי, שבו המשתתפים צופים בקריקטורה המתארת רצף של אירועים ולאחר מכן מספרים אותם 20,21,22. רבות מהמשימות שהופעלו במחקרים שצוטטו לעיל משלבות תוכן מרחבי ופעולה, אשר מחווה משדרת ביעילות מיוחדת 15,23,24,25. במטלות עבור המחקרים שצוטטו לעיל, המשתתפים בדרך כלל מייצרים מחוות בשילוב עם שפה, ומידע המועבר באמצעות מחווה והקשר שלה לשפה המיוצרת בו זמנית מוערך. לחלופין, המשתתפים יכולים לצפות בהקלטה של מישהו מחווה (או לא מחוות) ומפיק שפה בעת השלמת אחת המשימות הללו, ולאחר מכן מוערכת הבנת המשתתפים. כל המשימות הללו יכולות להתבצע באופן וירטואלי כמו גם פנים אל פנים, מה שמאפשר איסוף נתונים ממגוון רחב של משתתפים והשוואה בין אופנים.
השפעת המחוות על התקשורת הבין-אישית יושמה עם מגוון רחב של משתתפים. מעניינות במיוחד אוכלוסיות עם אתגרי תקשורת, כולל ילדים צעירים 26,27,28,29,30, משתמשי שפה שנייה (L2) 8,31,32,33, אנשים עם הפרעת ספקטרום האוטיזם (ASD)20,21,22,34, אנשים עם ספציפי לקות שפה 35,36,37, אנשים עם אפזיה 12,38, אנשים עם פגיעה מוחית39, ואנשים מגמגמים40,41. עבודה זו גילתה כי בעוד שרבות מאוכלוסיות אלה יכולות להשתמש במחוות כדי להקל על התקשורת, חלקן, כגון אנשים עם הפרעת ספקטרום האוטיזם, עשויות להיתקל בקושי למנף מחוות כדי לתקשר ביעילות. הממצאים מצביעים על כך שייתכן שהדבר נובע מהמידה שבה אוכלוסיות אלה מתחשבות בעיצוב הקהל וברמזים סביבתיים, ומדגישים את ההשלכות המעשיות של הסברים אלה על השפעת המחוות על התקשורת.
תכונה מרכזית המספקת תובנה לגבי ההשפעה של מחוות על תקשורת בין-אישית היא נראות בן שיח. שאלה בעלת חשיבות רבה בתחום חקר המחוות היא המידה שבה המשתתפים מחוות לטובתם, המצביעים על פריקת פעולות קוגניטיביות על הגוף, לעומת התועלת של בני שיחם, המצביעים על השימוש במחווה כדי לתקשר. שאלה זו נחקרה על ידי בחינת ההשפעה של נראות (אי-) בן שיח על ייצור מחוות בהקשרים פנים אל פנים באמצעות שימוש במחיצה אטומה26,42, וכן בהקשרים טלפוניים13 ובהקשרים וירטואליים43. בסך הכל, התוצאות של עבודה זו מצביעות על כך שלמרות שהדוברים מחוות לטובתם, הם מייצרים מחוות ייצוגיות יותר בעת תקשורת עם בני שיח גלויים מאשר בלתי גלויים, ואילו ייצור מחוות פעימה דומה ללא קשר לנראות בן שיחו. לפיכך, הם מציעים כי מחווה ייצוגית מאפשרת תקשורת במגוון הקשרים, ומציעים כי הדוברים לוקחים בחשבון את נקודת המבט של בני שיחם ומשנים את הפקת המחוות שלהם בהתאם. למרות שמחקרים קודמים שבחנו את ההשפעה של נראות בני שיח סייעו לספק תובנה לגבי תרומת המחווה לתקשורת בין-אישית, הם התמקדו באנגלית כשפה ראשונה (L1) באוכלוסיות מתפתחות בדרך כלל, כך שלא ברור אם ניתן להרחיב את הממצאים לאוכלוסיות עם אתגרי תקשורת. שתי אוכלוסיות כאלה הן לומדי L2, שעלולים להתקשות לתקשר באמצעות דיבור בשפת היעד, וילדים עם ASD, שהתקשורת המילולית והלא מילולית שלהם אינה תקינה. יתר על כן, מחקרים מעטים בחנו את השפעת הנראות של בן שיחו על ייצור מחוות בהקשרים וירטואליים, המאפשרים לנתק את השפעת הנראות של בן שיחו על המשתתף מהשפעת הנראות של המשתתף על בן שיחו, כך שיכולת השכפול של ממצאים מהקשרים אלה אינה ברורה כיום. לבסוף, כמה מחקרים התמקדו בהשפעה של נראות בן שיחו על הייצור של סוגים ספציפיים של מחוות, ולכן לא ברור אם הייצור של סוגים אחרים של מחוות מושפע באופן דומה על ידי נראות בן שיחו.
הפרוטוקולים המתוארים להלן מתמרנים את נראות בני שיחו כדי לבחון את ייצור המחוות בנסיבות מאתגרות: למידת מילים L2 וסיפור מחדש נרטיבי על ידי אנשים עם ASD. פרוטוקול למידת מילים L2 מגשר בין מחקר הבוחן את ההשפעה של התבוננות במחוות על למידת מילים L2 לבין מחקר הבוחן את תרומתן של מחוות לתקשורת באמצעות פרדיגמת למידת מילים אינטראקטיבית. בפרדיגמה זו, משתתפים שאינם מכירים את שפת היעד לומדים בה מילים ולאחר מכן מלמדים מילים אלה למשתתפים אחרים שאינם מכירים את שפת היעד, מה שמאפשר לבחון את ההשפעה של נראות בן שיחו על ייצור המחוות בשלבים המוקדמים ביותר של רכישת L2 בהקשר שיחתי. פרדיגמת הסיפור מחדש של הקריקטורה משתמשת במשימת סיפור מחדש נראטיבית נפוצה שבה נצפו הבדלים בייצור המחוות כאשר נראות בן שיחו מתומרנת עם אוכלוסייה חדשה: מתבגרים עם ASD. אוכלוסייה זו מעניינת משום שהתפתחות השפה, כולל הפקת מחוות, בוגרת בגיל ההתבגרות, ואוטיזם כרוך בקושי בתקשורת מילולית ולא מילולית, כולל מחוות, כמו גם חוסר רגישות לצרכים התקשורתיים של בני שיחם. יחד, פרוטוקולים אלה מספקים תובנה לגבי המידה שבה ייצור מחוות תלוי – ולהיפך, יכול לפצות על – דיבור כאשר התקשורת הבין-אישית מאתגרת.
בהתבסס על ממצאים המדגימים כיצד נראות המאזין משפיעה על הפקת המחוות על ידי דוברי אנגלית L1 13,26,42,43, שוער כי המשתתפים יפיקו יותר מחוות כלליות ומחוות ייצוגיות יותר כאשר דנים במילים L2 עם בן שיח גלוי מאשר בן שיח שאינו נראה. בהתבסס על ממצאים המדגימים חריגות בייצור מחוות באוטיזם20,44, שוער כי מתבגרים עם ASD יפיקו פחות מחוות כלליות, כמו גם פחות מחוות ייצוגיות ודיקטיות מאשר מתבגרים מתפתחים בדרך כלל (TD). יתר על כן, בהתבסס על ממצאים המראים כי ASD כרוך בקושי עם לקיחת פרספקטיבה45, הועלתה השערה כי ייצור מחוות על ידי מתבגרים עם ASD לא יהיה שונה באופן משמעותי בנוכחות בני שיח גלויים ולא גלויים. לבסוף, נחזתה אינטראקציה בין אבחון לנראות, כך שייצור המחוות לא יהיה שונה בנראות עבור מתבגרים עם ASD אלא עבור מתבגרים עם TD.
הפרוטוקול הנוכחי מתמרן את הנראות של הדובר ובן שיחו זה לזה, ומספק תובנה לגבי השפעתו על ייצור מחוות בנסיבות מאתגרות: למידת מילים L2 וסיפור מחדש נרטיבי על ידי מתבגרים עם ASD. פרוטוקול זה יכול להיות מיושם באופן אישי או וירטואלי, המאפשר לנראות המשתתף ובן שיחו להיות מניפולציה במק…
The authors have nothing to disclose.
פיתוח ותיקוף של פרוטוקול למידת המילים L2 נתמך על ידי מלגת NDSEG (National Defense Science and Engineering Graduate – NDSEG) (32 CFR 168a) שהונפקה על ידי משרד המחקר המדעי של חיל האוויר של משרד ההגנה האמריקאי. פיתוח ותיקוף של פרוטוקול הסיפור מחדש של קריקטורות עם מתבגרים עם ASD נתמך על ידי פרס שירות המחקר הלאומי המוסדי ע”ש רות ס. קירששטיין (T32) מהמכונים הלאומיים לבריאות הנפש. המחבר מודה לרייצ’ל פאדר, תיאו האוגן, אנדרו לין, אשלי קפוטו ומרקו פילוטה על הסיוע באיסוף נתונים וקידוד.
Computer | Apple | Z131 | 24" iMac, 8-core CPU & GPU, M3 chip |
Conference USB microphone | Tonor | B07GVGMW59 | |
ELAN | The Language Archive | Software application used to transcribe speech and gesture | |
Video Recorder | Vjianger | B07YBCMXJJ | FHD 2.7K 30 FPS 24 MP 16X digital zoom 3" touch screen video recorder with renote control and tripod |
Weschler Abbreviated Scale of Intelligence | Pearson | 158981561 | Used to verify full scale IQ ≥ 80 in Morett et al. (2016) |