Aqui, apresentamos um protocolo que manipula a visibilidade do interlocutor para examinar seu impacto na produção de gestos na comunicação interpessoal. Este protocolo é flexível para tarefas implementadas, gestos examinados e modalidade de comunicação. É ideal para populações com desafios de comunicação, como alunos de segunda língua e indivíduos com transtorno do espectro do autismo.
Entender por que os falantes modificam seus gestos de mão ao falar com interlocutores fornece informações valiosas sobre como esses gestos contribuem para a comunicação interpessoal em contextos presenciais e virtuais. Os protocolos atuais manipulam a visibilidade dos falantes e seus interlocutores em conjunto em um contexto face a face para examinar o impacto da visibilidade na produção de gestos quando a comunicação é desafiadora. Nesses protocolos, os falantes concluem tarefas como ensinar palavras de uma segunda língua desconhecida ou recontar os eventos de vinhetas de desenhos animados para um interlocutor que é outro participante ou um cúmplice. Ao realizar essas tarefas, os falantes são visíveis ou não visíveis para seu interlocutor, e o falante é visível ou não visível para o participante. Na tarefa de aprendizagem de palavras, falantes e interlocutores visíveis uns aos outros produzem mais gestos representacionais, que transmitem significado por meio da forma e do movimento da mão, e gestos dêitticos (apontando) do que falantes e interlocutores que não são visíveis um para o outro. No protocolo de reconto narrativo, os adolescentes com transtorno do espectro autista (TEA) produziram mais gestos ao falar com interlocutores visíveis do que com interlocutores não visíveis. Um dos principais pontos fortes do protocolo atual é sua flexibilidade em termos de tarefas, populações e gestos examinados, e o protocolo atual pode ser implementado em videoconferência e também em contextos presenciais. Assim, o protocolo atual tem o potencial de avançar na compreensão da produção de gestos, elucidando seu papel na comunicação interpessoal em populações com desafios de comunicação.
Gestos de co-fala (até então, gestos) – movimentos significativos das mãos produzidos simultaneamente com a fala – contribuem para a comunicação interpessoal, transmitindo informações que complementam o conteúdo verbal1. De acordo com a taxonomia mais utilizada 2,3, os gestos podem ser divididos em três categorias: gestos representacionais, que transmitem referentes por meio de sua forma e movimento (por exemplo, bater as mãos para frente e para trás para transmitir o vôo); gestos de batida, que transmitem ênfase por meio de movimentos pontilhados simples (por exemplo, mover a mão dominante ligeiramente para baixo em conjunto com cada palavra na frase “agora”); e gestos dêiticos, que chamam a atenção para a presença ou ausência de uma entidade por meio do apontamento (por exemplo, balançar o polegar para trás para indicar algo atrás de si mesmo). Os gestos representacionais podem ser divididos em duas categorias adicionais: gestos icônicos, que transmitem referentes concretos (por exemplo, um pássaro) e gestos metafóricos, que transmitem referentes metafóricos (por exemplo, êxtase). Como o gesto e a fala surgem do mesmo conteúdo conceitual, eles estão intimamente relacionados no significado 4,5. Ao servir como um meio visual icônico para a comunicação, os gestos podem ajudar a compensar quando surgem desafios na compreensão da linguagem falada6, seja devido a fatores individuais, como proficiência limitada no idioma falado 7,8 ou fatores ambientais, como dificuldade em ouvir a fala 9,10. Assim, os gestos são essenciais para entender a comunicação interpessoal em contextos presenciais e virtuais, fornecendo informações sobre como falantes e ouvintes transmitem e compreendem informações multimodalmente.
Várias tarefas interativas estruturadas foram desenvolvidas para medir como o gesto afeta a comunicação interpessoal. Essas tarefas incluem entrevistas, nas quais os participantes respondem a perguntas descrevendo suas experiências pessoais11,12; descrição da imagem, na qual uma imagem estática é apresentada aos participantes para descrever13,14; resolução de quebra-cabeças, em que os participantes descrevem como resolver um quebra-cabeça orientando espacialmente os componentescorretamente 15,16; provisão de direção, na qual os participantes são instruídos a dar instruções para um local desconhecido para os ouvintes 17,18,19; e recontagem narrativa, na qual os participantes assistem a um desenho animado retratando uma sequência de eventos e, posteriormente, os recontam 20,21,22. Muitas das tarefas empregadas nos estudos citados acima incorporam conteúdo espacial e ação, que o gesto transmite com particular eficácia 15,23,24,25. Nas tarefas dos estudos citados acima, os participantes normalmente produzem gestos em conjunto com a linguagem, e as informações transmitidas por meio do gesto e sua relação com a linguagem produzida simultaneamente são avaliadas. Alternativamente, os participantes podem ver uma gravação de alguém gesticulando (ou não gesticulando) e produzindo linguagem ao completar uma dessas tarefas, após o que a compreensão dos participantes é avaliada. Todas essas tarefas podem ser realizadas virtualmente e presencialmente, permitindo a coleta de dados de uma ampla gama de participantes e a comparação entre as modalidades.
O impacto dos gestos na comunicação interpessoal foi implementado com uma ampla gama de participantes. De particular interesse têm sido as populações com desafios de comunicação, incluindo crianças pequenas 26,27,28,29,30, usuários de segunda língua (L2) 8,31,32,33, indivíduos com transtorno do espectro autista (TEA)20,21,22,34, indivíduos com transtorno específico alteração da linguagem 35,36,37, indivíduos com afasia12,38, indivíduos com lesão cerebral39 e indivíduos com gagueira40,41. Este trabalho revelou que, embora muitas dessas populações possam utilizar gestos para facilitar a comunicação, algumas, como indivíduos com transtorno do espectro do autismo, podem encontrar dificuldade em alavancar gestos para se comunicar de forma eficaz. Os resultados sugerem que isso pode ser devido à medida em que essas populações levam em consideração o design do público e as pistas ambientais, destacando as implicações práticas dessas explicações para o impacto dos gestos na comunicação.
Uma característica fundamental que fornece informações sobre o impacto dos gestos na comunicação interpessoal é a visibilidade do interlocutor. Uma questão de grande importância no campo da pesquisa do gesto é até que ponto os participantes gesticulam para seu próprio benefício, indicando o descarregamento de operações cognitivas no corpo, versus o benefício de seus interlocutores, indicando o uso do gesto para se comunicar. Essa questão foi investigada examinando o impacto da (não) visibilidade do interlocutor na produção de gestos em contextos face a face por meio do uso de uma partição opaca26,42, bem como em contextos telefônicos13 e contextos virtuais43. De modo geral, os resultados deste trabalho indicam que, embora os falantes gesticulem para seu próprio benefício, eles produzem mais gestos representacionais ao se comunicarem com interlocutores visíveis do que não visíveis, enquanto a produção de gestos de batida é semelhante, independentemente da visibilidade do interlocutor. Assim, eles sugerem que o gesto representacional facilita a comunicação em uma variedade de contextos, sugerindo que os falantes levem em consideração a perspectiva de seus interlocutores e modifiquem sua produção de gestos de acordo. Embora pesquisas anteriores que examinaram o efeito da visibilidade do interlocutor tenham sido fundamentais para fornecer informações sobre as contribuições do gesto para a comunicação interpessoal, elas se concentraram no inglês como primeira língua (L1) em populações com desenvolvimento típico, por isso não está claro se as descobertas podem ser estendidas a populações com desafios de comunicação. Duas dessas populações são os alunos de L2, que podem ter dificuldade para se comunicar por meio da fala no idioma alvo, e crianças com TEA, cuja comunicação verbal e não verbal é anormal. Além disso, poucas pesquisas examinaram o impacto da visibilidade do interlocutor na produção de gestos em contextos virtuais, o que permite que o efeito da visibilidade do interlocutor sobre o participante seja desembaraçado do efeito da visibilidade do participante para o interlocutor, de modo que a replicabilidade dos achados desses contextos não está clara atualmente. Finalmente, algumas pesquisas se concentraram no impacto da visibilidade do interlocutor na produção de tipos específicos de gestos, portanto, não está claro se a produção de outros tipos de gestos é afetada de forma semelhante pela visibilidade do interlocutor.
Os protocolos descritos abaixo manipulam a visibilidade do interlocutor para examinar a produção de gestos em circunstâncias desafiadoras: aprendizagem de palavras em L2 e recontagem de narrativas por indivíduos com TEA. O protocolo de aprendizado de palavras L2 une pesquisas que examinam o impacto da observação de gestos no aprendizado de palavras L2 com pesquisas que examinam a contribuição dos gestos para a comunicação por meio de um paradigma interativo de aprendizado de palavras. Nesse paradigma, os participantes não familiarizados com a língua-alvo aprendem palavras nela e, em seguida, ensinam essas palavras a outros participantes não familiarizados com a língua-alvo, permitindo que o impacto da visibilidade do interlocutor na produção de gestos seja examinado nos estágios iniciais da aquisição de L2 em um contexto conversacional. O paradigma de reconto de desenhos animados emprega uma tarefa de reconto narrativo amplamente utilizada, na qual diferenças na produção de gestos têm sido observadas quando a visibilidade do interlocutor é manipulada com uma nova população: adolescentes com TEA. Essa população é de interesse porque o desenvolvimento da linguagem, incluindo a produção de gestos, é maduro na adolescência, e o TEA acarreta dificuldade na comunicação verbal e não verbal, incluindo gestos, bem como falta de sensibilidade às necessidades comunicativas dos interlocutores. Juntos, esses protocolos fornecem informações sobre até que ponto a produção de gestos depende – e, inversamente, pode compensar – a fala quando a comunicação interpessoal é desafiadora.
Com base em descobertas que demonstram como a visibilidade do ouvinte afeta a produção de gestos por falantes de inglês L1 13,26,42,43, foi levantada a hipótese de que os participantes produziriam mais gestos gerais e gestos mais representacionais ao discutir palavras L2 com um interlocutor visível do que não visível. Com base em achados que demonstram anormalidades na produção de gestos no TEA20,44, foi levantada a hipótese de que adolescentes com TEA produziriam menos gestos gerais, bem como menos gestos representacionais e dêitticos do que adolescentes com desenvolvimento típico (DT). Além disso, com base nos achados que mostram que o TEA acarreta dificuldade em assumir a perspectiva45, foi levantada a hipótese de que a produção de gestos por adolescentes com TEA não diferiria significativamente na presença de interlocutores visíveis e não visíveis. Por fim, foi prevista uma interação entre diagnóstico e visibilidade, de modo que a produção de gestos não diferiria pela visibilidade para adolescentes com TEA, mas sim para adolescentes com DT.
O protocolo atual manipula a visibilidade do falante e do interlocutor um para o outro, fornecendo informações sobre seu impacto na produção de gestos em circunstâncias desafiadoras: aprendizagem de palavras L2 e recontagem de narrativas por adolescentes com TEA. Este protocolo pode ser implementado presencialmente ou virtualmente, permitindo que a visibilidade do participante e do interlocutor seja manipulada em conjunto ou de forma independente. Ele pode acomodar uma ampla varieda…
The authors have nothing to disclose.
O desenvolvimento e a validação do protocolo de aprendizado de palavras L2 foram apoiados por uma bolsa de pós-graduação em ciência e engenharia de defesa nacional (NDSEG) (32 CFR 168a) emitida pelo Escritório de Pesquisa Científica da Força Aérea do Departamento de Defesa dos EUA. O desenvolvimento e a validação do protocolo de recontagem de desenhos animados com adolescentes com TEA foram apoiados pelo Prêmio Ruth S. Kirschstein Institucional National Research Service (T32) do National Institutes of Mental Health. O autor agradece a Rachel Fader, Theo Haugen, Andrew Lynn, Ashlie Caputo e Marco Pilotta pela assistência na coleta e codificação de dados.
Computer | Apple | Z131 | 24" iMac, 8-core CPU & GPU, M3 chip |
Conference USB microphone | Tonor | B07GVGMW59 | |
ELAN | The Language Archive | Software application used to transcribe speech and gesture | |
Video Recorder | Vjianger | B07YBCMXJJ | FHD 2.7K 30 FPS 24 MP 16X digital zoom 3" touch screen video recorder with renote control and tripod |
Weschler Abbreviated Scale of Intelligence | Pearson | 158981561 | Used to verify full scale IQ ≥ 80 in Morett et al. (2016) |