제시된 프로토콜의 목적은 부바/키키-이펙트에서 시각적 이미지의 역할을 조사하는 것이며, 부바/키키 모양-오디오 규칙성에 대한 교육이 부바/키키 효과및 개별 부바 및 키키 모양의 인식에 영향을 미치는지 여부, 그리고 마지막으로 어떤 정신 이미지 이러한 규칙 생산.
이 문서에서는 부바 /키키 효과에서 시각적 이미지의 역할을 조사하기위한 프로토콜을 제시하며, 부바 / 키키 모양 오디오 규칙성을 알아 차리는 교육이 부바 / 키키 효과 및 개별 부바 및 키키 모양의 인식에 영향을 미치는지 여부, 그리고 마지막으로 어떤 정신 이미지 이러한 규칙 생산. 부바 / 키키 모양 오디오 규칙성을 생성하기 위해, 모양의 두 가지 유형 (채워진; 개요) 오디오의 두 가지 유형이 있었다 (단어; 비 단어 소리). 세 그룹의 개인은 눈가리개, 눈가리개, 시력의 세 가지 실험에 참여했습니다. 실험은 참가자 들 사이 휴식 없이 고정된 순서로 실시 되었다. 실험 1 (세 가지 반복 그룹 내에서 측정 사전 테스트 후 디자인) 참가자는 청각 부바 / 키키와 관련된 모양을 선택하도록 요청받았다; 실험 2 (주제 내 디자인), 하나의 모양과 일부 오디오 (때로는 부바’ 또는 ‘kiki;’로, 실험 3 (사후 테스트 전용 디자인)로 이름을 지정하여 청각 부바 / 키키와 관련된 모양을 그립니다. 결과는 눈가리개 그룹이 새로운 문제를 해결하기 위해 시각적 이미지에 그릴 것을 제안하지만, 장기적으로; 부바 / 키키 모양 오디오 규칙성에 대한 교육은 부바 / 키키 효과 및 개별 부바와 키키 모양의 인식에 영향을 미치지만 각 실험 그룹에서 는 다르게; 그리고 모든 실험 그룹은 부바 (곡선)와 키키 (각도)의 가장 독특한 모양 기능의 정신 이미지를 만들 수 있습니다. 실제로 시각적 이미지의 효과는 작업 전반에 걸쳐 강력하지만 장기적으로는 그렇지 않습니다. 모양 오디오 규칙학습의 효과는 견고한 장기이지만, 작업 전반에 걸쳐 그렇지 않습니다. 제시된 프로토콜은 시각적 이미지의 효과를 조사하고 모양 오디오 규칙체가 발생하는 시기와 견고한 정도를 조사하는 데 적합합니다. 특정 개인 및 개인 그룹에서. 이 프로토콜은 교육 및 테스트 중에 시각적 이미지와 감각 정보를 모두 제어한다는 점에서 독특합니다.
전 세계 인구의 95%가 청각-비주얼 부바/키키 효과를 보여주며, 시각적으로 둥근 모양과 ‘bouba;’, 그리고 ‘kiki;’라는 단어와 시각적으로 각진 모양을 연결하며 경험이 없는 경우에도 이를 수행합니다. 모양 또는 단어1과함께 . 부바/키키 효과는 언어 학습에 앞서 있습니다. 그것은 언어1,2,3,4,5, 부바와 키키 (참조. 시각적 각도를 통해 시각적 곡선에 대한 사람들의 선호6,7 , 8개 , 9)모음과 자음의 조합에 따라 달라집니다 (예를 들어, ‘비비’와 ‘쿠쿠’로 발생하지 않습니다.) 1개 , 5개 , 10개 , 11세 , 12. 이 모양 단어 연관은 다른 모양과 단어 쌍으로도 발생하며, 주로 부바와 같이 구부러지고 주로 각도가 있는 한 키키11,13으로발생합니다. 그리고 모음과 자음이 ‘부바’와 ‘키키’와 같은 조합을 가지고 있습니다: 예를 들어 ‘발루마’와 ‘테이크’, ‘말루마’와 ‘테이크’, ‘울루모’와 ‘테이크’, ‘마부마’와 ‘투-키티’1,3, 3 4,10,11,12,14. 실제로 사람들은 둥근 시각적 모양을 연속자음(예: /l/ 및 /m/)을 포함하는 음성 단어와 뒤의 모음(예: /에서 :/// //)을 연결하고, 시각적 각도 모양과 파열자음이 포함된 음성 단어(예: //)를 연결합니다. k/ 및 /t/) 및 닫기 전면 모음(예: (예: (θ/및 /I/)11,12,15,16. 모음보다 자음의 영향을 더 많이 받는데, 특히 무성한 사람(예: /k/및 /t/)11,12,15,16. 실제로, 그것은 글로벌 모양의 특징 보인다 – 그들의 곡선과 각도17 – 그리고 음성 단어의 소리 – 그들의 멜로디17 – 글로벌 모양과 단어 자체반대로, 가장 중요한.
한 연구는 시각적 부바 / 키키 모양 대신 촉각 부바와 키키와 부바 / 키키 효과를 조사하고 시각 장애가있는 참가자가 훨씬 덜 강력한 부바 / 키키 효과 (~64 %)를 보였다는 것을 발견했습니다. 보다 전시(~90%)18. 이 연구는 시각 장애인과 부분적으로 시력을 가진 참가자들 사이에서 훨씬 덜 강력한 부바 / 키키 효과가 시각적 이미지의 부족에 기인했다고 주장 : 완전히 시력 참가자는 그렇지 않은 자신의 환경에서 규칙성을 발견했다 시력이 손상될 때 쉽게 접근할 수 있습니다18. 그러나 이 연구에서 는 부바/키키 효과를 얻기 위해 시각적 이미지가 필요한지 여부는 명확하지 않습니다: 시각 장애가 있는 42명의 참가자 중 6명만이 선천적으로 완전히 눈이멀었으며,따라서 시각적 이미지가 전혀 없었습니다. 또한, 다른 참가자, 그들 중 누구도 눈을 가리고, 부바 / 키키 단어를 발표 할 때 실험자의 입술 움직임을 관찰 했을 수 있습니다 – ‘kiki’를 발표 할 때 ‘bouba’와 각 입술 움직임을 발표 할 때 둥근 입술 움직임1 , 18 – 시각적 이미지에 그리는 대신 촉각 – 시각적 청각 부바 / 키키 효과를 보여주는. 또한, 촉각 청각 규칙의 어떤 효과 조사 하지 않았다, 예를 들어, 재판 에 부바/kiki 효과 비교 하 여 재판 1 및 재판 4 모든 4 재판에 걸쳐 효과 계산 하는 대신. 또한, 촉각 부바와 키키는 재판에 걸쳐 다소 달랐다 : 시험 에서 하나와 두 그들은 3D 및 2D 모양이었다 (곡선 v 각도); 시험 에서 3 과 4, 모양 (원)과 질감 (부드러운 v 거친; 부드러운 v 뾰족한)18에서 이질적입니다. 관련 정맥에서, 한 연구는 눈을 가리고 (완전히 시력) 개인에 운동 – 청각 부바 / kiki 효과를 조사하고, 부바와 키키의 궤적을 그리도록 프로그램 로봇 스타일러스를 들고 2 분 훈련 기간 후 것을 발견했다 82%는 부바/키키 효과19를보였다. 이 연구에서 명확하지 않다, 그러나, 부바 / 키키 효과는 훈련 기간 때문에 발생 여부 : 연구는 사전 테스트를 포함하지 않았다, 도 대조군.
이를 위해, 우리는 부바 / 키키 효과에서 시각적 이미지의 역할을 조사, 촉각 / 시각적 청각 부바와 키키 규칙성에 대한 교육이 부바 / 키키 효과에 영향을 미치는 여부와 개별 촉각 / 시각적 부바의 인식과 kiki 모양, 그리고 마지막으로 어떤 정신 이미지 이러한 모양 오디오 규칙 생산17. 부바 / 키키 모양 오디오 규칙체를 생성하기 위해 – 단순히, 예를 들어, 키키 모양 / 키키 단어 특수성1 – 이 연구는 촉각 / 시각적 부바 / 키키 모양의 두 가지 유형을 포함 (작성; 개요) 및 청각 부바 / 키키의 두 가지 유형 [오디오 ( 오디오 ) 단어; 비 단어 소리)]17. 3개의 개별 적인 단은 3개의 실험에서 참가했습니다: 블라인드 (N = 12), 눈가리개 (N = 12), 및 비전 (N = 12). 실험은 참가자에 걸쳐 고정 된 순서로 실시하고 그들 사이에 휴식없이, 참가자의 양과 부바와 키키와 경험의 유형을 제어 할 수 있습니다. 실험 1 (세 가지 반복 그룹 내에서 측정 사전 테스트 후 디자인) 참가자는 청각 부바 / 키키와 관련된 촉각 / 시각적 모양을 선택하도록 요청받았다; 실험 2 (주제 내 디자인) 하나의 촉각 / 시각적 모양과 일부 오디오 (때로는 부바’또는 ‘kiki;’로 일부 오디오를 이름 지정하고 실험 3에서, (사후 테스트 전용 디자인) 그들은과 관련된 촉각 / 시각적 모양을 그릴 수 청각 부바 / 키키17. 전반적으로, 이 연구는 시각적 이미지의 효과는 작업 전반에 걸쳐 강력하지만, 각 작업 내에서 장기적이지 는 않지만, 모양 오디오 규칙성을 학습하는 효과는 각 작업 내에서 견고한 장기이지만 작업17에서는그렇지 않다는 것을 시사했습니다. 이 문서는 이 연구17의프로토콜을 제시합니다. 제시된 프로토콜은 시각적 이미지의 효과를 조사하고 모양 오디오 규칙체가 발생하는 시기와 견고한 정도를 조사하는 데 적합합니다. 특정 개인 및 개인 그룹에서. 이 프로토콜은 교육 및 테스트 중에 시각적 이미지와 감각 정보를 모두 제어한다는 점에서 독특합니다.
제시된 프로토콜은 시각적 이미지의 효과를 조사하고 모양 오디오 규칙체가 발생하는 시기와 견고한 정도를 조사하는 데 적합합니다. 특정 개인 및 개인 그룹에서.
이 프로토콜은 정확성뿐만 아니라 탐사 시간을 테스트하는 데 적합 할 것입니다 : 실험자가 참가자의 주먹에서 왼손을 제거 할 때부터 (눈가리개 및 눈가리개 그룹) / 판지 판 또는 폼 보드 ( 참가자가 ‘예’라고 말하는 경우) 통계 분석에서 실험 그룹당 실험당 가장 긴 탐사 시간은 4개로 나뉘며 각 실험 군의 ‘빠른’, ‘보통’, ‘느린’ 참가자의 수는 이 탐색 시간의 ≤25%를 사용하여 ‘빠름’으로 계산됩니다. 26-75%를 사용하고 ≥75%를 사용하여 ‘느림’을 사용했습니다. 시험 전반에 걸쳐, 참가자는 실험2에서와 같이 계산됩니다: 즉, 모든 시험의 ≥66.6%에서 ‘빠른’으로 계산되는 경우, 모든 시험의 ≥66.6%에서 ‘보통’으로 계산되는 경우, 그리고 등등입니다. (‘결정적이지 않은’의 경우, 즉 참가자는 ‘빠름’, ‘보통’ 또는 ‘느리다’, 실험 3참조로 계산할 수 없습니다.) 표본 크기 및/또는 정답 및 오답 수에 따라 정답과 오답에 대한 탐색 시간을 별도로 테스트할 수 있습니다. 테스트 정확성, 탐색 시간 또는 둘 다에 관계없이 따라야 할 중요한 프로토콜 단계가 있습니다: 세 가지 실험은 고정된 순서로 수행되어야 하며, 모든 참가자에게 는 시험이 고정된 순서로 제시되어야 합니다. 참가자들은 세 가지 실험에서 모두 부바와 키키가 포함된 시험 물질이 있음을 인식해서는 안 된다. 또한, MP3 플레이어의 청각 정보는 한 번만 재생되어야하며 참가자에게 구두로 다시 반복되지 않아야합니다 (세 가지 실험 모두). 실험 1 및 실험 2에서는 촉각/시각적 부바와 키키가 동일한 위치와 방향으로 표시되어야 합니다. 비전 그룹(세 가지 실험 모두)의 경우 판지 플레이트/폼 보드 뒤에 테스트 재료를 설정해야 합니다. 마지막으로, 눈가리개 그룹에서 참가자들은 실험 3이 완료될 때까지 눈가리개를 제거해서는 안 됩니다. 이러한 단계는 촉각/시각 및 청각 부바 및 키키에 대한 정보의 양과 유형이 모든 실험 그룹에서 제어되도록 하는 것입니다. 또한 실험 2에서는 참가자가 촉각/시각적 부바/키키 탐색을 시작하자마자 청각 부바/키키를 제시하는 것이 중요합니다. 이렇게 하면 멀티모달(합동 또는 부조리) 정보가 표시됩니다. 또한 이 프로토콜은 다른 개인 그룹을 테스트하는 데도 적합합니다. 이들을 통합하기 위해, 이러한 참가자 그룹은 별도의 실험 그룹으로 추가될 수 있다: 예를 들어, 색상 지각 그룹 및 형상 지각 그룹; 22 갑작스런 시력 상실 군 및 진보적인 시력 상실 군; 20개 , 21 및/또는 청각 장애 및/또는 자폐 스펙트럼 장애를 가진 개인의 특정 그룹13 추가 될 수 있습니다.
이 프로토콜을 사용하면 그룹 내 측정 및/또는 작업을 반복하는 각 측정값을 포함하여 각 인스턴트 및 장기 효과에 대한 특정 그룹에 대한 그룹 규범(정확도 및/또는 탐색 시간)을 설정할 수 있습니다. 그런 다음 자신의 그룹 규범에 대한 개인을 테스트하려면 : 어떤 특정 개인 또는 전체 그룹이 모양 오디오 규칙성을 알아 차리에 추가 교육이 필요한지 여부. 각 인스턴트 및 장기 효과에 대한 그룹 규범( 그룹 내 측정 값 반복 및/또는 작업 포함)을 통해 모양 오디오 규칙성을 알아내기 위해 어떤 종류의 교육이 필요한지 결정할 수 있습니다. 비주얼 청각 부바 / 키키 효과 (실험 1) 및 / 또는 합동과 부조리 한 촉각 / 시각적 모양과 오디오 (실험 2)와 더 많은 시험. 실제로, 각 과제에서 시험 횟수와 반복된 그룹 내 측정 횟수를 모두 증가시킬 수 있을 뿐만 아니라 그 사이의 시간을 변경하여 보다 개별화된 교육 및 테스트를 허용할 수 있습니다.
그러나 이 프로토콜은 어떤 유형의 재료(예: 부바 또는 키키, 채워지거나 윤곽이 있는 촉각/시각적 모양, 및/또는 청각 사운드 또는 단어)를 테스트하는 것이 형상 오디오 규칙의 학습을 가장 잘 보장하는지 수정해야 합니다. 이 프로토콜을 수정할 수 있는 방법은 다양한 자료를 블록으로 표시하는 것(예: 채워진 촉각/시각적 모양 및/또는 윤곽이 있는 촉각/시각적 모양 및 청각 단어(실험 1)을 포함할 수 있습니다. 이러한 블록은 하나의 실험 그룹의 모든 참가자에게 무작위로 제시될 수 있습니다. 또는 대안적으로, 각각의 4개의 블록중 하나를 분리하여 실험군(실험 1)한다. 또한 이 프로토콜은 시각적 이미지의 견고성을 더욱 테스트하거나 작업 내에서 및 전체에서 학습된 셰이프 오디오 규칙성을 테스트하는 경우에도 수정해야 합니다. 수정은 훈련에 포함 된 것보다 다른 촉각 / 시각적 모양 및 / 또는 오디오와 그룹 내에서 반복 측정을 추가 포함 할 수있다; 예를 들어, 촉각/비주얼 부바와 키키 모양과 청각 단어 (실험 1)1,3,4,10, ‘maa-boo-maa’와 ‘tuh-kee-tee’에 대한 청각 소리와 함께, 11세 , 12세 , 13세 , 14세 , 15세 , 16. 또 다른 옵션은 실험 110,11,12에서 촉각 / 시각적 부바와 키키 모양과 함께 주로 곡선 / 각도가 아닌 세 번째 촉각 / 시각적 모양을 제시하는 것을 포함 할 수 있습니다. ,13,14,15,16. 청각 말도 안되는 단어와 소리는 세 번째 모양 단어 쌍14,15,16 및 세 번째 모양 사운드 쌍(실험 1)을 생성하기 위해이 촉각 / 시각적 모양에 대해 생성 할 수 있습니다. 그런 다음 모양 사운드 쌍을 실험 2에 캐치 트라이얼로 포함시킬 수 있습니다. 또는 정기적 인 합동 재판과 그에 상응하는 부조리 한 재판으로 대체할 수 있습니다. 마지막으로 실험 2및 실험 1의 사운드 및/또는 실험 1의 말도 안되는 단어를 실험 3에 표시할 수 있습니다. 세 번째 옵션은 실험 2와 실험 3을 전혀 수행하지 않고 실험 1의 반복된 그룹 내 측정값에 작업을 임의순서로 포함하는 것입니다.
제시된 프로토콜은 교육 및 테스트 중에 시각적 이미지와 감각 정보를 모두 제어한다는 점에서 독특합니다. 그것은 유연합니다 : 크고 작은 샘플 및 특정 개인은 그들 자신에 대해 테스트 할 수 있습니다 (그룹 내 테스트 참조) 및 / 또는 개인의 다른 그룹 (그룹 간 테스트 참조). 정확도와 탐색 시간을 모두 테스트하고, 각 실험에서 시험 횟수와 반복된 그룹 내 측정값을 변경하고, 시험 및/또는 실험 순서를 변경하거나 축소할 수 있습니다.
The authors have nothing to disclose.
Funders:
이 작품은 마리 Sklodowska-퀴리 행동 (보조금 계약 번호 657440)과 맹인과 부분적으로 시력의 노르웨이 협회에서 유럽 연합 (EU)의 호라이즌 2020 연구 및 혁신 프로그램에 의해 투자되었다.
필름 메이크업:
메이크업 아티스트 레이철 패리.
Bouba/kiki filled | 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height | ||
Bouba/kiki outlined | 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height | ||
Bouba/kiki sound (sine wave) | |||
Bouba/kiki word (human voice) | |||
Carton plate/foam board for covering bouba/kiki (white) | Ryman | 230461860 | 297 mm horizontal x 210 vertical 0 mm vertical |
Copy paper [white (80 g/m2 )] | Ryman | 250030000 | 210 mm horizontal x 148 mm vertical |
Foam board for bouba/kiki picture cards [white (5 mm thick)] | Ryman | 230461860 | 50 mm horizontal x 50 mm vertical |
MP3-player (smartphone with the VLC app for iOS installed) | Carphone Warehouse | ||
Plastic embossing film | RNIB Shop | ZM04 | 210 mm horizontal x 148 mm vertical |
Rollerball pen [black (1.0 mm tip)] | Ryman | 827134001 | |
Rubber mat | RNIB Shop | LC177 | 230 mm horizontal x 150 mm vertical |
Saddleback style | RNIB Shop | B511 | |
Swell paper | Zychem Ltd | Zytex2 paper | 50 mm horizontal x 50 mm vertical |