Ziel des vorgestellten Protokolls ist es, die Rolle der visuellen Bildsprache im Bouba/Kiki-Effekt zu untersuchen, ob das Training zur Kenntnis der Bouba/Kiki-Form-Audio-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung einzelner Bouba- und Kiki-Formen beeinflusst, und schließlich, welche mentalen Bilder diese Regelmäßigkeiten produzieren.
Dieser Artikel stellt ein Protokoll zur Untersuchung der Rolle visueller Bilder im Bouba/Kiki-Effekt vor, ob das Training in der Erfassung der Bouba/Kiki-Form-Audio-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung einzelner Bouba- und Kiki-Formen beeinflusst, und schließlich, welche mentalen Bilder diese Regelmäßigkeiten produzieren. Um Bouba/Kiki-Form-Audio-Regelmäßigkeiten zu erzeugen, gab es zwei Arten von Formen (gefüllt; umrissen) und zwei Arten von Audio (Wort; Nicht-Wort-Sound). Drei Gruppen von Individuen nahmen an drei Experimenten teil: Blind, Augenbinde und Vision. Die Experimente wurden in fester Reihenfolge über die Teilnehmer hinweg durchgeführt, ohne Pause zwischen ihnen. In Experiment 1 (Vortest-Nachtest-Design mit drei wiederholten Gruppenmaßen) wurden die Teilnehmer gebeten, die Form auszuwählen, die sie mit dem auditiven Bouba/Kiki assoziierten; in Experiment 2 (innerhalb des Subjektdesigns), um eine Form und einige Audiodaten (manchmal übereinstimmend; manchmal unpassend) als “bouba” oder “kiki;” zu benennen, und in Experiment 3 (nur Nachversuchsdesign), um die Form zu zeichnen, die sie mit dem auditiven Bouba/Kiki assoziierten. Die Ergebnisse deuten darauf hin, dass die Augenbinde-Gruppe auf visuelle Bilder zurückgreifen, um neue Probleme zu lösen, aber nicht langfristig; dass das Training zur Kenntnis von Bouba/Kiki-Form-Audio-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung einzelner Bouba- und Kiki-Formen beeinflusst, jedoch in jeder experimentellen Gruppe unterschiedlich; und dass alle experimentellen Gruppen mentale Bilder des charakteristischsten Formmerkmals von Bouba (Kurve) und Kiki (Winkel) erzeugen. Tatsächlich ist die Wirkung visueller Bilder aufgabenübergreifend robust, aber nicht langfristig; die Wirkung des Lernens von Form-Audio-Regelmäßigkeiten ist langfristig robust, aber nicht aufgabenübergreifend. Das vorgestellte Protokoll eignet sich, um die Auswirkungen visueller Bilder und Lernform-Audio-Regelmäßigkeiten zu untersuchen, wann sie auftreten und wie robust sie sind; in bestimmten Personen und Gruppen von Einzelpersonen. Dieses Protokoll ist insofern einzigartig, als es sowohl die visuellen Bilder als auch die sensorischen Informationen während des Trainings und Testens unter Kontrolle hält.
95% der Weltbevölkerung zeigt einen auditiv-visuellen Bouba/Kiki-Effekt, der die visuell abgerundete Form mit dem gesprochenen Wort “bouba;” und der visuell eckigen Form mit dem gesprochenen Wort “kiki” assoziiert, und sie tun dies, auch wenn sie keine Erfahrung hatten. entweder mit der Form oder dem Wort1. Der Bouba/Kiki-Effekt geht dem Sprachenlernen voraus; es tritt in den Sprachen1,2,3,4,5, mit Bouba und Kiki (vgl. die Vorliebe der Menschen für visuelle Kurven gegenüber visuellen Winkeln6,7 , 8 , 9), und es hängt von der Kombination von Vokalen und Konsonanten ab (z. B. tritt es nicht mit ‘bibi’ und ‘kuku’ auf.) 1 , 5 , 10 , 11 , 12. Diese Form-Wort-Assoziation tritt auch mit anderen Form- und Wortpaaren auf, solange sie hauptsächlich gekrümmt sind, als Bouba, und hauptsächlich eckig, als kiki11,13; und/oder sie haben die gleiche Kombination von Vokalen und Konsonanten wie ‘bouba’ und ‘kiki’, z. B.: ‘Baluma’ und ‘takete’, ‘maluma’ und ‘takete’, ‘uloomo’ und ‘takete’, ‘maa-boo-maa’ und ‘tuh-kee-tee’1,3, 4,10,11,12,14. Tatsächlich assoziieren die Menschen die abgerundeten visuellen Formen mit den gesprochenen Wörtern, die fortwährende Konsonanten (z. B. /l/ und /m/) und offene Backvokale (z. B. /’:/, und /’:/) enthalten, und die visuellen Winkelformen mit den gesprochenen Wörtern, die plosive Konsonanten (z. B. / k/ und /t/) und schließen Sie die vorderen Vokale (z. B. (//// und /I/)11,12,15,16. Sie werden mehr von den Konsonanten als von den Vokalen beeinflusst, insbesondere von den stimmlosen (z.B. /k/ und /t/)11,12,15,16. Tatsächlich scheinen die Merkmale der globalen Formen – ihre Kurven und Winkel17 – und der Klang der gesprochenen Worte – ihre Melodie17 – die wichtigsten zu sein, im Gegensatz zu den globalen Formen und Wörtern selbst.
Eine Studie hat den Bouba/Kiki-Effekt mit taktilen Bouba und Kiki anstelle der visuellen Bouba/Kiki-Formen untersucht und festgestellt, dass Sehbehinderte Teilnehmer einen deutlich weniger robusten Bouba/Kiki-Effekt zeigten (ca. 64%) als die vollständig gesichteten (90 %)18. Diese Studie argumentierte, dass der deutlich weniger robuste Bouba/Kiki-Effekt unter den blinden und sehbehinderten Teilnehmern auf einen Mangel an visuellen Bildern zurückgeht: Die voll gesichteten Teilnehmer hatten Regelmäßigkeiten in ihrer Umgebung bemerkt, die nicht leicht zugänglich, wenn das Sehvermögen beeinträchtigt ist18. Ob für den Bouba/Kiki-Effekt eine visuelle Bildsprache notwendig ist, ist aus dieser Studie jedoch nicht ersichtlich: Nur sechs der 42 Teilnehmer mit Sehbehinderung waren angeboren völlig blind18, hatten also überhaupt keine visuellen Bilder. Darüber hinaus haben die anderen Teilnehmer, von denen keiner mit verbundenen Augen ist, möglicherweise die Lippenbewegungen des Experimentators beobachtet, wenn sie das Bouba/Kiki-Wort ankündigten – abgerundete Lippenbewegungen bei der Ankündigung von “Bouba” und eckigen Lippenbewegungen bei der Ankündigung von “kiki”1 , 18 – zeigt einen taktil-visuell-auditorischen Bouba/Kiki-Effekt, anstatt auf visuelle Bilder zu zeichnen. Darüber hinaus wurde keine Wirkung des Bemerkens taktil-auditorischer Regelmäßigkeiten untersucht, z. B. durch einen Vergleich des Bouba/Kiki-Effekts auf Versuch eins und Versuch vier, anstatt den Effekt in allen vier Studien zu berechnen. Darüber hinaus waren die taktilen Bouba und Kiki in den Einzelnen versuchen ziemlich unterschiedlich: In versuchen eins und zwei waren sie 3D- und 2D-Formen (gekrümmt v eckig); in den Versuchen drei und vier, identisch in der Form (Kreis) und unterschiedlich in der Textur (glatt v rau; glatt v stachelig)18. In einer verwandten Ader hat eine Studie einen kinesthetisch-auditorischen Bouba/Kiki-Effekt bei verbundenen (voll gesichteten) Individuen untersucht und festgestellt, dass nach einer zweiminütigen Trainingszeit des Haltens eines Roboterstifts, der programmiert ist, um Flugbahnen der Bouba und Kiki zu zeichnen, zeigten 82% den Bouba/Kiki-Effekt19. Aus dieser Studie geht jedoch nicht hervor, ob der Bouba/Kiki-Effekt aufgrund der Ausbildungszeit aufgetreten ist: Die Studie enthielt weder einen Vortest noch eine Kontrollgruppe.
Zu diesem Zweck haben wir die Rolle der visuellen Bildsprache im Bouba/Kiki-Effekt untersucht, ob das Training zur Erfassung taktiler/visuell-auditorischer Bouba- und Kiki-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung individueller taktiler/visueller Bouba und kiki Formen, und schließlich, welche mentalen Bilder diese Form-Audio-Regelmäßigkeiten produziert17. Um Bouba/Kiki-Form-Audio-Regelmäßigkeiten zu erzeugen – nicht nur kiki-shape/kiki-word-Besonderheiten1 – umfasste diese Studie zwei Arten von taktilen/visuellen Bouba/Kiki-Formen (gefüllt; umrissen) und zwei Arten von auditiven Bouba/Kiki [Audio ( Wort; Nicht-Wort-Sound)]17. Drei Gruppen von Individuen nahmen an drei Experimenten teil: Blind (N = 12), Augenbinde (N = 12) und Vision (N = 12). Die Experimente wurden in fester Reihenfolge über die Teilnehmer und ohne Pause zwischen ihnen durchgeführt, um die Menge und Art der Erfahrung der Teilnehmer mit Bouba und Kiki unter Kontrolle zu halten. In Experiment 1 (Vortest-Nachtest-Design mit drei wiederholten Gruppenmaßen) wurden die Teilnehmer gebeten, die taktile/visuelle Form auszuwählen, die sie mit dem auditiven Bouba/Kiki assoziierten; in Experiment 2 (innerhalb des Subjektdesigns), um eine taktile/visuelle Form und einige Audioformen (manchmal übereinstimmend; manchmal unpassend) als “bouba” oder “kiki; und in Experiment 3, (nur nach dem Test design) zu bezeichnen, um die taktile/visuelle Form zu zeichnen, die sie mit dem audity bouba/kiki17. Insgesamt ergab diese Studie, dass die Wirkung visueller Bilder über Aufgaben hinweg robust ist, aber nicht langfristig innerhalb jeder Aufgabe, während die Auswirkungen des Lernens von Form-Audio-Regelmäßigkeiten langfristig innerhalb jeder Aufgabe robust sind, jedoch nicht über Aufgabenhinweg 17. Dieser Artikel stellt das Protokoll aus dieser Studievor 17. Das vorgestellte Protokoll eignet sich, um die Auswirkungen visueller Bilder und Lernform-Audio-Regelmäßigkeiten zu untersuchen, wann sie auftreten und wie robust sie sind; in bestimmten Personen und Gruppen von Einzelpersonen. Dieses Protokoll ist insofern einzigartig, als es sowohl die visuellen Bilder als auch die sensorischen Informationen während des Trainings und Testens unter Kontrolle hält.
Das vorgestellte Protokoll eignet sich, um die Auswirkungen visueller Bilder und Lernform-Audio-Regelmäßigkeiten zu untersuchen, wann sie auftreten und wie robust sie sind; in bestimmten Personen und Gruppen von Einzelpersonen.
Dieses Protokoll wäre geeignet, nicht nur die Genauigkeit, sondern auch die Explorationszeit zu testen: Ab dem Zeitpunkt, an dem der Experimentator die linke Hand von den Fäusten (in der Blinden- und Augenbindegruppe) / der Kartonplatte oder Schaumplatte (in der Vision-Gruppe), wenn der Teilnehmer “Ja” sagt. In den statistischen Analysen würde die längste Explorationszeit pro Versuch pro Versuchsgruppe in vier unterteilt und die Anzahl der “schnellen”, “mittleren” und “langsamen” Teilnehmer in jeder Versuchsgruppe gezählt: “Schnell” mit 25 % dieser Explorationszeit, ” Medium” mit 26-75 % und “langsam” mit 75 %. In allen Studien würden die Teilnehmer wie in Experiment 2: Das heißt, als “schnell” gezählt, wenn sie in 66,6 % aller Studien als “schnell” gezählt werden, als “mittel”, wenn sie in 66,6 % aller Studien als “mittel” gezählt werden, und so weiter. (Für ‘unschlüssig’, d.h. der Teilnehmer kann nicht als ‘schnell’, ‘mittel’ oder ‘langsam’ gezählt werden, vgl. Experiment 3.) Je nach Stichprobengröße und/oder Anzahl der richtigen und falschen Antworten wäre es möglich, die Explorationszeit separat auf korrekte und falsche Antworten zu testen. Ob Testgenauigkeit, Explorationszeit oder beides, es müssen kritische Protokollschritte befolgt werden: Die drei Experimente sollten in fester Reihenfolge durchgeführt und ihre Versuche in fester Reihenfolge für alle Teilnehmer durchgeführt werden. Den Teilnehmern sollte nicht bewusst gemacht werden, dass die Testmaterialien in allen drei Experimenten Bouba und Kiki enthalten. Darüber hinaus sollten die akustischen Informationen des MP3-Players nur einmal abgespielt und nicht mündlich an die Teilnehmer wiederholt werden (alle drei Experimente). In Experiment 1 und Experiment 2 sollten die taktilen/visuellen Bouba und Kiki in der gleichen Position und Ausrichtung dargestellt werden. Für die Vision-Gruppe (in allen drei Experimenten) sollten die Prüfmaterialien hinter einer Kartonplatte/Schaumplatte aufgestellt werden. Schließlich sollten die Teilnehmer in der Augenbindegruppe ihre Augenbinde erst entfernen, wenn Experiment 3 abgeschlossen ist. Mit diesen Schritten soll sichergestellt werden, dass die Menge und Art der Informationen über das Taktile/Visuelle und die auditiven Bouba und Kiki über alle experimentellen Gruppen hinweg unter Kontrolle gehalten wird. Darüber hinaus ist es in Experiment 2 entscheidend, die auditive Bouba/Kiki zu präsentieren, sobald der Teilnehmer beginnt, die taktile/visuelle Bouba/Kiki zu erforschen. Dadurch wird sichergestellt, dass multimodale (übereinstimmende oder unpassende) Informationen vorgelegt werden. Darüber hinaus wäre dieses Protokoll auch geeignet, um andere Gruppen von Personen zu testen. Um diese zu integrieren, könnten solche Teilnehmergruppen als separate Versuchsgruppen hinzugefügt werden: z. B. eine Farbwahrnehmungsgruppe und eine Formwahrnehmungsgruppe; 22 eine plötzliche Sehverlustgruppe und eine progressive Sehverlustgruppe; 20 , 21 und/oder bestimmte Gruppen von Personen mit einer Hörbehinderung und/oder einer Autismus-Spektrum-Störung13 könnten hinzugefügt werden.
Mit diesem Protokoll wäre es möglich, eine Gruppennorm (für Genauigkeit und/oder Explorationszeit) für bestimmte Gruppen für jeden sofortigen und langfristigen Effekt festzulegen, einschließlich jeder wiederholten Gruppenmaßnahme und/oder Aufgabe; dann, um Individuen gegen ihre Gruppennorm zu testen: Ob eine bestimmte Person oder die gesamte Gruppe eine Weiterbildung benötigt, um die Form-Audio-Regelmäßigkeiten zu bemerken. Eine Gruppennorm für jeden sofortigen und langfristigen Effekt, einschließlich jeder wiederholten Gruppenmaßnahme, und/oder Aufgabe würde es auch ermöglichen, zu bestimmen, welche Art von Training erforderlich ist, um die Form-Audio-Regelmäßigkeiten zu bemerken: Zum Beispiel mehr Versuche mit dem Taktil/ visuell-auditorischer Bouba/Kiki-Effekt (Experiment 1) und/oder mehr Versuche mit kongruöser und inkongruöstakter/visueller Form und Audio (Experiment 2). In der Tat wäre es möglich, sowohl die Anzahl der Versuche als auch die Anzahl der wiederholten Gruppenmaßnahmen in jeder Aufgabe zu erhöhen und die Zeit zwischen ihnen zu ändern, wodurch eine individuellere Ausbildung und Erprobung ermöglicht würde.
Dieses Protokoll müsste jedoch geändert werden, wenn das Testen, welche Art von Materialien (z. B. Bouba oder Kiki, gefüllte oder umrissene taktile/visuelle Form und/oder akustischer Klang oder Wort) das Erlernen von Form-Audio-Regelmäßigkeiten am besten gewährleistet. Eine möglichkeitsweise, dieses Protokoll zu ändern, könnte die Darstellung der verschiedenen Materialien in Blöcken beinhalten: Zum Beispiel gefüllte taktile/visuelle Formen und auditive Klang- und/oder umrissene taktile/visuelle Formen und akustische Sortierwörter (Experiment 1). Diese Blöcke könnten in zufälliger Reihenfolge allen Teilnehmern in einer experimentellen Gruppe präsentiert werden; oder alternativ jeder der vier Blöcke zu trennen experimentellegruppen (Experiment 1). Dieses Protokoll müsste auch geändert werden, wenn die Robustheit der visuellen Bilder und/oder erlernten Form-Audio-Regelmäßigkeiten innerhalb und über Aufgaben hinweg noch weiter getestet wird. Die Änderung könnte das Hinzufügen wiederholter Gruppenmaßnahmen mit unterschiedlicher taktiler/visueller Form und/oder Audio als die im Training enthaltenen Maßnahmen umfassen; zum Beispiel mit dem akustischen Klang für ‘maa-boo-maa’ und ‘tuh-kee-tee’ nach dem Training mit taktilen/visuellen Bouba- und Kiki-Formen und auditiven Wörtern (Experiment 1)1,3,4,10, 11 , 12 , 13 , 14 , 15 , 16. Eine andere Möglichkeit könnte darin bestehen, eine dritte taktile/visuelle Form darzustellen, die nicht hauptsächlich gekrümmt/eckig ist, zusammen mit den taktilen/visuellen Bouba- und Kiki-Formen in Experiment 110,11,12 ,13,14,15,16. Für diese taktile/visuelle Form könnte ein auditives Unsinnswort und ein Ton erstellt werden, um ein drittes Form-Wort-Paar14,15,16 und ein drittes Form-Sound-Paar17 (Experiment 1) zu erzeugen. Das Form-Sound-Paar könnte dann in Experiment 2 als Catch-Trials aufgenommen werden; oder alternativ als regelmäßige kongruente Studien und mit entsprechenden unpassenden Studien. Schließlich konnte der Klang (aus Experiment 2 und Experiment 1) und/oder das Unsinnswort (aus Experiment 1) in Experiment 3 dargestellt werden. Eine dritte Option könnte beinhalten, Experiment 2 und Experiment 3 überhaupt nicht durchzuführen, sondern sie als Aufgaben in die wiederholten Gruppenmessungen in Experiment 1 in zufälliger Reihenfolge einzubeziehen.
Das vorgestellte Protokoll ist insofern einzigartig, als es sowohl die visuellen Bilder als auch die sensorischen Informationen während des Trainings und Testens unter Kontrolle hält. Es ist flexibel: Große und kleine Proben und bestimmte Personen können gegen sich selbst (vgl. die Gruppentests) und/oder andere Gruppen von Individuen getestet werden (vgl. die Zwischengruppentests). Es ist möglich, sowohl die Genauigkeit als auch die Explorationszeit zu testen, die Anzahl der Versuche und wiederholten Messungen innerhalb der Gruppe in jedem Experiment und die Zeit zwischen ihnen zu ändern und die Reihenfolge der Versuche und/oder Experimente zu ändern oder sogar zu reduzieren.
The authors have nothing to disclose.
Geldgeber:
Diese Arbeit wurde durch das Forschungs- und Innovationsprogramm Horizont 2020 der Europäischen Union im Rahmen der Marie Sklodowska-Curie-Maßnahmen (Zuschussvereinbarung Nr. 657440) und der Norwegischen Vereinigung der Blinden und Sehbehinderten finanziert.
Film Make-up:
Make-up Künstler Rachael Parrey.
Bouba/kiki filled | 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height | ||
Bouba/kiki outlined | 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height | ||
Bouba/kiki sound (sine wave) | |||
Bouba/kiki word (human voice) | |||
Carton plate/foam board for covering bouba/kiki (white) | Ryman | 230461860 | 297 mm horizontal x 210 vertical 0 mm vertical |
Copy paper [white (80 g/m2 )] | Ryman | 250030000 | 210 mm horizontal x 148 mm vertical |
Foam board for bouba/kiki picture cards [white (5 mm thick)] | Ryman | 230461860 | 50 mm horizontal x 50 mm vertical |
MP3-player (smartphone with the VLC app for iOS installed) | Carphone Warehouse | ||
Plastic embossing film | RNIB Shop | ZM04 | 210 mm horizontal x 148 mm vertical |
Rollerball pen [black (1.0 mm tip)] | Ryman | 827134001 | |
Rubber mat | RNIB Shop | LC177 | 230 mm horizontal x 150 mm vertical |
Saddleback style | RNIB Shop | B511 | |
Swell paper | Zychem Ltd | Zytex2 paper | 50 mm horizontal x 50 mm vertical |