Summary

Applicazione di stimoli visivi e tattili incongruenti durante il trasferimento di oggetti con feedback vibro-tattile

Published: May 23, 2019
doi:

Summary

Presentiamo un protocollo per applicare gli stimoli visivi-tattili incongruenti durante un’attività di trasferimento di oggetti. In particolare, durante i trasferimenti a blocchi, eseguiti mentre la mano è nascosta, una presentazione virtuale del blocco mostra occorrenze casuali di blocchi falsi. Il protocollo descrive anche l’aggiunta di feedback vibrotattili durante l’esecuzione del task motore.

Abstract

Raramente si esplorava l’applicazione di segnali sensoriali incongruenti che coinvolgono un feedback tattile interrotto, in particolare con la presenza di feedback vibrotattili (VTF). Questo protocollo mira a testare l’effetto di VTF sulla risposta a stimoli visivi-tattili incongruenti. Il feedback tattile viene acquisito afferrando un blocco e spostandolo su una partizione. Il feedback visivo è una presentazione virtuale in tempo reale del blocco mobile, acquisita utilizzando un sistema di Motion Capture. Il feedback congruente è la presentazione affidabile del movimento del blocco, in modo che il soggetto senta che il blocco è affinato e vederlo muoversi insieme al percorso della mano. Il feedback incongruente appare come il movimento del blocco diverte dal percorso di movimento effettivo, in modo che sembra cadere dalla mano quando è in realtà ancora detenuto dal soggetto, in modo da contraddire il feedback tattile. Venti soggetti (età 30,2 ± 16,3) ripetevano 16 blocchi di trasferimento, mentre la loro mano era nascosta. Questi sono stati ripetuti con VTF e senza VTF (totale di 32 blocchi di trasferimento). Gli stimoli incongruenti sono stati presentati casualmente due volte all’interno delle 16 ripetizioni in ogni condizione (con e senza VTF). Ogni soggetto è stato chiesto di votare il livello di difficoltà di eseguire il compito con e senza il VTF. Non vi sono state differenze statisticamente significative nella lunghezza dei percorsi delle mani e delle durate tra i trasferimenti registrati con segnali visivi-tattili congruenti e incongruenti – con e senza il VTF. Il livello di difficoltà percepito di eseguire l’operazione con il VTF significativamente correlato con la lunghezza del percorso normalizzato del blocco con VTF (r = 0,675, p = 0,002). Questa impostazione viene utilizzata per quantificare il valore additivo o riduttivo di VTF durante la funzione motoria che coinvolge incongruenti stimoli visivi-tattili. Le applicazioni possibili sono la progettazione protesica, l’abbigliamento sportivo intelligente o qualsiasi altro indumento che incorpora VTF.

Introduction

Le illusioni sono sfruttazioni dei limiti dei nostri sensi, poiché percepiamo erroneamente le informazioni che si discosta dalla realtà oggettiva. La nostra inferenza percettiva si basa sulla nostra esperienza nell’interpretare i dati sensoriali e sul calcolo del nostro cervello della stima più affidabile della realtà in presenza di input sensoriale ambiguo1.

Una sottocategoria nella ricerca delle illusioni è quella che unisce segnali sensoriali incongruenti. L’illusione che deriva da segnali sensoriali incongruenti proviene dalla costante integrazione multisensoriale eseguita dal nostro cervello. Mentre ci sono numerosi studi riguardanti l’incongruenza nei segnali visivi-uditivi, l’incongruenza in altre coppie sensoriali è meno segnalata. Questa differenza nel numero di report potrebbe essere attribuita alla maggiore semplicità nella progettazione di una configurazione che incorpora incongruenza visiva-uditiva. Tuttavia, gli studi che riportano i risultati relativi ad altre modalità di coppie sensoriali, sono interessanti. Ad esempio, l’effetto di segnali visivi-aptici incongruenti sulla sensibilità visiva2 è stato studiato utilizzando un sistema in cui gli stimoli visivi e aptici sono stati abbinati in frequenza spaziale; Tuttavia, l’orientamento tattile e visivo era identico (congruente) o ortogonale (incongruente). In un altro studio, l’effetto di incongruenti stimoli di movimento visivo-tattile sulla direzione visiva percepita del movimento è stato studiato utilizzando uno stimolatore di integrazione cross-modale visivo-tattile con un pannello illuminato che presenta stimoli visivi e un tattile stimolatore che presenta stimoli di movimento tattili con direzione di movimento arbitrario, velocità e profondità di indentazione nella pelle3. È stato suggerito che rappresentiamo internamente sia la distribuzione statistica del compito e la nostra incertezza sensoriale, combinandole in un modo coerente con un processo bayesiano che ottimizza le prestazioni4.

La realtà virtuale ha fatto la capacità di ingannare il feedback visivo al soggetto un compito facile. Diversi studi hanno utilizzato la realtà virtuale multisensoriale per boli di informazioni visive e somatosensoriali. Ad esempio, la realtà virtuale è stata recentemente utilizzata per indurre l’incarnazione nel corpo di un bambino, con o senza attivazione di una distorsione vocale a forma di bambino5. In un altro esempio, la presentazione visiva della distanza percorsa durante l’auto-movimento è stata estesa ed è quindi incongruente con la distanza percorsa dai segnali a base di corpo6. Una configurazione di realtà virtuale simile è stata progettata per un’attività in bicicletta7. Tutta la suddetta letteratura, tuttavia, non combinava un’interferenza con uno dei sensi, oltre al segnale incongruente. Abbiamo scelto il senso tattile per ricevere un tale disturbo.

Il nostro sistema sensoriale tattile fornisce una prova diretta sul fatto che un oggetto sia affinato. Ci aspettiamo quindi che quando il feedback visivo diretto è distorto o non disponibile, il ruolo del sistema sensoriale tattile nelle attività di manipolazione degli oggetti sarà prominente. Ma cosa accadrebbe se anche il canale sensoriale tattile fosse disturbato? Questo è un possibile risultato dell’utilizzo di feedback vibrotattile (VTF) per l’aumento sensoriale, in quanto cattura l’attenzione del singolo8. Oggi, il feedback aumentato di diverse modalità viene utilizzato come strumento esterno, inteso a migliorare il nostro feedback sensoriale interno e migliorare le prestazioni durante l’apprendimento motorio, nello sport e nelle impostazioni di riabilitazione9.

Lo studio di incongruenti stimoli visivi-tattili può migliorare la nostra comprensione per quanto riguarda la percezione dell’input sensoriale. In particolare, la quantificazione del valore additivo o riduttivo di VTF durante la funzione motoria che coinvolge incongruenti stimoli visivi-tattili, può aiutare nel futuro disegno protesica, Smart sport-usura, o qualsiasi altro indumento che incorporano VTF. Poiché gli amputati sono privi di stimoli tattili all’aspetto distale del loro residuo, il loro uso quotidiano del VTF, incorporato nella protesi per trasmettere la conoscenza dell’afferrare, ad esempio, potrebbe influenzare il modo in cui percepiscono il feedback visivo. La comprensione del meccanismo di percezione in queste condizioni, consentirà agli ingegneri di perfezionare le modalità VTF per ridurre l’effetto negativo sugli utenti VTF.

Abbiamo mirato a testare l’effetto di VTF sulla risposta a stimoli visivi-tattili incongruenti. Nella configurazione presentata, il feedback tattile viene acquisito afferrando un blocco e spostandolo su una partizione; il feedback visivo è una presentazione virtuale in tempo reale del blocco in movimento e della partizione (acquisita utilizzando un sistema di Motion Capture). Dal momento che il soggetto è impedito di vedere il movimento effettivo della mano, l’unico feedback visivo è quello virtuale. Il feedback congruente è la presentazione affidabile del movimento del blocco, in modo che il soggetto senta che il blocco è affinato e vede muoversi insieme al percorso della mano. Il feedback incongruente appare come il movimento del blocco diverte dal percorso di movimento effettivo, in modo che sembra cadere dalla mano quando è in realtà ancora detenuto dal soggetto, in modo da contraddire il feedback tattile. Sono state testate tre ipotesi: quando si sposta un oggetto da un luogo all’altro utilizzando un feedback visivo virtuale, (i) il percorso e la durata del movimento di trasferimento dell’oggetto aumenteranno quando vengono presentati gli stimoli visivi-tattili incongruenti, (II) questa modifica sarà aumentare quando si presentano incongruenti stimoli visivi-tattili e VTF è attivato sul braccio mobile, e (III) si trova una correlazione positiva tra il livello di difficoltà percepito di eseguire il compito con il VTF attivato e il percorso e la durata del movimento di trasferimento dell’oggetto. La prima ipotesi proviene dalla suddetta letteratura che riporta che varie modalità di feedback incongruenti influenzano le nostre risposte. La seconda ipotesi riguarda le precedenti constatazioni che VTF cattura l’attenzione dell’individuo. Per la terza ipotesi, abbiamo ipotizzato che i soggetti che erano più disturbati dal VTF, si fideranno del feedback visivo virtuale più del loro senso tattile.

Protocol

Il seguente protocollo segue le linee guida del comitato etico di ricerca umana dell’Università. Vedere la tabella dei materiali per il riferimento ai prodotti commerciali. Nota: dopo aver ricevuto l’approvazione della Commissione d’etica universitaria, sono stati reclutati 20 individui sani (7 maschi e 13 femmine, media e deviazione standard [DS] di età 30,2 ± 16,3 anni). Ogni soggetto ha letto e firmato un modulo di consenso informato preprocessato. I criteri di inclusion…

Representative Results

Abbiamo usato la tecnica descritta per testare le tre ipotesi che quando si sposta un oggetto da un luogo ad un altro utilizzando il feedback visivo virtuale: (i) il percorso e la durata del movimento di trasferimento dell’oggetto aumenteranno quando gli stimoli visivi-tattili incongruenti sono presenti II) questa variazione aumenterà quando si presenteranno incongruenti stimoli visivi-tattili e si attiverà il VTF sul braccio mobile; e (III) si riscontrerà una correlazione positiva tra il livello di difficoltà percep…

Discussion

In questo studio, è stato presentato un protocollo che quantifica l’effetto dell’aggiunta di VTF sulla cinematica di trasferimento di oggetti in presenza di incongruenti stimoli visivi-tattili. Al meglio delle nostre conoscenze, questo è l’unico protocollo disponibile per testare l’effetto di VTF sulla risposta a stimoli visivi-tattili incongruenti. I diversi passaggi critici coinvolti nell’applicazione di incongruenti stimoli visivi-tattili durante il trasferimento di oggetti con VTF includono i seguenti: collegare il…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Questo studio non è stato finanziato.

Materials

3D printer Makerbot https://www.makerbot.com/
Box and Blocks test Sammons Preston https://www.performancehealth.com/box-and-blocks-test
Flexiforce sensors (1lb) Tekscan Inc. https://www.tekscan.com/force-sensors
JASP JASP Team https://jasp-stats.org/
Labview National Instruments http://www.ni.com/en-us/shop/labview/labview-details.html
Micro Arduino Arduino LLC https://store.arduino.cc/arduino-micro
Motion capture system Qualisys https://www.qualisys.com
Shaftless vibration motor Pololu https://www.pololu.com/product/1638
SPSS IBM https://www.ibm.com/analytics/spss-statistics-software

References

  1. Aggelopoulos, N. C. Perceptual inference. Neuroscience and Biobehavioral Reviews. 55, 375-392 (2015).
  2. van der Groen, O., van der Burg, E., Lunghi, C., Alais, D. Touch influences visual perception with a tight orientation-tuning. PloS One. 8 (11), e79558 (2013).
  3. Pei, Y. C., et al. Cross-modal sensory integration of visual-tactile motion information: instrument design and human psychophysics. Sensors. 13 (6), 7212-7223 (2013).
  4. Kording, K. P., Wolpert, D. M. Bayesian integration in sensorimotor learning. Nature. 427 (6971), 244-247 (2004).
  5. Tajadura-Jimenez, A., Banakou, D., Bianchi-Berthouze, N., Slater, M. Embodiment in a Child-Like Talking Virtual Body Influences Object Size Perception, Self-Identification, and Subsequent Real Speaking. Scientific Reports. 7 (1), (2017).
  6. Campos, J. L., Butler, J. S., Bulthoff, H. H. Multisensory integration in the estimation of walked distances. Experimental Brain Research. 218 (4), 551-565 (2012).
  7. Sun, H. J., Campos, J. L., Chan, G. S. Multisensory integration in the estimation of relative path length. Experimental Brain Research. 154 (2), 246-254 (2004).
  8. Parmentier, F. B., Ljungberg, J. K., Elsley, J. V., Lindkvist, M. A behavioral study of distraction by vibrotactile novelty. Journal of Experimental Psychology, Human Perception, and Performance. 37 (4), 1134-1139 (2011).
  9. Sigrist, R., Rauter, G., Riener, R., Wolf, P. Augmented visual, auditory, haptic, and multimodal feedback in motor learning: a review. Psychonomic Bulletin & Review. 20 (1), 21-53 (2013).
  10. Hebert, J. S., Lewicke, J., Williams, T. R., Vette, A. H. Normative data for modified Box and Blocks test measuring upper-limb function via motion capture. Journal of Rehabilitation Research and Development. 51 (6), 918-932 (2014).
  11. Raveh, E., Portnoy, S., Friedman, J. Adding vibrotactile feedback to a myoelectric-controlled hand improves performance when online visual feedback is disturbed. Human Movement Science. 58, 32-40 (2018).
  12. Raveh, E., Friedman, J., Portnoy, S. Evaluation of the effects of adding vibrotactile feedback to myoelectric prosthesis users on performance and visual attention in a dual-task paradigm. Clinical Rehabilitation. 32 (10), 1308-1316 (2018).
  13. Raveh, E., Portnoy, S., Friedman, J. Myoelectric Prosthesis Users Improve Performance Time and Accuracy Using Vibrotactile Feedback When Visual Feedback Is Disturbed. Archives of Physical Medicine and Rehabilitation. , (2018).
  14. Raveh, E., Friedman, J., Portnoy, S. Visuomotor behaviors and performance in a dual-task paradigm with and without vibrotactile feedback when using a myoelectric controlled hand. Assistive Technology: The Official Journal of RESNA. , 1-7 (2017).
  15. Dienes, Z. Using Bayes to get the most out of non-significant results. Frontiers in Psychology. 5, 781 (2014).
  16. Shams, L., Murray, M. M., Wallace, M. T. Early Integration and Bayesian Causal Inference in Multisensory Perception. The Neural Bases of Multisensory Processes. , (2012).
  17. D’Amour, S., Pritchett, L. M., Harris, L. R. Bodily illusions disrupt tactile sensations. Journal of Experimental Psychology, Human Perception, and Performance. 41 (1), 42-49 (2015).
  18. Tidoni, E., Fusco, G., Leonardis, D., Frisoli, A., Bergamasco, M., Aglioti, S. M. Illusory movements induced by tendon vibration in right- and left-handed people. Experimental Brain Research. 233 (2), 375-383 (2015).
  19. Fuentes, C. T., Gomi, H., Haggard, P. Temporal features of human tendon vibration illusions. The European Journal of Neuroscience. 36 (12), 3709-3717 (2012).
  20. de Vignemont, F., Ehrsson, H. H., Haggard, P. Bodily illusions modulate tactile perception. Current Biology. 15 (14), 1286-1290 (2005).
  21. Marotta, A., Tinazzi, M., Cavedini, C., Zampini, M., Fiorio, M. Individual Differences in the Rubber Hand Illusion Are Related to Sensory Suggestibility. PloS One. 11 (12), e0168489 (2016).
  22. Stevenson, R. A., Zemtsov, R. K., Wallace, M. T. Individual differences in the multisensory temporal binding window predict susceptibility to audiovisual illusions. Journal of Experimental Psychology, Human Perception, and Performance. 38 (6), 1517-1529 (2012).
  23. Maravita, A., Spence, C., Driver, J. Multisensory integration and the body schema: close to hand and within reach. Current Biology. 13 (13), R531-R539 (2003).
  24. Carey, D. P. Multisensory integration: attending to seen and felt hands. Current Biology. 10 (23), R863-R865 (2000).
  25. Tsakiris, M., Haggard, P. The rubber hand illusion revisited: visuotactile integration and self-attribution. Journal of Experimental Psychology, Human Perception, and Performance. 31 (1), 80-91 (2005).

Play Video

Cite This Article
Friedman, J., Raveh, E., Weiss, T., Itkin, S., Niv, D., Hani, M., Portnoy, S. Applying Incongruent Visual-Tactile Stimuli during Object Transfer with Vibro-Tactile Feedback. J. Vis. Exp. (147), e59493, doi:10.3791/59493 (2019).

View Video