Summary

振動触覚フィードバックを用いた物体移動時の不適合視覚触覚刺激の適用

Published: May 23, 2019
doi:

Summary

我々は、オブジェクト転送タスク中に不適合の視覚触覚刺激を適用するためのプロトコルを提示する。具体的には、ブロック転送中に、ハンドが非表示の間に実行され、ブロックの仮想プレゼンテーションは、偽ブロックドロップのランダムなオカレンスを示す。このプロトコルは、モータタスクの実行中に振動フィードバックを追加する方法についても説明します。

Abstract

乱れた蝕知のフィードバックを含む不適合感覚信号の適用は、特に振動のフィードバック (VTF) の存在によって、探検されることはめったにない。このプロトコルは不適合視覚触覚刺激に対する応答に VTF の効果を試験することを目的としている。触覚フィードバックは、ブロックをつかんでパーティション全体に移動することによって得られます。視覚的なフィードバックは、モーションキャプチャシステムを使用して取得された移動ブロックのリアルタイムの仮想プレゼンテーションです。合同のフィードバックはブロックの動きの信頼できる提示であり、主題はブロックが把握されていると感じ、それが手のパスと共に動くのを見る。不適合フィードバックは、実際の移動経路からのブロック転送の動きとして表示されるので、実際には依然として被検者によって保持されているときに手から落とされるように見え、それによって触覚フィードバックに矛盾する。20人の被験者 (年齢30.2 ± 16.3) は、彼らの手が隠されている間、16ブロック転送を繰り返しました。これらは VTF と VTF なしで繰り返されました (合計32ブロック転送)。不適合刺激は、各条件での16回の繰り返しの中でランダムに2度提示された (VTF の有無にかかわらず)。各被験者は、VTF の有無にかかわらず、タスクを実行する難しさのレベルを評価するように求められました。VTF の有無にかかわらず、合同および不適合の視覚触覚信号で記録された転送間のハンドパスと期間の長さに統計的に有意な差はなかった。VTF を用いてタスクを実行する知覚困難レベルは、ブロックの正規化された経路長と VTF (r = 0.675, p = 0.002) と有意に相関していた。このセットアップは、不適合視覚触覚刺激を伴う運動機能中の VTF の添加物または還元価値を定量化するために使用されます。考えられる用途は、補綴設計、スマートスポーツウェア、または VTF を組み込んだその他の衣服です。

Introduction

客観的な現実から逸脱した情報を誤って認識するので、幻想は私たちの感覚の限界を悪用ています。私たちの知覚推論は、知覚データの解釈と、曖昧な感覚入力1の存在下での現実の最も信頼できる推定の私たちの脳の計算における私たちの経験に基づいています。

幻想の研究のサブカテゴリーは、不適合感覚シグナルを組み合わせたものです。不適合の感覚シグナルから生じる錯覚は、私たちの脳によって行われる一定の多感覚の統合に由来します。視覚聴覚信号の incongruence に関する多くの研究がありますが、他の感覚のペアでの incongruence はあまり報告されていません。この数のレポートの違いは、視覚聴覚 incongruence を組み込んだセットアップの設計における、よりシンプルさに起因する可能性があります。しかし、他の感覚のペアモダリティに関連する結果を報告する研究は、興味深いものです。例えば、視覚感度2に不適合視覚触覚信号の効果は、視覚と触覚の刺激が空間周波数で一致したシステムを用いて研究された。しかし、触覚および視覚配向は同一 (合同) または直交 (不適合) であった。別の研究では、視覚刺激と触覚を提示する照明パネルを備えた視覚触覚クロスモーダル積分刺激器を用いて、知覚的な運動方向に不適合視覚触覚運動刺激の効果を調べた。刺激物は、皮膚3の任意の運動方向、速度、および圧痕深さを有する触覚運動刺激を提示する。我々は、内部的には、タスクの統計的分布と我々の感覚不確実性の両方を表しており、それらを性能最適化ベイジアンプロセス4と整合した方法で組み合わせることが示唆された。

バーチャルリアリティは、簡単な作業を対象に視覚的なフィードバックを欺く能力を作った。いくつかの研究は、視覚的およびつかさどる情報を misalign するために仮想現実多感覚使用しました。例えば、最近では、子供の体の中で実施形態を誘導するために仮想現実が使用され、子供のような音声ディストーション5の活性化の有無にかかわらず。別の例では、自己運動中の歩行距離の視覚的な提示は延長され、したがって身体ベースのキュー6によって感じられる移動距離と不適合れた。同様のバーチャルリアリティのセットアップは、サイクリング活動7のために設計されました。しかしながら、前述の文献のすべては、不適合信号に加えて、1つの感覚に干渉を結合していなかった。そのような乱れを受けるために触覚を選びました。

私達の蝕知の感覚システムは目的が把握されているかどうかについての直接証拠を提供する。したがって、直接的な視覚的フィードバックが歪められたり、利用できなくなったりすると、オブジェクト操作タスクにおける触覚システムの役割が顕著になることを期待しています。しかし、触覚チャネルも乱れた場合はどうなるでしょうか?これは、個々の8の注意をキャプチャするように、感覚拡張のための振動フィードバック (VTF) を使用しての可能な結果である。今日では、異なるモダリティの拡張フィードバックは、外部ツールとして使用され、私たちの内部感覚フィードバックを強化し、運動学習中、スポーツで、リハビリ設定9でパフォーマンスを改善することを意味します。

不適合視覚触覚刺激の研究は、感覚入力の知覚に関する我々の理解を高めることができる。特に、不適合視覚触覚刺激を伴う運動機能中の VTF の添加剤または還元価値の定量化は、将来の補綴物の設計、スマートスポーツウェア、または VTF を組み込んだその他の衣服を補助することができる。切断者は彼らの residuum の遠位側面で触覚刺激を奪われているので、VTF の毎日の使用は、例えば、把持の知識を伝えるために補綴物に埋め込まれる、彼らが視覚的フィードバックを知覚する方法に影響を与える可能性がある。これらの条件下での知覚のメカニズムの理解は、エンジニアが VTF ユーザーに負の影響を軽減するために完璧な VTF モダリティを可能にします。

我々は、不適合視覚触覚刺激に対する応答に VTF の効果を試験することを目的とした。提示されたセットアップでは、触覚フィードバックは、ブロックをつかんで、パーティションを横切って移動することによって得られる。視覚的なフィードバックは、移動ブロックとパーティション (モーションキャプチャシステムを使用して取得) のリアルタイムの仮想プレゼンテーションです。被験者は実際の手の動きを見ることができないので、唯一の視覚的なフィードバックは、仮想のものです。合同のフィードバックはブロックの動きの信頼できる提示であり、主題はブロックが把握されていると感じ、それが手のパスと共に動くのを見る。不適合フィードバックは、実際の移動経路からのブロック転送の動きとして表示されるので、実際には依然として被検者によって保持されているときに手から落とされるように見え、それによって触覚フィードバックに矛盾する。3つの仮説がテストされました: 仮想視覚的なフィードバックを使用してオブジェクトをある場所から別の位置に移動すると、(i) 不適合の視覚触覚刺激が示されたときにオブジェクトの移動運動のパスと継続時間が増加し、(ii) この変更は不適合の視覚触覚刺激が提示され、VTF が移動アーム上で活性化されたときに増加し、そして (iii) VTF を活性化してタスクを実行することの知覚された難しさのレベルとの間に正の相関が見出される。オブジェクトの移動モーションです。最初の仮説は、不適合のフィードバックの様々なモダリティが私たちの応答に影響を与えることを報告する前述の文献から始まります。第2の仮説は、VTF が個体の注意を捕捉するという以前の所見に関するものである。第3の仮説では、VTF によってより乱された被験者は、触覚よりも仮想視覚的フィードバックを信頼すると仮定した。

Protocol

次のプロトコルは、大学の人間研究倫理委員会のガイドラインに従っています.市販品については、資料表を参照してください。 注: 大学倫理委員会の承認を得た後、健常個体20人 (男性7名および女性13歳、30.2 ±16.3 歳の平均および標準偏差 [SD]) を採用した。各被験者は、インフォームドコンセントフォーム前置を読み、署名した。封入基準は18歳以上の右利?…

Representative Results

私たちは、仮想の視覚的なフィードバックを使用してオブジェクトを1つの場所から別の位置に移動するときに、(i) 視覚触覚刺激が不適合ときに、物体の移動運動の経路と持続時間が増加する3つの仮説をテストするために、記述された手法を使用しました。提示(ii) この変化は、不適合の視覚触覚刺激が提示され、VTF が移動アーム上で活性化されるときに増加する。(iii) VTF をアクティブにし…

Discussion

本研究では、不適合視覚触覚刺激の存在下における物体移動運動学に VTF を付加する効果を定量化するプロトコルを提案した。私たちの知る限りでは、これは不適合視覚触覚刺激への応答に VTF の効果をテストするために利用可能な唯一のプロトコルです。VTF とのオブジェクト転送中の不適合視覚触覚刺激の適用に関連するいくつかの重要なステップは次のとおりです。被験者に VTF システム…

Disclosures

The authors have nothing to disclose.

Acknowledgements

この研究は資金がなかった。

Materials

3D printer Makerbot https://www.makerbot.com/
Box and Blocks test Sammons Preston https://www.performancehealth.com/box-and-blocks-test
Flexiforce sensors (1lb) Tekscan Inc. https://www.tekscan.com/force-sensors
JASP JASP Team https://jasp-stats.org/
Labview National Instruments http://www.ni.com/en-us/shop/labview/labview-details.html
Micro Arduino Arduino LLC https://store.arduino.cc/arduino-micro
Motion capture system Qualisys https://www.qualisys.com
Shaftless vibration motor Pololu https://www.pololu.com/product/1638
SPSS IBM https://www.ibm.com/analytics/spss-statistics-software

References

  1. Aggelopoulos, N. C. Perceptual inference. Neuroscience and Biobehavioral Reviews. 55, 375-392 (2015).
  2. van der Groen, O., van der Burg, E., Lunghi, C., Alais, D. Touch influences visual perception with a tight orientation-tuning. PloS One. 8 (11), e79558 (2013).
  3. Pei, Y. C., et al. Cross-modal sensory integration of visual-tactile motion information: instrument design and human psychophysics. Sensors. 13 (6), 7212-7223 (2013).
  4. Kording, K. P., Wolpert, D. M. Bayesian integration in sensorimotor learning. Nature. 427 (6971), 244-247 (2004).
  5. Tajadura-Jimenez, A., Banakou, D., Bianchi-Berthouze, N., Slater, M. Embodiment in a Child-Like Talking Virtual Body Influences Object Size Perception, Self-Identification, and Subsequent Real Speaking. Scientific Reports. 7 (1), (2017).
  6. Campos, J. L., Butler, J. S., Bulthoff, H. H. Multisensory integration in the estimation of walked distances. Experimental Brain Research. 218 (4), 551-565 (2012).
  7. Sun, H. J., Campos, J. L., Chan, G. S. Multisensory integration in the estimation of relative path length. Experimental Brain Research. 154 (2), 246-254 (2004).
  8. Parmentier, F. B., Ljungberg, J. K., Elsley, J. V., Lindkvist, M. A behavioral study of distraction by vibrotactile novelty. Journal of Experimental Psychology, Human Perception, and Performance. 37 (4), 1134-1139 (2011).
  9. Sigrist, R., Rauter, G., Riener, R., Wolf, P. Augmented visual, auditory, haptic, and multimodal feedback in motor learning: a review. Psychonomic Bulletin & Review. 20 (1), 21-53 (2013).
  10. Hebert, J. S., Lewicke, J., Williams, T. R., Vette, A. H. Normative data for modified Box and Blocks test measuring upper-limb function via motion capture. Journal of Rehabilitation Research and Development. 51 (6), 918-932 (2014).
  11. Raveh, E., Portnoy, S., Friedman, J. Adding vibrotactile feedback to a myoelectric-controlled hand improves performance when online visual feedback is disturbed. Human Movement Science. 58, 32-40 (2018).
  12. Raveh, E., Friedman, J., Portnoy, S. Evaluation of the effects of adding vibrotactile feedback to myoelectric prosthesis users on performance and visual attention in a dual-task paradigm. Clinical Rehabilitation. 32 (10), 1308-1316 (2018).
  13. Raveh, E., Portnoy, S., Friedman, J. Myoelectric Prosthesis Users Improve Performance Time and Accuracy Using Vibrotactile Feedback When Visual Feedback Is Disturbed. Archives of Physical Medicine and Rehabilitation. , (2018).
  14. Raveh, E., Friedman, J., Portnoy, S. Visuomotor behaviors and performance in a dual-task paradigm with and without vibrotactile feedback when using a myoelectric controlled hand. Assistive Technology: The Official Journal of RESNA. , 1-7 (2017).
  15. Dienes, Z. Using Bayes to get the most out of non-significant results. Frontiers in Psychology. 5, 781 (2014).
  16. Shams, L., Murray, M. M., Wallace, M. T. Early Integration and Bayesian Causal Inference in Multisensory Perception. The Neural Bases of Multisensory Processes. , (2012).
  17. D’Amour, S., Pritchett, L. M., Harris, L. R. Bodily illusions disrupt tactile sensations. Journal of Experimental Psychology, Human Perception, and Performance. 41 (1), 42-49 (2015).
  18. Tidoni, E., Fusco, G., Leonardis, D., Frisoli, A., Bergamasco, M., Aglioti, S. M. Illusory movements induced by tendon vibration in right- and left-handed people. Experimental Brain Research. 233 (2), 375-383 (2015).
  19. Fuentes, C. T., Gomi, H., Haggard, P. Temporal features of human tendon vibration illusions. The European Journal of Neuroscience. 36 (12), 3709-3717 (2012).
  20. de Vignemont, F., Ehrsson, H. H., Haggard, P. Bodily illusions modulate tactile perception. Current Biology. 15 (14), 1286-1290 (2005).
  21. Marotta, A., Tinazzi, M., Cavedini, C., Zampini, M., Fiorio, M. Individual Differences in the Rubber Hand Illusion Are Related to Sensory Suggestibility. PloS One. 11 (12), e0168489 (2016).
  22. Stevenson, R. A., Zemtsov, R. K., Wallace, M. T. Individual differences in the multisensory temporal binding window predict susceptibility to audiovisual illusions. Journal of Experimental Psychology, Human Perception, and Performance. 38 (6), 1517-1529 (2012).
  23. Maravita, A., Spence, C., Driver, J. Multisensory integration and the body schema: close to hand and within reach. Current Biology. 13 (13), R531-R539 (2003).
  24. Carey, D. P. Multisensory integration: attending to seen and felt hands. Current Biology. 10 (23), R863-R865 (2000).
  25. Tsakiris, M., Haggard, P. The rubber hand illusion revisited: visuotactile integration and self-attribution. Journal of Experimental Psychology, Human Perception, and Performance. 31 (1), 80-91 (2005).

Play Video

Cite This Article
Friedman, J., Raveh, E., Weiss, T., Itkin, S., Niv, D., Hani, M., Portnoy, S. Applying Incongruent Visual-Tactile Stimuli during Object Transfer with Vibro-Tactile Feedback. J. Vis. Exp. (147), e59493, doi:10.3791/59493 (2019).

View Video