Summary

Caracterização do sentido da Agência sobre as ações de próteses neurais-máquina de Interface-operado

Published: January 07, 2019
doi:

Summary

Aqui nós apresentamos um protocolo que caracteriza o sentido de agência desenvolvido sobre o controle de sentidos mãos próteses virtuais ou robóticos. Questionários psicofísicos são empregados para capturar a experiência explícita da Agência, e as estimativas do intervalo de tempo (ligação intencional) são empregadas para medir implicitamente o sentido de agência.

Abstract

Este trabalho descreve um quadro metodológico que pode ser usado para explicitamente e implicitamente caracteriza o sentido de agência desenvolvido sobre o controle de interface neural-máquina (NMI) de sentidos mãos próteses virtuais ou robóticos. A formação da agência é fundamental na distinção entre as ações que realizamos com nossos membros como sendo a nossa própria. Por se esforçando para incorporar estes mesmos mecanismos perceptuais próteses de membro superior avançadas, podemos começar a integrar um membro artificial mais estreitamente no quadro de cognitivo existente do usuário para controle de membro. Isto tem implicações importantes na promoção do controle eficaz das próteses de membro superior avançadas, uso e aceitação do usuário. Neste protocolo, os participantes controlam uma mão protética virtual e recebem feedback sensorial cinestésica através deles NMIs preexistentes. Uma série de tarefas de preensão virtuais são executadas e perturbações são sistematicamente introduzidas para o feedback cinestésico e movimentos da mão virtual. Duas medidas distintas da Agência são empregadas: estabelecida psicofísicos questionários (para capturar a experiência explícita da Agência) e um intervalo de tempo estimam tarefa para capturar o sentido implícito de agência (ligação intencional). Os resultados do presente protocolo (escores do questionário e o intervalo de tempo estima) pode ser analisado para quantificar a extensão da formação da agência.

Introduction

Como próteses robóticas tornam-se cada vez mais avançadas, a importância de feedback sensorial relevante continuará a crescer. Feedback sensorial afeta como os seres humanos percebem, interagirem com e até mesmo integrarem máquinas em seu esquema de corpo. Recentes técnicas de NMI agora podem fornecer aos usuários de prótese membro controle intuitivo e alcançar sensações associadas com toque1,2,3,4,5,6 , 7 e cinestesia (sentido de movimento)8,9 nos membros faltantes. Quando esta informação sensorial é emparelhada com a informação visual fornecida por assistir o membro artificial durante a operação, temos acesso a elementos-chave que informam a distinção de auto –versus-outros. Aproveitar este acesso pode ajudar a trazer a usuários de prótese membro um passo mais perto para operar um membro artificial como parte de seu corpo, ao invés de apenas uma ferramenta.

Consciência corporal e o sentido de ser encarnado decorre o estabelecimento de propriedade (a sensação de que um membro é uma parte do corpo) e a agência (a experiência de autoria sobre as ações do limbo)10,11. Posse é principalmente mediada através da integração de toque e de informação visual12. Agência que emerge da integração de intenção, sensação de movimento (cinestesia), informação visual e modelos cognitivos preditivos11. Durante o desempenho de uma ação voluntária, a agência é formada quando as consequências sensoriais de ação alinharem-se com a intenção do artista e previsões de modelos internos de13 do executor. Agência é separada e distinta da posse. O conceito de propriedade de membro foi estudado com frequência em prótese literatura14. Um sentido de formas de propriedade membro em participantes NMI quando comentários de toque é espacial e temporalmente apropriado, como ordem temporal, ou medido explicitamente através de questionários ou implicitamente através de mudanças na temperatura do coto acórdãos15. No entanto, menos oportunidades existem para explorar a Agência no contexto de NMI16. Trabalhos recentes com participantes de NMI demonstrou que a Agência pode ser propositadamente promovida e é separada da experiência de posse de8.

Agência é particularmente significativa na operação de próteses robóticas, pois é um link cognitivo para o controle das ações físicas do membro artificial, através de experiências de causalidade, a sensação de controlar o membro artificial ou fazendo algo para aconteceu17. Próteses robóticas são avançadas máquinas computarizadas que o usuário deve cooperar com a efetivamente concluir tarefas. Alguns membros protéticos incorporaram funções autônomas, como aperto antiderrapante deteção e correção; ainda estes sistemas visto limitada adoção como funcionalidade a correr fora de controle do usuário pode ser vista como frustrante se não adequadamente implementados8,18. Isso apresenta um desafio fundamental que é ecoado durante aplicações de cooperação humana com máquinas autónomas. Ou seja, os seres humanos muitas vezes confia em suas próprias ações sobre aquelas resultantes de uma colaboração com computadores ou máquinas, e essa confiança influencia directamente a probabilidade de um operador para usar as funções autónomas19,20. Como seres humanos, inatamente confiamos em nós mesmos e nossos corpos para executar as ações que pretendemos; Quando isto é conseguido, estabelecemos um sentido intrínseco da agência. Curiosamente, a formação da agência é impactada em acções de cooperação humano-computador. Durante tarefas cooperativas humano, um sentimento comum de agência pode ser formado sobre movimento21; ainda, a literatura sugere que a Agência compartilhada está hipotecada durante cooperação humano-computador22,23. Estes desafios são refletidos em prótese superior-membro uso, e as taxas de rejeição de dispositivos robóticos continuam altas, com 23% – 39% dos usuários descontinuar seu uso24. Na verdade, muitos usuários de prótese ainda preferem corpo-powered sistemas25. Estes sistemas retire a máquina computarizada do loop de controle e mais intimamente casal movimento do corpo do usuário para os prótese movimento através de cabos. Isso reforça ainda mais a importância da integração cognitiva no uso de próteses avançadas. Sugerimos o NMI sistemas podem fornecer um número das peças de motor e sensoriais necessários para ajudar a mover membros artificiais mais perto de estabelecer um sentido cooperativo da Agência, e isso será fundamental para promover a aceitação e a verdadeira integração desses máquinas computarizadas com seus usuários.

Agência pode ser medida em um número de maneiras. As medidas mais simples usam psicofísicos questionários ou escalas que explicitamente peça aos participantes para quem ou o que eles atribuem um evento17,26,27. Isto baseia-se na percepção existente de um indivíduo de “auto”, exigindo que os participantes a fazer julgamentos inferencial de auto atribuição (isto é, explicitamente, julgar se o “Eu” ou outra entidade foi responsável por uma ação ou evento). Implícitas medidas fornecem insights sobre o plano de fundo processos cognitivos que ocorrem durante a ação de motor e sensoriais eventos. Esta vista da Agência tenta medir o que não é explicitamente percebida por um indivíduo. Normalmente isso é conseguido por ter participantes caracterizam uma diferença percebida em auto e externamente-gerados pelo relatam de ações, por exemplo, tendo os participantes a duração do tempo perceberam que ocorrem entre um auto e externamente-gerado pelo evento 17 , 28. durante o desempenho das ações auto-gerada, agência implicitamente se manifesta como uma percepção compressão no tempo entre ações e suas consequências sensoriais, conhecidas como ligação intencional28. Quando indivíduos relatam o tempo perceberam que ocorrem entre uma ação e seu resultado, uma menor duração percebida de tempo corresponde a um sentido mais fortemente formado de agência29,30. Curiosamente, foi demonstrado que as medidas explícitas e implícitas não podem diretamente correlaciona como eles são, provavelmente, caracterizando diferentes mecanismos perceptuais17 que juntos informar o sentido de agência. Como tal, estabelecer uma compreensão mais abrangente da formação da Agência durante o uso de prótese provavelmente exigirá protocolos experimentais empregando medidas explícitas e implícitas.

Este trabalho descreve um quadro metodológico que pode ser usado para explicitamente e implicitamente caracteriza o sentido de agência desenvolvido sobre o controle de NMI de sentidos mãos próteses virtuais ou robóticos. Destacam-se duas técnicas para medir a Agência durante o desempenho de uma tarefa de objeto-agarramento sensório-motor. Questionários psicofísicos estabelecidos são empregados para capturar a experiência explícita da Agência, enquanto as estimativas do intervalo de tempo (ligação intencional) são empregadas para medir implicitamente o sentido de agência.

O âmbito de aplicação do presente protocolo é avaliar o sentido de agência no contexto de um NMI que fornece controle motor ativo fisiologicamente relevante e feedback cinestésico. Estas técnicas são generalizáveis para sistemas de NMI próteses virtuais ou físicos. Existem restrições mínimas para as populações que podem ser recrutadas para realizar este protocolo. Por exemplo, a mobilidade dos membros superiores do participante não pode ser afectada bilateralmente (eles devem ter um membro de som), e possuem a capacidade cognitiva de fazer julgamentos baseados em tempo e articular sensações experientes.

Protocol

Este protocolo foi aprovado anteriormente e segue as diretrizes do Comitê de ética de pesquisa humana da Clínica Cleveland. 1. hardware e Software da NMI Estabelecer controle de NMI do cada participante individual e feedback para que quando eles tentam executar um movimento, ver e sentir uma prótese virtual completar aquele movimento. Gerar um perceptivo cinestésica mão através NMI do participante e capturar a cinemática do movimento percebido, tendo o participante de…

Representative Results

O protocolo experimental foi realizado com três participantes amputados, operando uma prótese virtual sensível através deles NMI8 (Figura 1). A configuração usada uma mão virtual participante-controláveis, movendo-se através de perfis de cinemáticas pré-programados usando o MuJoCo HAPTIX física motor31. A mão virtual foi exibida em um monitor horizontal na frente dos participantes em um loc…

Discussion

Aqui apresenta-se um quadro metodológico para caracterizar a experiência da Agência formada durante a operação sensível próteses através de NMIs. Neste contexto, a agência é particularmente relevante como lo pontes ação física para os processos cognitivos de fundo que moldam a percepção. Através de um participante prótese e NMI, temos acesso direto a um número de elementos-chave que estabelecem o sentido de agência: intenção, saída motor e sensação de movimento. De importância para o con…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Os autores gostaria de agradecer sua contribuição para a geração de figura Madeline Newcomb. Este trabalho foi financiado pelos contribuintes dos EUA através de uma NIH, escritório do diretor, fundo comum, Transformative R01 Research Award (grant #1R01NS081710-01) e o Defense Advanced Research Projects Agency (contrato número N66001-15-C-4015 sob os auspícios de Biologia tecnologia programa gerente D. Weber).

Materials

LabVIEW 2015, Service Pack 1, Version 15.0.1f2 64-bit National Instruments, Austin, TX, USA Full or Pro Version We wrote custom software in LabVIEW to coordinate virtual prosthesis control with kinesthetic feedback as well as to present experimental conditions and record data.
8-Slot, USB CompactDAQ Chassis National Instruments, Austin, TX, USA cDAQ-9178
±60 V, 800 kS/s, 12-Bit, 8-Channel C Series Voltage Input Module National Instruments, Austin, TX, USA NI-9221
100 kS/s/ch Simultaneous, ±10 V, 4-Channel C Series Voltage Output Module National Instruments, Austin, TX, USA NI-9263
Custom Wearable Kinesthetic Tactor HDT Global, Solon, OH, USA N/A This item was custom made. Other methods of delivering kinesthetic feedback are acceptable as long as the participant feels the sensation of the hand moving in real-time with the movements of the virtual hand.
MuJoCo Physics Engine, HAPTIX Version Roboti LLC, Redmond, WA, USA mjhaptix150 Newer versions of MuJoCo should be acceptable as well. We used the MPL Gripper Model.
Myobock Electrodes, powered by Otto Bock EnergyPack in MyoBoy Battery Receptacle Ottobock, Duderstadt, Germany electrodes: 13E200=60
battery: 757B21
battery receptacle: 757Z191=2
Any setup that provides an amplified, filtered, and rectified EMG or neural control signal could be used.

References

  1. Kuiken, T. A., Marasco, P. D., Lock, B. A., Harden, R. N., Dewald, J. P. A. Redirection of cutaneous sensation from the hand to the chest skin of human amputees with targeted reinnervation. Proceedings of the National Academy of Sciences. 104 (50), 20061-20066 (2007).
  2. Hebert, J. S., et al. Novel targeted sensory reinnervation technique to restore functional hand sensation after transhumeral amputation. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 22 (4), 765-773 (2014).
  3. Tan, D. W., et al. A neural interface provides long-term stable natural touch perception. Science Translational Medicine. 257 (6), (2014).
  4. Oddo, C. M., et al. Intraneural stimulation elicits discrimination of textural features by artificial fingertip in intact and amputee humans. eLife. 5 (MARCH2016), (2016).
  5. Raspopovic, S., et al. Bioengineering: Restoring natural sensory feedback in real-time bidirectional hand prostheses. Science Translational Medicine. 6 (222), (2014).
  6. Flesher, S. N., et al. Intracortical microstimulation of human somatosensory cortex. Science Translational Medicine. 8 (361), (2016).
  7. Tabot, G. A., et al. Restoring the sense of touch with a prosthetic hand through a brain interface. Proceedings of the National Academy of Sciences. 110 (45), 18279-18284 (2013).
  8. Marasco, P. D., et al. Illusory movement perception improves motor control for prosthetic hands. Science Translational Medicine. 10 (432), (2018).
  9. Horch, K., Meek, S., Taylor, T. G., Hutchinson, D. T. Object discrimination with an artificial hand using electrical stimulation of peripheral tactile and proprioceptive pathways with intrafascicular electrodes. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 19 (5), 483-489 (2011).
  10. Braun, N., et al. The senses of agency and ownership: A review. Frontiers in Psychology. 9 (APR), (2018).
  11. Van Den Bos, E., Jeannerod, M. Sense of body and sense of action both contribute to self-recognition. Cognition. 85 (2), 177-187 (2002).
  12. Botvinick, M., Cohen, J. Rubber hands "feel" touch that eyes see. Nature. 391 (6669), 756 (1998).
  13. Gallagher, S. Philosophical conceptions of the self: Implications for cognitive science. Trends in Cognitive Sciences. 4 (1), 14-21 (2000).
  14. Niedernhuber, M., Barone, D. G., Lenggenhager, B. Prostheses as extensions of the body: Progress and challenges. Neuroscience & Biobehavioral Reviews. 92, 1-6 (2018).
  15. Marasco, P. D., Kim, K., Colgate, J. E., Peshkin, M. A., Kuiken, T. A. Robotic touch shifts perception of embodiment to a prosthesis in targeted reinnervation amputees. Brain. 134 (3), 747-758 (2011).
  16. Rognini, G., Blanke, O. Cognetics: Robotic Interfaces for the Conscious Mind. Trends in Cognitive Sciences. 20 (3), 162-164 (2016).
  17. Dewey, J. A., Knoblich, G. Do implicit and explicit measures of the sense of agency measure the same thing. PLoS ONE. 9 (10), (2014).
  18. Edwards, A. L. . Adaptive and Autonomous Switching: Shared Control of Powered Prosthetic Arms Using Reinforcement Learning. , (2016).
  19. Desai, M., Stubbs, K., Steinfeld, A., Yanco, H. Creating trustworthy robots: Lessons and inspirations from automated systems. Adaptive and Emergent Behaviour and Complex Systems – Proceedings of the 23rd Convention of the Society for the Study of Artificial Intelligence and Simulation of Behaviour, AISB 2009. , 49-56 (2009).
  20. Lee, J. D., See, K. A. Trust in automation: designing for appropriate reliance. Human Factors. 46 (1), 50-80 (2004).
  21. Moore, J. W. What is the sense of agency and why does it matter?. Frontiers in Psychology. 7 (AUG), 1-9 (2016).
  22. Obhi, S. S., Hall, P. Sense of agency in joint action: Influence of human and computer co-actors. Experimental Brain Research. 211 (3-4), 663-670 (2011).
  23. Sahaï, A., Pacherie, E., Grynszpan, O., Berberian, B. Co-representation of human-generated actions vs. machine-generated actions: Impact on our sense of we-Agency?. 2017 26th IEEE International Symposium on Robot and Human Interactive Communication (RO-MAN). , (2017).
  24. Biddiss, E., Chau, T. Upper limb prosthesis use and abandonment: A survey of the last 25 years. Prosthetics and Orthotics International. 31 (3), 236-257 (2007).
  25. Atkins, D. J., Heard, D. C. Y., Donovan, W. H. Epidemiologic overview of individuals with upper-limb loss and their reported research priorities. Journal of Prosthetics and Orthotics. 8 (1), 2-11 (1996).
  26. Kalckert, A., Ehrsson, H. H. Moving a Rubber Hand that Feels Like Your Own: A Dissociation of Ownership and Agency. Frontiers in Human Neuroscience. 6 (March), 1-14 (2012).
  27. Caspar, E. A., Cleeremans, A., Haggard, P. The relationship between human agency and embodiment. Consciousness and Cognition. 33, 226-236 (2015).
  28. Haggard, P., Clark, S., Kalogeras, J. Voluntary action and conscious awareness. Nature Neuroscience. 5 (4), 382-385 (2002).
  29. Engbert, K., Wohlschläger, A., Haggard, P. Who is causing what? The sense of agency is relational and efferent-triggered. Cognition. 107 (2), 693-704 (2008).
  30. Moore, J. W., Wegner, D. M., Haggard, P. Modulating the sense of agency with external cues. Consciousness and Cognition. 18 (4), 1056-1064 (2009).
  31. Kumar, V., Todorov, E. MuJoCo HAPTIX: A virtual reality system for hand manipulation. 2015 IEEE-RAS 15th International Conference on Humanoid Robots (Humanoids). , (2015).
  32. Kuiken, T. A., et al. Targeted reinnervation for enhanced prosthetic arm function in a woman with a proximal amputation: a case study. Lancet. 369 (9559), 371-380 (2007).

Play Video

Cite This Article
Schofield, J. S., Shell, C. E., Thumser, Z. C., Beckler, D. T., Nataraj, R., Marasco, P. D. Characterization of the Sense of Agency over the Actions of Neural-machine Interface-operated Prostheses. J. Vis. Exp. (143), e58702, doi:10.3791/58702 (2019).

View Video