The overall goal of this method is to establish an SSVEP-based experimental procedure by integrating multiple software programs to enable the study of brain-robot interaction with humanoid robots, which is prospective in assisting the sick and elderly as well as performing unsanitary or dangerous jobs.
Brain-Robot Interaction (BRI), which provides an innovative communication pathway between human and a robotic device via brain signals, is prospective in helping the disabled in their daily lives. The overall goal of our method is to establish an SSVEP-based experimental procedure by integrating multiple software programs, such as OpenViBE, Choregraph, and Central software as well as user developed programs written in C++ and MATLAB, to enable the study of brain-robot interaction with humanoid robots.
This is achieved by first placing EEG electrodes on a human subject to measure the brain responses through an EEG data acquisition system. A user interface is used to elicit SSVEP responses and to display video feedback in the closed-loop control experiments. The second step is to record the EEG signals of first-time subjects, to analyze their SSVEP features offline, and to train the classifier for each subject. Next, the Online Signal Processor and the Robot Controller are configured for the online control of a humanoid robot. As the final step, the subject completes three specific closed-loop control experiments within different environments to evaluate the brain-robot interaction performance.
The advantage of this approach is its reliability and flexibility because it is developed by integrating multiple software programs. The results show that using this approach, the subject is capable of interacting with the humanoid robot via brain signals. This allows the mind-controlled humanoid robot to perform typical tasks that are popular in robotic research and are helpful in assisting the disabled.
脳の信号を介して人間とロボット装置との間に革新的な通信経路を提供する脳とロボットのインタラクション(BRI)は、日常生活の中で1,2無効を助けることに前向きです。種々の方法は、構築するための最も一般的に使用される非侵襲的方法など皮質脳波記録(ECOG)、脳波計(EEG)、機能的磁気共鳴画像法(fMRI)などのいずれかの侵襲的または非侵襲的脳信号を取得することが可能ですBRIシステムは頭皮上に配置された電極からのEEG信号を取得することです。この方法は、安価で使いやすい、および許容可能な時間分解能3を提供します。彼らは人間が毎日受けて、同じ物理的および精神的なタスクの一部を模倣するために作成されるロボット装置の様々な中で、ヒューマノイドロボットが進んでいます。ヒューマノイドロボットを使用したBRIは、病人や高齢者を支援するだけでなく、不衛生や危険な仕事を行う上で重要な役割を果たします。しかし、制御BRIシステムによるヒューマノイドロボットの全身運動とのヒューマノイドロボットは、このような個人の支援4、5のような複雑なタスクを実行するために開発されているように、非常に困難です。
定常視覚誘発電位(SSVEP)は、所定の周波数6で視覚刺激の変調によって誘発される脳の信号の種類です。これはちらつき刺激の基本と高調波の周波数で正弦波が含まれていて、目立つ頭皮7の後頭部にある視覚野全体に表示されます。 SSVEP信号を選択する理由は、SSVEPベースBRIシステムは、比較的高い情報転送速度が得られ、より少ない訓練8を必要とすることです 。そのような事象関連電位(ERP)9またはモータ像(MI)10を電位として脳波の他のタイプもまた、この実験手順に埋め込 むことができます。
ヒューマノイドと脳とロボットの相互作用のための私たちの手順心制御ヒューマノイドロボットプラットフォーム- – EEGデータ収集システムと人型ロボット11からなるロボットはCerebotに基づいています。 EEGシステムは、電極の種々のタイプにより取得された、前処理および表示生体電位信号を記録することができます。これは、複数のアナログI / OとデジタルI / Oを提供し、16ビットの分解能では30kHzのサンプリングレートで同時に128の信号チャンネルを記録することができます。 C ++とMATLABでそのソフトウェア開発キットは、実験手順を設計するユーザーのために簡単です。ヒューマノイドロボットは自由の25度を持っており、2台のカメラ、4マイク、2ソナー距離計、2 IRエミッターと受信機、1慣性ボード、9触覚センサ、および8の圧力センサを含む複数のセンサを備えています。これは、動きや対話型ロボットの動作を作成および編集するためのChoregrapheおよびC ++ SDKを提供します。
この方法の全体的な目標は、SSVEPベースの実験的なproceを確立することですdureヒューマノイドロボット11と脳とロボットの相互作用の研究を可能にするために、このようなOpenViBE、Choregraph、中央ソフトウェアなどの複数のソフトウェアプログラムと同様に、C ++とMATLABで記述されたユーザー開発したプログラムを統合することもできます。1は、システム構成を示します。専用の刺激提示コンピュータ(SPC)は、視覚刺激、指示や環境フィードバックを対象に提供するために、ユーザーインターフェイスが表示されます。専用のデータ処理用コンピュータ(DPC)は、オフライン訓練過程でデータレコーダとオフラインデータアナライザを実行し、オンライン・シグナル・プロセッサとヒューマノイドロボットのオンライン制御するロボット制御装置を実行します。他のSSVEPベースの制御システムと比較して、我々のシステムは、より信頼性の高い、より柔軟で、それはそのようなOpenViBE、Choregraph、中央ソフトウェアとして、標準化されたソフトウェア・パッケージの数を統合することによって開発されたとして再利用し、アップグレードするために、特に、より便利で、モジュールは、C ++で書かれましたMATLAB。
次の手順を見直し、天津医科大学総合病院の倫理委員会によって承認され、すべての被験者は、書面による同意を得ました。
本論文では、複数のソフトウェアを統合することにより、ヒューマノイドロボットと脳とロボットのインタラクションシステムを確立するために、SSVEPベースの実験手順を提示します。人間の目的は、リアルタイムEEG信号を解釈することによって知覚されるので、実験を行う前に、電極接続及びEEG信号の品質を確認することが重要です。すべての電極から得られる信号は、悪い品質である場?…
The authors have nothing to disclose.
著者は、本論文で報告された実験を行う際に、彼の支援のために氏ホン胡に感謝の意を表したいと思います。この作品は、中国の国家自然科学基金(番号61473207)によって部分的にサポートされていました。
Cerebus EEG Data Acquisition System | Blackrock Microsystems | 4176-9967 | |
NAO humanoid robot | Aldebaran Robotics | H25 | |
EEG cap | Neuroscan | 8732 | |
Ten20 Conductive gel | Weaver and company | 10-20-8 |