With this experiment, one might be able to detect consciousness in people with disorders of consciousness. Furthermore, the approach can create a simple communication channel that enables people to give simple YES/NO answers to questions.
이 실험에서는 두 가지 응용 프로그램을 위해 설계된 하이브리드 브레인 – 컴퓨터 인터페이스 (BCI) 기반 패러다임을 보여줍니다. 즉, 모터 반응을 제공 할 수없는 사람들의 의식 수준을 평가하고, 두 번째 단계에서는 커뮤니케이션 채널을 수립합니다 이 사람들은 '예'또는 '아니오'로 질문에 대답 할 수 있습니다. 패러다임 집합은 첫 번째 단계에서 기본 응답을 테스트하고 첫 번째 테스트가 성공적이면보다 포괄적 인 작업을 계속 수행하도록 설계되었습니다. 후자의 과제는 더 많은인지 기능을 필요로하지만 기본적인 테스트에서는 불가능한 통신을 제공 할 수 있습니다. 모든 평가 테스트는 알고리즘이 주어진 작업에 대한 환자의 두뇌 반응을 감지 할 수 있었는지를 보여주는 정확도 플롯을 생성합니다. 정확도 수준이 중요도 수준을 넘어서는 경우 주체가 작업을 이해하고 명령 p의 순서를 따를 수 있다고 가정합니다이어폰을 통해 피사체에 분개. 이 작업을 수행하려면 사용자가 특정 자극에 집중하거나 왼손 또는 오른손을 움직이는 것을 상상해야합니다. 모든 작업은 사용자가 시각적 양식을 사용할 수 없다는 가정하에 설계되어 사용자에게 제시되는 모든 자극 (지침, 신호 및 피드백 포함)은 청각 또는 촉각입니다.
식물 상태 (VS) 또는 최소 의식 상태 (MCS)의 환자 진단은 어렵고 잘못된 분류가 종종 발생합니다. 2009 년 한 연구는 임상 적 합의와 신경 행동 평가 사이의 진단의 정확도를 비교했습니다 1 . 의료 팀의 임상 합의에 따라 VS로 진단 된 44 명의 환자 중 18 명 (41 %)이 Coma Recovery Scale-Revised (CRS-R)로 표준화 된 평가를 한 후 MCS에 속하는 것으로 나타났습니다. 이 결과는 VS로 진단 된 환자의 37 ~ 43 %가인지의 징후를 보인 이전의 연구와 일치하는 것으로 나타났습니다 2 , 3 . 분류 척도는 행동 관찰 또는 청각, 시각, 언어 및 운동 기능 평가, 의사 소통 및 각성 수준을 기준으로합니다. 두뇌 활동 데이터를 추가 할 수있는 새로운 기술은 beha에 의해 부과 된 제한을 극복하기위한 완벽한 도구입니다vioral 등급 척도. 환자는 등급 척도에 필요한 행동 변화를 일으키지 못함에도 불구하고 뇌 반응을 조절할 수 있습니다. Monti et al. 4 는 기능적 자기 공명 영상 (fMRI)이 의식 장애 (DOC)로 진단 된 5/54 명의 환자에서 운동 또는 공간 영상 작업을 상상하는 것과 관련된 혈액 산소 수준에 따른 반응의 자발적인 변화를 감지 할 수 있음을 입증했습니다. 그들 중 4 명은 이전에 MCS로 분류되었다. 따라서 소수의 경우에서 식물 상태에 대한 행동 기준을 충족시키는 환자는 잔여인지 기능과 심지어 의식 의식을 가지고 있습니다.
Electroencephalography (EEG) 기반 BCIs는 또한 상상력이나 운동 운동의 시도로 인한 뇌 활동을 감지 할 수 있습니다. 또한 사전 정의 된 tas를 자발적으로 수행하여 인식을 나타낼 수 있는지 여부를 결정할 수있는 다른 BCI 패러다임이 있습니다케이. EEG 기반 BCI는 fMRI 기반 평가와 관련하여 다른 장점이 있습니다. 예를 들어, 뇌파 시스템은 훨씬 비용 효율적이고 휴대 가능하며 환자의 머리맡에서 쉽게 사용할 수 있습니다. 주요 비 침습적 BCI 접근법에는 느린 피질 전위 (SCP), P300, 안정 상태 시각 잠재력 (SSVEP) 및 모터 이미지 (MI). SCP는 낮은 정보 전송 속도를 제공하고 광범위한 교육이 필요합니다 (Wolpaw 외 ) 5 , SSVEP는 시각적주의가 필요합니다. 따라서 두 가지 방법 모두이 프로토콜에서 사용되지 않습니다. P300 speller로, Ortner et al. 5 는 장애인을 위해 70 %의 정확도에 도달했습니다. 이 숫자는 결국 증가 할 수 있습니다. 예를 들어 Turnip et al. 7 은 적응 형 신경망 분류기를 사용하여 P300 분류 정확도를 향상 시켰습니다. 이 프로토콜을 위해 우리는 MI 외에도 촉각 및 청각 P300 접근법을 선택했습니다.그것들은 시력없이 사용될 수 있고 각각은 독특한 이점을 가지고있다. MI는 비 시각적 인 P300 BCI보다 빠른 통신을 제공 할 수 있지만 P300 BCI는 거의 훈련이 필요하지 않습니다. 따라서이 복합 BCI 프로토콜은 DOC 환자를위한 EEG 기반 BCI 접근법 전체를 구현할 수 있습니다. 또한 작업이 상대적으로 빠르고 반복되기 쉽기 때문에 DOC 환자의 잘못된 분류 횟수를 줄이기 위해 각 환자마다 다른 접근법을 반복적으로 탐구 할 수 있습니다.
청각 P300, 두 자극기가있는 진동 촉각 P300, 세 자극기가있는 진동 촉각 P300, 그리고 (iv) MI의 4 가지 다른 BCI 접근법이 탐구되었다.
패러다임 I 청각 P300 접근법은 비정상적인 자극 (1,000 Hz 경고음)이 더 많은 표준 자극 (500 Hz 경고음)의 기차 내에서 무작위로 분배되는 청각 괴상 패러다임을 사용합니다. 패러다임 ii에서, 자극은 진동 촉 자극기를 통해 전달된다.at는 왼쪽과 오른쪽 손목에 있습니다. 왼쪽 손목의 촉각이 표준 자극을 전달하고 오른쪽 손목의 촉각이 편차 (표적) 자극을 전달합니다. 패러다임 iii의 경우, 추가 자극기가 피사체의 오른쪽 발목이나 등의 중간과 같은 다른 위치에 배치됩니다. 이 자극기는 표준 자극의 기차를 전달하는 반면, 왼손 및 오른 손목의 두 자극기는 비정상적인 자극을 전달합니다. 두 개의 진동 촉각 패러다임으로 의식을 평가하기 위해 피검자는 다른 자극을 무시하면서 이어폰을 통해 각 자극을 하나의 손목으로 조용히 세도록 지시받습니다. 무작위 매커니즘은 왼손 또는 오른 손목을 선택할지 여부를 결정하며, 각 달리기에는 각각 30 회 시도가 네 세트 있으며 각 시도마다 새로운 목표 손이 있습니다.
파라다임 i, ii 및 iii에 대해 다음 신호 처리가 수행됩니다. 256 Hz의 샘플링 주파수를 사용하여 8 개의 EEG 채널을 수집합니다. 편향된 자극의 확률은 1/8이다. 암탉e, 각각의 비정상적인 자극에 대해 7 개의 표준 자극이있을 것이다. 각 실행에는 총 480 개의 자극이 있습니다. 패러다임 i의 실행은 7 분 20 초가 걸리지 만 패러다임 ii 및 iii의 실행은 2 분 30 초가 걸립니다. 환자가 각각의 비정상적인 자극을 조용히 계산하면 자극은 자극 발병 후 약 300 ms의 양성 피크 인 P300을 포함하여 몇 가지 ERP (Event-Related Potential)를 유도합니다. 각 경고음은 100ms 지속됩니다. 각 자극 시험을 위해 신호 처리를 위해 신호음이 울리기 전 100ms와 600ms의 창이 저장됩니다. 그런 다음 데이터를 12 배로 다운 샘플링하여 60 ms 후 자극 간격 동안 12 개의 샘플을 얻습니다. 마지막으로, 모든 샘플 시간 채널 피쳐는 선형 판별 분석 8에 입력되어 12 x 8 = 96 피쳐가됩니다. 정확도 플롯 ( 그림 1 및 2 )을 계산하기 위해 다음 절차를 10 번 반복하고 결과를 하나의 단일 플롯으로 평균화합니다. 이탈 및 표준 시험두 개의 동일한 크기의 풀에 임의로 할당됩니다. 하나의 풀은 분류자를 훈련시키는 데 사용되고, 다른 풀은 분류자를 테스트하는 데 사용됩니다. 분류기는 테스트 풀에서 평균화 된 자극의 증가하는 수에 대해 테스트됩니다. 처음에는 일탈적이고 일곱 가지 표준 자극 만 테스트합니다. 분류기가 편차 자극을 올바르게 감지하면 결과 정확도는 100 %이고 그렇지 않은 경우 0 %입니다. 3 개의 편차 자극과 21 개의 표준 자극에 대해 2 개의 평균 편차 자극과 14 개의 평균 표준 자극에 대해서도 동일하게 수행되며, 전체 시험 풀이 사용될 때까지 계속됩니다. 이것은 30 개의 단일 값의 플롯을 생성합니다 (테스트 풀에서 30 개의 편차가있는 자극에 대해). 각각 100 % 또는 0 %입니다. 10 개의 단일 플롯을 평균하면 0 %에서 100 % 사이의 값이됩니다. 자극의 평균이 데이터의 무작위 노이즈를 감소시키기 때문에 평균 자극 수를 늘리면 피사체가 작업을 수행 할 수있는 경우 정확도가 높아집니다. 확률 수준을 훨씬 능가하는 정확도 (12.5 %)는 피험자에서 P300 반응이 추출 될 수 있고 피험자의 뇌에서 반응이 나타났다는 것을 보여줍니다. 패러다임 i와 ii는 의식을 평가하는 데에만 사용할 수 있습니다. 평가 중에 도달 한 정확도가 40 %보다 높으면 패러다임 iii 또는 iv의 의사 소통을 계속 사용할 수 있습니다.
패러다임 iii의 의사 소통 과제에서, 피실험자는 "예"라고 답하거나 "아니오"라고 답하기를 원할 경우 왼편의 자극에 집중하기로 선택한다. 분류기는 사용자가 집중하고있는 손을 감지하고 대답을 표시합니다.
Paradigm iv는 각각 8 초 동안 1 초의 휴식으로 분리 된 120 개의 시행을 기록합니다.이 결과는 전체 세션 시간 중 10 초 120 = 18 분입니다. 패러다임 IV는 감각 운동 피질에 분포 된 16 개의 EEG 채널을 사용합니다. 샘플링 주파수는 256Hz입니다. 각 시험은 이어폰을 통해 제시되는 신호로 시작하여 피사체에 지시합니다.왼손 또는 오른손을 움직이는 것을 상상해보십시오. 왼쪽 및 오른쪽 명령 순서는 무작위로 지정됩니다. 신호 전처리의 경우 CSP (Common Spatial Patterns) 10 , 12 , 13의 방법 이 사용됩니다. 이 방법은 한 클래스의 분산을 최소화하면서 다른 클래스의 분산을 최대화하도록 설계된 공간 필터 세트를 산출합니다. 이 결과는 선형 판별 분석에 의해 분류 된 4 가지 특징을 제공합니다 8 . 전체 분류 절차는 건강한 사용자 (13) 훈련의 60 분 후 80.7 %의 그랜드 평균 분류 정확도를 보여주는 최근의 간행물에 자세히 설명되어 있습니다. 정확도 계산은 교차 검증을 통해 수행됩니다. 이는 데이터 샘플을 상보적인 하위 집합으로 분할하고 하나의 하위 집합 (학습 풀)에 대한 분석을 수행하고 다른 하위 집합 (tes팅 풀). 데이터를 풀로 분리하기 전에 아티팩트가 포함 된 시험이 거부됩니다. 시험 기간 중에 진폭의 절대 값이 100μV를 초과하면 시험은 인공물을 포함하는 것으로 간주됩니다. 정확도는주의 신호음이 울린 후 1.5 초, 재판이 끝날 때까지 0.5 초 간격으로 테스트 풀의 모든 동작에 대해 계산됩니다. 각 단계 및 각 시험에 대해 분류 결과는 100 또는 0 %입니다. 테스트 풀의 모든 테스트의 정확도는 각 단일 단계에 대해 평균화되어 0 %에서 100 % 사이의 정확도 수준을 나타냅니다. 마지막으로 교차 유효성 검사 결과의 10 번의 반복 평균이 정확도 플롯에 표시됩니다. 예제는 그림 3 과 4 에서 볼 수 있습니다. 플롯은 왼손 (노란색), 오른손 (파란색) 및 모든 움직임을 함께 (녹색) 이미징 이동을 위해 분리됩니다. 마젠타 색의 수평선은 신뢰 한계를 나타내며,ds는 분석에 사용 된 시도 횟수에 대한 것입니다. 총 재판 횟수에서 거부 된 재판 건수를 뺀 숫자입니다. 그것은 Clopper Pearson 방법 9를 사용하여 95 % 신뢰 구간을 보여줍니다. 해당 선 위의 정확도 수준은 결과가 통계적으로 유의미 함을 의미합니다 (알파 <0.05).
여러 그룹의 선행 연구에 따르면 일부 DOC 환자는 행동을 기반으로 한 평가가 다르게 제시한다고 할지라도 fMRI 또는 EEG 기반 평가를 통해 의식적인 인식을 나타낼 수 있습니다. 따라서보다 정확하게 의식 의식을 평가하고 의사 소통을 제공 할 수있는 새로운 시스템과 패러다임에 대한 분명한 요구가 있습니다. 이상적으로,이 시스템은 저렴하고 휴대 가능하며 실제 설정에서 잡음에 강하고 사용하기 쉽습니다 (환자와 시스템 운영자 모두).
여기에 제시된 프로토콜과 시스템은 DOC를 가진 사람의 의식 수준을 평가하고 언어, 눈 활동 또는 근육 조절이 필요한 다른 작업을 통해 의사 소통 할 수없는 사람들을위한 새로운 의사 소통 경로를 수립하는 것을 돕는 두 가지 목적을 제공합니다. 프로토콜 내의 패러다임은 첫 번째 단계에서 기본 응답을 테스트하도록 설계되었습니다. 예상되는 기본 뇌 반응이 감지되면 더 멀리 나아갈 수 있습니다.더 복잡한 패러다임은 3 개의 촉감과 MI가있는 진동 촉성 P300입니다. 이 두 패러다임은 통신 채널을 확립하는 데에도 사용될 수 있습니다. EEG 신호 품질은 이러한 모든 프로토콜에서 중요합니다. 때때로 뇌파 데이터는 노이즈와 구별 될 수 없습니다. 시끄러운 데이터를 인식하고 관리하려면 뇌파 분석에 대한 경험이 필요합니다.
신뢰할 수없는 것 외에도 현재의 표준 평가 방법은 시간이 많이 걸리고 전문가 팀이 필요합니다. 따라서 환자는 의식이있는 인식이 다른 시간대에 급격히 변동 할 수 있지만 종종 한 번만 평가됩니다. 여기에 제시된 프로토콜은 여러 번 쉽게 반복 될 수 있습니다. 의식이있는 인식을 나타내지 않는 환자는 다른 시간에 다른 결과를 낼 수 있습니다. 또한, 각 통신 시도가 피험자가 현재 의식 상태에 있음을 확인하기 전에 단일 평가 실행을 수행 할 수 있습니다.
Anoth프로토콜에서 다른 패러다임을 구현하는 이유는 어떤 사람들은 한 패러다임으로는 성능이 좋지 않지만 다른 패러다임에서는 잘 수행 할 수 있기 때문입니다. 마찬가지로, 사람들은 자신이 더 쉽게 보이기 때문에 하나의 패러다임을 선호 할 수 있습니다. 다양한 패러다임으로 다양한 옵션을 탐색 한 후 환자는 선호하는 방식을 선택할 수 있습니다. 이것은 커뮤니케이션 효능 및 사용자 만족도를 높이기 위해 여러 가지 통신 옵션을 제공하는 "하이브리드"BCI 접근 방식과 일치합니다.
정확도 플롯과 올바른 분류의 백분율 수준을 조합하면 패턴 인식 알고리즘이 작업 중에 다른 두뇌 상태를 얼마나 잘 구분할 수 있는지를 반영하는 객관적인 결과를 얻을 수 있습니다. 그러므로 뇌 패턴이나 평균 응답에 대한 주관적 해석이 필요하지 않습니다.
3 명의 촉각자와의 진동 촉각 통신은 6 명의 만성 잠김 된 환자ts 15 . 의사 소통 중 평균 정확도는 55.3 % 였고 모두 12.5 %의 확률 이상이었습니다. MI 통신 작업은 20 명의 건강한 사용자 그룹 13 에서 테스트되었으며 평균 정확도는 약 80 %입니다. 스물 명 중 한 명만이 확률 수준 이하의 통제 정확도를 가졌습니다.
정확성이 떨어지거나 완전한 세션이더라도 뇌의 반응이 없거나 의식이 없음을 최종적으로 증명하지는 않습니다. 그것은 단지 시스템이 자발적인 뇌 반응을 감지 할 수 없다는 것을 의미합니다. 이것은 신호 품질이 좋지 않거나 듣기 어려움이나 작업 지시를 이해하기가 어렵거나 또는 소수의 피실험자가 작업 수행에도 불구하고 원하는 EEG 활동을 생성 할 수 없기 때문에 발생할 수 있습니다.
우리 그룹과 다른 사람들의 사전 연구와 일관되게 제시된 연구 결과에 따르면,뇌 영상 기술을 가진 DOC로 고통받는 환자의 의식 수준. fMRI는 환자의 현재 뇌 활동을 추적하는 유용한 기술이기도합니다. 자극 된 잠재력뿐만 아니라 모터 이미지 및 기타 작업을 유발하는 이상한 패러다임은 fMRI 17 , 18에 의해 추적 될 수있는 혈역학 반응을 생성 할 수 있음이 나타났습니다. fMRI와 비교하여 EEG는 주목할만한 장점이 있습니다. EEG 기반 도구는 비용이 많이 들고 휴대가 불가능하고 상당한 전문 지식을 필요로하는 장비없이 머리맡에 적용 할 수 있습니다. 환자를 스캐너로 옮기고 스캐너에서 나오는 소음은 환자에게 스트레스가 될 수 있습니다. 근적외선 분광법 (Near infrared spectroscopy, NIRS)은 휴대용이며 뇌파보다 약간 더 나은 공간 해상도를 가질 수 있지만 시간 분해능은 더 낮습니다 19 . NIRS는 MI 20 , 21 을 모니터링하는데 적합하지만 evote pote에는 적합하지 않습니다.사례. 예를 들어, Naseer와 홍콩 (22)는 MI-BCI는 fNIRS를 사용하는 높은 분류 정확도를 보여 주었다. 각각 50 초의 시련으로 왼손잡이 MI는 77.35 %, 오른팔 MI는 83 %를 달성했습니다. EEG 기반 BCI의 경우 Guger et al. 23 에서는 99 세션 중 약 20 %가 80 % 이상의 정확도에 도달했으며 99 세션 중 70 %가 60 % 이상의 정확도에 도달했습니다. Ortner et al. CSP 방법을 사용하여 약 80 %의 평균 최고 정확도를 보였다. 이 방법은 Guger 및 동료들에게서 사용 된 전극보다 더 많은 EEG 전극을 필요로하지만, 정확도가 더 높아진다. CSP 방법을 사용하여, Ramoser et al. 23 은 18 – 56에서의 전극 증가가 성능을 크게 향상시키지 않는다는 것을 입증했다. 우리는 따라서 우리의 방법에서 선택된 16 개의 전극이 충분하다고 결론을 내린다. 최근 Coyle et al . DOC patie에서 MI 분류 및 교육을 위해 CSP 사용nts 16 . 4 명의 모든 피실험자는 평가 중에 유의하고 적절한 뇌 활성화를 나타냈다.
하이브리드 NIRS-EEG BCI를 통해 MI를 평가하면 Khan 등이 높은 분류 정확도를 나타낼 수 있습니다 . 20 명이 나타났다. 이것은 추가적인 미래 영상 도구가 장치의 복잡성과 비용을 증가 시키지만 유망한 미래 방향이 될 수 있습니다.
여기에 제시된 프로토콜은 DOC 환자의 EEG 신호 내에서 뇌 반응을 평가하는 비교적 쉬운 도구를 제공합니다. 이러한 분류 결과를 해석하고 약물, 치료 또는 기타 의학적 치료법을 변경하기 위해서는 여전히 의학 전문가가 필요합니다. 이 방법의 향후 방향은보다 많은 자유도를 사용하는보다 진보 된 자극 기법 일 수 있습니다. 예를 들어, "예"또는 "아니오"라고 말하는 도구 만 제공하는 대신 장래의 장치가 더 많은 가능한 답을 허용 할 수 있습니다rs 하나의 질문. 추가 단계에서 컨텍스트 기반 응답을 사용할 수도 있습니다. 예를 들어, 환자가 음악 플레이어를 실행 중이면 사운드 레벨을 제어하거나 다음 노래로 전환 할 수있는 가능성을 제공 할 수 있습니다. 또한 MI 패러다임은 DOC 환자에서 검사해야합니다.
The authors have nothing to disclose.
This work was supported by the European Union FP 7 project DECODER and the European Union ODI Project COMAWARE.
g.USBamp | g.tec medical engineering GmbH | 1 | Biosignal amplifier |
Power supply | GlobTek Inc. | 1 | Medical mains power supply for the g.USBamp |
USB cable | g.tec medical engineering GmbH | 1 | Connects the g.USBamp to the computer |
EEG electrodes gSCARABEO | g.tec medical engineering GmbH | 16 | Active EEG electrodes |
EEG electrode gSCARABEOgnd | g.tec medical engineering GmbH | 1 | passive ground electrode |
EEG electrode g.GAMMAearclip | g.tec medical engineering GmbH | 1 | active reference electrode |
g.GAMMAbox | g.tec medical engineering GmbH | 1 | Connects the amplifier to the EEG electrodes |
g.USBampGAMMAconnector | g.tec medical engineering GmbH | 1 | Connects the g.GAMMAbox to the g.USBamp |
EEG cap | g.tec medical engineering GmbH | 1 | To position electrodes |
Computer | Hewlett-Packard | 1 | To run the software. Alternatively computers from other manufacturers could be used. |
g.VIBROstim | g.tec medical engineering GmbH | 3 | Tactors for sensory stimulation |
Audio trigger adapter box | g.tec medical engineering GmbH | 1 | To split up the audio signal into audio commands for the headphones and trigger signals. This box connects to the amplifier. |
Anti static wrist band | g.tec medical engineering GmbH | 1 | To suppress noise in the EEG |
Trigger cable | g.tec medical engineering GmbH | 1 | To connect the audio trigger adapter box and the g.STIMbox to the g.USBamp |
Audio connector cable | g.tec medical engineering GmbH | 1 | Audio cable to connect the audio trigger adapter box to the computer |
Hardlock | g.tec medical engineering GmbH | 1 | To run the software |
SE215-K | Shure Europe GmbH | 1 | Noise suppressing earphones. Alternatively other earphones could be used. |
g.STIMbox | g.tec medical engineering GmbH | 1 | Driver box for tactile stimulators |
mindBEAGLE software | g.tec medical engineering GmbH | 1 | software package |
g.GAMMAgel | g.tec medical engineering GmbH | 1 | conductive electrode gel |