【混合型脑-机接口系统及其探究现状文献综述2500字】.docxVIP

1

混合型脑-机接口系统及其研究现状文献综述

1.1混合型脑-机接口系统概述

由于ssVEP-BCI和眼动追踪系统都是基于视觉的控制系统，两者可以自然的融合，所以近年来研究者关于混合型BCI的研究大多针对ssVEP-BCI与眼动追踪的融合。例如Lim等人[191在30指令集的ssVEP-BCI系统中使用网络摄像头检测视线的左右方向来防止用户因为意外导致的拼写错误。McCullagh等人[201通过将眼动仪与BCI相结合，对现有的模块化BCI体系结构进行了调整，并设计了图形化用户界面，以简化用户在虚拟环境的操作和控制。Zhang等人21提出了将眼动追踪作为一种异步开关，从而设计了ssVEP与眼动追踪融合的异步BCI系统。Saboor等人[22设计了一种30指令集的基于高频ssVEP-BCI与眼动追踪的字符拼写系统。

C

C

motor

imagery

EEGERDBCI

EEGvisual

attentionD

effortemotions

ECGHeartrate

Switch

FSSVEP

BCI

visual

5attentionGSSVEP

BCIEEG

mental

Carithmetic

△HbO2OpticalSSVEP

BCIBCI

EEGSwitch

motor

(imagery

ERD

BCIEEG

Selection

motor

Eye

gaze

EEGSelection

A

visual(attentiom

sSVEP

BCIEEG

Brainswitch

B

motorimagery

EEG

effortECGemotions

Controloforthosis

ERDBCI

Heartrate

motor

imagery

EEG

visualattention

6ERDBCI

visual

attentionB

(imagery

SSVEPBCI

ERDBCI

EEG

E

图1-3混合BCI的串行方式和并行方式[23]

如图1-3所示，混合BCI系统按运行方式可以分为串行系统和并行系统。目前对ssVEP-BCI与眼动追踪融合研究较多的都是串行模式，即将眼动识别结果作为一种系统的控制开关[19-211,或是先用眼动追踪粗略判断视线注视区域，接着再通过分析脑电信号来精确识别该区域里的具体刺激目标[22,241。串行模式构建系统简单，且能提高现有ssVEP-BCI系统的性能，但这种将识别过程分为两步进行的方式会导致系统运行效率低，无法充分发挥出眼动追踪的辅助优势。

为了使ssVEP-BCI与眼动追踪融合系统更加高效，部分学者对脑电数据和眼动追踪数据同时分析的并行模式进行了探索，如Ma等人[251在VR环境下搭建了40指令的混合脑机接口系统，其实现平均正确率为96%,平均ITR为270bit/min;

2

Mannan等人[26设计的基于眼动追踪和ssVEP-BCI的字符拼写系统实现了平均分类正确率为90.35±3.597%,平均ITR为184.06±12.761bit/min。

虽然他们设计的并行系统获得了较高的正确率和ITR,但是他们都没有采用一种有效的方法将脑电数据和眼动追踪数据做到真正严格的同步。这样存在的问题是在一个试次内获得的脑电数据并不完全是眼睛真正所注视的位置，并且他们也没有在后续的数据处理过程中弥补非精确同步所造成的误差，这样的系统在设计上存在缺陷，导致最后实验结果缺乏说服力。所以对脑电与眼动追踪的混合型BCI并行系统来说，实现数据精密的同步采集是开展实验的前提。

1.2混合型异步脑-机接□的研究

BCI系统按照控制方式可以分为同步系统和异步系统，同步BCI系统与异步BCI系统的差别如1-4所示。

系统

系统关闭

异步模式

同步模式

未知状态空闲状态

系统开启

控制状态

图1-4同步BCI与异步BCI差别示意图I27]

在同步BCI系统中，预先规定了固定的时间窗□,被试者需要在提示后规定的时间内完成特定的实验任务，由系统提取该时间范围内的脑电信号并进行特征分类识别，以此来控制外部设备的执行。同步的问题在于被试者在使用过程中无法主动控制BCI系统采集脑电数据的时间窗长度和系统的开启与关闭，只能被动接受系统设定好的任务模式，容易造成被试者疲劳，这无法体现出BCI系统作为一种新型人机交互方式所应该具备的良好用户体验。异步BCI系统不需要