脑机接口(BCI)提供了一种新的途径之间的大脑和一个外部设备实现直接控制和沟通(
大脑活动最频繁的用来控制BCI系统包括与事件相关电位(ERP) (
早期的BCI系统主要是基于呈现视觉刺激。例如,第一个视觉P300 BCI Farwell和Donchin于1988年被报道(
然而,标准的视觉P300 bci取决于注视控制和不适合视障人。因此,听觉和触觉P300 bci逐渐探索作为替代方案。山等。
我们的研究着重于触觉P300 BCI。研究人员试图运用触觉刺激身体的各个部分,如胸部(
在这项研究中,我们调查是否视觉注意力的BCI用户有任何影响触觉P300 BCI的性能和可用性的BCI由用户评价(评估)。传统的触觉P300 BCI设计振动刺激分别发表了参与者的左腕,右手腕,腹部、左脚踝、右脚踝。参与者被要求区分左边的刺激手腕或从其他刺激的右手腕。两个条件被参与者:测试一个条件使用视觉注意力(称为VA条件)和其他没有使用视觉注意力(称为后条件)。值得注意的是,在条件后,参与者被要求默数的数量目标振动出场只有空间的关注。在弗吉尼亚州的条件,除了计算任务,参与者也有视觉注意的目标振动位置的短期目标振动提示,直到目标提示搬到另一个位置。
共有11个健康成年人从华东科技大学在上海,中国(包括4女性和7个男性,年龄在22到26)参与本研究;他们指定的P1, P2,…,侯。所有参与者正常或corrected-to-normal愿景和完整的触觉(自我)。重要的是,他们都没有被训练过。为了达到研究的目的,实验过程和所需的任务进行了详细的解释之前的任何个人参与。此外,每个参与者签署书面同意书之前研究中,经当地伦理委员会批准。
vibrotactile刺激由g。VIBROstims,主要单元的直流电机产生的振动。如图
vibrotactile刺激器。
两种情况下,每个参与者坐在椅子上的监测和振动刺激器被放置在左边的手腕,右手腕,腹部,左脚踝,右脚踝,确保足够的空间距离来实现个人刺激之间的分辨率。图
振动刺激器的位置在每个参与者的身体。
每个条件要求参与者来完成相应的实验中,他们应该在同一天完成的。两个实验的顺序是随机的。在我们的研究中,六个参与者选择先做VA条件实验。为了让参与者保持足够的能量来完成每个实验中,会有两个实验之间的间隔,这取决于个人的长度。每个实验包含离线阶段和在线阶段(见图
每个实验的过程。
对于每一个参与者,脑电图数据被记录在一个采样率为256 Hz g。USBamp(高通和低通滤波器组在0.1赫兹和30 Hz;陷波滤波器组在50 Hz)和g。EEGcap(奥地利格拉茨贵港市技术)。脑电图电极定位根据国际10 - 20系统。在我们的研究中,十四湿活跃Ag-AgCl电极(Fz、FC1 FC2、C3、Cz, C4, CP3, CP1, CP2, CP4, P3, Pz、P4, Oz)被选中。此外,FPz被选为地面电极和乳突(A)被选为参考电极。如图
所有选择的电极位置的配置。
在每个实验中,一个800 ms数据段提取后,每一次振动刺激。这导致共有750个数据段,包括150年的目标和600不属预定目标的,从离线提取阶段的实验。每个脑电图数据段被过滤到-30赫兹频率范围0.1 3理查德·道金斯阶巴特沃斯带通滤波器,然后从256 Hz downsampled每七36.6赫兹通过选择样本。因此,成立一个时空特征向量的维数14×29(14频道和29个采样点)。在这种情况下,收集750个这样的特征向量作为校准数据为每个条件。此外,采用winsorizing去除干扰信号造成肌肉活动,眨眼,或眼球运动。首先,每个样本的10和90百分位数计算;其次,每个样本的值躺不到第十百分位或者超过第90百分位被替换为10或第90百分位,分别是(
贝叶斯线性判别分析(BLDA)被选为构建的分类器模型在线验证。这种方法被广泛用于越来越多的P300 BCI系统由于其优越的分类性能
在线分类和识别在我们的研究中,5个时空特征向量得到从五个振动(即。,5刺激位置)在每一个试验。这些被输入到分类器来计算他们的概率分布是否属于目标类。最后,最大的刺激位置概率分布是确定和报告的分类结果。
本文为了研究视觉注意力是否影响触觉P300 BCI的性能,我们分析了离线和在线数据记录在VA和演讲后条件。的离线数据记录在表示VA和后条件下,ERP振幅和<我talic>
r我talic>平方值被用来说明erp两个条件之间的不同。的定义<我talic>
r我talic>平方值如下:
此外,我们探讨了振幅(即。(即,峰值)和延迟。,the peak time) of the N200, P300, and N400 ERPs at different electrode sites averaged across 11 participants for each condition. Apart from these, the mean amplitude of the P300 ERP at electrode Cz for each participant was also analyzed. For the purpose of comparing the offline performance differences between the two stimulation conditions, the offline classification accuracy and raw bit rate (i.e., information transfer rate) were both averaged across the 11 participants across 1–10 trials [
在执行任何统计对比数据来自这两个条件,我们首先测试数据的正常(一个示例Kolmogorov-Smirnov测试)。对观察到的数据是正态分布,我们使用成对样品<我talic>
t我talic>测试评估的意义差异,而对于没有观察到的数据是正态分布,非参数测试是必要的。因此,我们选择了一个Wilcoxon符号秩检验进行比较(
参与者的反馈可以提供进一步的信息,使我们能够研究视觉注意力的影响在使用传统的触觉P300 BCI时用户评价。因此,我们进行了一项问卷调查每个参与者完成了相应的实验后两个条件。问题是在中国(所有11个参与者的第一语言)。问题的英文翻译如下:
这条件你觉得更难以使用吗?请给分数两个条件1到5的范围。得分越高,越困难你感觉是使用状况。
这条件让你感觉更累吗?请给分数两个条件1到5的范围。得分越高,越累你觉得由于使用这个条件。
图
大平均erp为目标和不属预定目标的刺激所有11个参与者平均每个14电极的网站。
的<我talic> r我talic>erp的平方值从0到1000 ms,平均超过所有11个参与者。
表
的平均高峰值和峰值时间N200) P300, N400 erp在不同电极网站平均超过所有11个参与者。
| ERP | 峰值(μV) | 峰值时间(女士) | ||
|---|---|---|---|---|
| 弗吉尼亚州的条件 | 后的情况 | 弗吉尼亚州的条件 | 后的情况 | |
| N200_Pz | −2.34 | −2.26 | 193.89 | 207.74 |
| P300_Pz | 2.12 | 1.62 | 341.97 | 348.37 |
| P300_Cz | 3.80 | 2.77 | 316.76 | 332.39 |
| N400_Cz | −5.23 | −4.44 | 535.51 | 539.06 |
图
P300 ERP在电极记录的平均振幅Cz为每个参与者。
图
意味着离线性能平均超过所有11个参与者1 - 10试验。(一)分类精度。(b)原始比特率。
实验分类精度为每个参与者使用离线数据的两个刺激条件。
图
的贡献N200) P300, N400 erp为每个参与者离线分类精度。(一)VA条件。(b)后的状态。
每个参与者的离线打分类精度。(一)VA条件。(b)后的状态。
表
在线分类精度,平均数量的实验中,为每个参与者和原始比特率。
| 参与者 | ACC (%) | AVT | RBR(位/分钟) | |||
|---|---|---|---|---|---|---|
| VA-C | NVA-C | VA-C | NVA-C | VA-C | NVA-C | |
| P1 | 95年 | 65年 | 3.05 | 3.35 | 12.69 | 4.11 |
| P2 | 90年 | 50 | 3.15 | 3.85 | 10.49 | 1.67 |
| P3 | One hundred. | 75年 | 3.00 | 3.15 | 15.48 | 6.42 |
| P4 | One hundred. | 55 | 3.25 | 3.35 | 14.29 | 2.56 |
| P5 | One hundred. | 60 | 3.05 | 3.30 | 15.23 | 3.34 |
| P6 | 80年 | 55 | 3.30 | 3.50 | 7.27 | 2.45 |
| P7 | 90年 | 55 | 3.10 | 3.65 | 10.66 | 2.35 |
| P8 | 95年 | 70年 | 3.05 | 3.35 | 12.69 | 5.02 |
| 票数 | 95年 | 75年 | 3.30 | 3.25 | 11.73 | 6.22 |
| P10 | 75年 | 65年 | 3.40 | 3.60 | 5.95 | 3.82 |
| 赛 | 80年 | 65年 | 3.35 | 3.35 | 7.16 | 4.11 |
| AVG±性病 | 90.91±8.89 | 62.73±8.47 | 3.18±0.14 | 3.43±0.20 | 11.24±3.30 | 3.82±1.57 |
ACC指的分类精度,AVT指平均数量的实验中,RBR指原始比特率,弗吉尼亚州VA-C指条件,NVA-C指后状况,AVG是指平均,性病是指标准差。
表
给出的分数11参与者每个刺激条件的两个问题。
| 参与者 | 困难 | 累了 | ||
|---|---|---|---|---|
| VA-C | NVA-C | VA-C | NVA-C | |
| P1 | 2 | 5 | 1 | 3 |
| P2 | 2 | 4 | 1 | 3 |
| P3 | 3 | 4 | 1 | 2 |
| P4 | 3 | 4 | 1 | 3 |
| P5 | 4 | 5 | 1 | 2 |
| P6 | 3 | 4 | 2 | 3 |
| P7 | 4 | 5 | 2 | 4 |
| P8 | 3 | 4 | 1 | 3 |
| 票数 | 3 | 4 | 2 | 4 |
| P10 | 4 | 5 | 1 | 2 |
| 赛 | 3 | 4 | 2 | 4 |
| AVG±性病 | 3.09±0.70 | 4.36±0.50 | 1.36±0.50 | 3.00±0.77 |
AV-C指VA条件,NVA-C指后状况,AVG是指平均,性病是指标准差。
在最近的研究中,我们设计了一个传统的触觉P300 BCI,五触觉刺激器在空间上分布在一个参与者的左腕,右手腕,腹部、左脚踝、右脚踝。只有左和右手腕被选为目标刺激的位置,其余的被用作标准刺激的位置。Junichi Hori等人报道,每个刺激的频率应该是一致的,以防止P300 ERP与一些参与者不属预定目标的刺激发生反应(
研究表明,空间注意可以用来调节ERP组件(
至于P300 ERP的平均振幅在电极Cz对于每一个参与者,一个重要的区别是观察之间的两个条件(见图
当实验分类使用,VA条件的离线分类精度明显高于后条件(见图
在线结果显示,弗吉尼亚州的分类精度和原始比特率条件下都显著高于后条件(见表
根据提供的反馈11参与者试图控制BCI使用这两种刺激条件下,更容易清楚地计算目标刺激的次数,提出了在弗吉尼亚州的条件。最重要的是,所有的参与者持有的观点后条件让他们更累比VA条件(见表
本研究的主要目的是评估使用视觉注意力的影响在尝试传统的触觉P300 BCI的控制。两个刺激条件进行了探讨和比较。十一个参与者的测试结果显示,弗吉尼亚州条件可以获得性能优越和首选的参与者后条件。因此,视觉注意力的参与可以有积极的对触觉P300 BCI的性能和用户评价的影响。未来的工作将集中在进一步优化等触觉BCI刺激条件,进一步验证了参与者和BCI最终用户组。
使用的数据来支持本研究的结果包括在本文中。
作者宣称没有利益冲突。
这项工作是国家重点支持的研究和发展项目2017 yfb13003002。这项工作的部分也支持由中国国家自然科学基金会的资助下批准号。61573142,61773164,和91420302,计划引进人才的学科在格兰特B17017大学(111工程),和“曙光”项目由上海市教育委员会和上海教育发展基金会授予19 sg25。