【重磅】世界首例无创脑机接口,无大脑电极植入操控机器臂与飞行器

    xiaoxiao2021-04-15  264

    美国明尼苏达大学的研究者日前取得一项重大突破,让普通人在没有植入大脑电极的情况下,只凭借“意念”,在复杂的三维空间内实现物体控制,包括操纵机器臂抓取、放置物体和控制飞行器飞行。该研究成果有望帮助上百万的残疾人和神经变性疾病患者。相关论文已经在 Nature 旗下期刊 Scientific Reports 以开放获取的方式发表。

    明尼苏达大学的 Bin He 团队首次实现通过无创EGG设备,让健康人凭借意念控制物体3D运动。视频展示了受试者头戴EGG帽,控制飞行器在复杂的三维空间中飞行及其原理。来源:Bin He,明尼苏达州大学

    “这是世界上首次在没有大脑植入的情况下,只靠思维操控机械臂,在复杂的三维环境中抓取物体,”该研究的负责人、明尼苏达大学生物医学工程教授 Bin He 在接受新智元采访时表示:“受试者只需要通过想象,他们就能真实地移动机械臂。”

    实验过程展示:明尼苏达大学的 Bin He 团队首次实现通过无创 EGG 设备,让健康人凭借意念在复杂的三维空间中控制物体运动。来源:Bin He,明尼苏达州大学

    这项研究基于脑机接口(Brain-Computer Interface,BCI)技术,通过一顶包含了64个电极的 EGG 帽子(EEG,即通过名为“脑电图描记仪”的医学仪器,收集并记录头皮处人体脑部产生的微弱的生物电流,最后放大这些记录生成的曲线图),记录受试者大脑中的微弱电流活动。随后,这些信号会被输入一台计算机,通过先进的信号处理技术和机器学习算法,将记录下来的这些“思维信号”转化为行动。

    EGG系统发展:从植入电极到无创设备

    实际上,“用意念控制物体”的概念很早就有了。

    不过,早期的研究多使用植入到大脑皮质中的入侵式电极阵列让受试者控制机械臂,或者使用神经肌肉电刺激控制病人自己的手臂。这些早期的系统都有着很大的风险,不仅手术过程(往大脑中植入多个电极)带有极大风险,也存在着术后并发症以及感染的可能,并且也很难保持一直都会有效。因此,这些侵入性研究通常应用范围有限,只能在局部范围使用。

    通过往大脑中植入电极阵列,瘫痪患者通过思维控制机械臂。来源:UPMC

    近来,非侵入式 EEG 设备得到使用。这一技术不涉及高风险的昂贵外科手术,并且能自由、快速增加电极数量,因而越来越多的研究者开始尝试通过这种无创性的方式,让人凭借意念控制物体。

    2015 年,美国休斯顿大学的研究员开发了一款基于EGG的系统,让一名截止患者成功凭借意念(thinking)控制假肢抓取物体,比如水杯、信用卡。

    休斯顿大学开发的一套基于EEG的设备,让一名截肢患者使用假肢抓取物体,主要由他的思想控制。来源:休斯顿大学

    当然,还有其他基于EEG的系统,包括控制下肢外骨骼和使用意念控制的机械臂的外骨骼设备。但是,这些系统都不能完成多维度的灵活控制。

    首次实现无创 EGG 设备,在用意念在三维空间控制机械臂抓取物体

    明尼苏达大学的 Bin He 教授及其团队开发这套 EEG BCI 系统的目的,是希望能实现在三维空间内自然、无阻碍的机器人运动,比如拿起水杯,在桌子上任意移动,甚至举起杯子喝水。

    实验中,共有 13 名健康的人类受试者头戴 EEG 帽完成了实验。其中,有 7 名女性,平均年龄为 27.3 岁。这些受试者逐渐学会利用意念,控制机械臂在三维空间中进行活动。最终,他们能够在任意位置完成这些任务。所有参与实验的人都能保持抓取物体的成功率在 80% 以上,在把物体放回到货架上的成功率超过 70%。

    试验设置:在15个 session 中,受试者需要对物体依次实现不同级别的控制:仅控制虚拟鼠标,用机械臂抓取四个物体、五个物体、以及随机在货架上抓取目标物体。来源:论文

    从原理上看,本次研究用于控制机械臂的方法,与此前在大脑中移植电极控制机械臂的方法类似。当人类运动或者想象运动的时候,运动皮层的神经元会被激活,产生微弱的电流。想象做出不同的动作,会激活各种不同的神经元组合。这些神经元的活动情况已经在早先的实验中得到验证。

    受试者通过脑波控制视频游戏中的虚拟直升飞机。来源:Bin He,明尼苏达大学

    早在 2011 年,Bin He 教授的团队就已经发表成果,当时他们成功让健康的人类受试者使用非侵入式EEG技术控制虚拟飞行器。现在,他们已经能够控制真实的飞行器在复杂三维空间中飞行。

    在这项新的研究中,Bin He 教授及其团队使用更先进的信号处理技术和机器学习算法,对可能的运动情况及训练过程进行了分类。

    明尼苏达大学的研究受试者戴了一顶特殊的无创脑电图描记仪(EEG)帽子,只通过想象在3D空间中移动机械臂。来源:明尼苏达大学科学与工程学院

    从用意念控制虚拟物体移动到控制物体三维运动,“主要的挑战是与以前(控制四轴飞行器)相比,这次的研究要求受试者执行复杂的任务,”Bin He 教授表示,“所有的工作,包括实验研究和系统设计、训练受试者和信号处理技术”,都需要改良。

    具体说,“我们解码了运动皮层中 mu-rhythm(约10 Hz振荡)以上的大脑运动意图,” Bin He 告诉新智元:“此前的研究中,通过 fMRI 和 EEG 成像技术发现,想象运动跟实际运动产生的脑电波十分类似。因此,在这次研究中,我们提取事件的同步或去同步信号(synchronization or desynchronization signals),然后训练计算机对人脑的状态(意图)进行分类,并将控制信号发送至机械臂,致使机械臂产生实际的运动。”

    “这项研究表明,人类能够仅适用无创 EGG 信号控制机械臂在三维空间内运动,” Bin He 教授在接受新智元采访时表示:“这对未来研发无创的大脑控制机器人和无创性大脑控制神经假体研究可能有重大意义。”

    研究团队的下一个目标是是继续发展这一 BCI 技术,让中风或者瘫痪患者使用无创 EGG 设备,通用意念在三维空间中控制假肢运动。

    论文:基于无创性脑电图控制机械臂实现抓取任务

    摘要

    脑机接口(BCI)技术旨在提供人类大脑和外部设备之间连接的桥梁。先前使用非侵入性BCI来控制虚拟对象(例如计算机光标和虚拟直升机)和真实世界对象(例如轮椅和四脚架)的研究已经证明了BCI技术的潜力。然而,尚未有研究证明,使用非侵入性BCI可以有效地控制机器人臂以完成抓握任务。这项研究中,我们发现一组包括13 名受试者的实验中,他们都可以自由调节大脑活动,以控制机器人手臂高精度地执行任务,这些任务一般都需要多个自由度的组合,以及两个连续低维度控制。受试者能够通过在仅仅几个训练期间的范围内调节其脑节律来有效地控制机器人臂的活动,并且在多个月内保持控制机器人臂的能力。我们的研究结果表明使用非侵入性BCI技术,对假肢进行人为操作的可行性。

    文章转自新智元公众号,原文链接


    最新回复(0)