摘要。脑机接口旨在从用户的大脑活动中获取命令,以便将其传递到外部设备。为此,它可以检测到所谓的“主动”BCI 中的心理状态的自发变化,或“反应性”BCI 中大脑对外部刺激的反应的瞬时或持续变化。在后者中,用户通过感官通道(通常是视觉或听觉)感知外部刺激。当刺激持续且周期性时,大脑反应会达到可以相当容易检测到的振荡稳定状态。我们关注基于 EEG 的 BCI,其中周期性信号(机械或电)刺激用户皮肤。这种类型的刺激会引起体感系统的稳态响应,可以在记录的 EEG 中检测到。表征这种反应的振荡和锁相电压分量称为稳态体感诱发电位 (SSSEP)。研究表明,SSSEP 的幅度会受到特定心理任务的调节,例如当用户将注意力集中在或不集中在体感刺激上时,从而允许将这种变化转化为命令。实际上,基于 SSSEP 的 BCI 可以从直接的 EEG 信号分析技术中受益,就像反应式 BCI 一样,同时允许自定节奏的交互,就像主动式 BCI 一样。在本文中,我们对与利用 SSSEP 的基于 EEG 的 BCI 相关的科学文献进行了调查。首先,我们努力描述 SSSEP 的主要特征和允许调整刺激以最大化其幅度的校准技术。其次,我们介绍了作者实施的信号处理和数据分类算法,以便在基于 SSSEP 的 BCI 中详细说明命令,以及他们在用户实验中评估的分类性能。
了解大脑编码上肢运动如何对于辅助技术中的控制机制至关重要。辅助技术,尤其是脑机界面(BMI)的进步突出了解码运动意图和运动学对有效控制的重要性。基于EEG的BMI系统由于其非侵入性和诱导神经可塑性的潜力而增强运动康复结果的潜力而显示出希望。基于EEG的BMI显示了解码运动意图和运动学的潜力,但研究表明与实际或计划的运动的相关性不一致,对实现精确和可靠的假体控制提出了挑战。此外,个体的预测性脑电图模式的变异性需要个性化调整以提高BMI效率。整合多个生理信号可以提高BMI的精度和可靠性,为更有效的运动康复策略铺平道路。研究表明,大脑活动在运动过程中适应引力和惯性约束,突出了神经适应生物力学变化在创建辅助设备控制系统中的关键作用。本综述旨在全面概述与生理和辅助上肢运动相关的解密神经活动模式的最新进展,从而强调了在神经疗程和脑镜界面发展中未来探索的途径。
患有严重神经损伤的个体通常依赖于辅助技术,但是当前的方法在准确解码多度自由度(DOF)运动方面存在局限性。皮质内脑机界面(IBMIS)使用神经信号提供更自然的控制方法,但目前在更高的动作方面挣扎 - 大脑毫不费力地处理。从理论上讲,大脑通过肌肉协同作用简化了高功能运动,这些肌肉将多个肌肉连接起来作为单个单位。已经使用降低性降低技术进行了研究,例如主成分分析(PCA),非负矩阵分解(NMF)和Demixed PCA(DPCA),并成功地用于降低噪声并改善非侵入性应用中的噪声并提高离线解码器的稳定性。然而,它们在改善各种任务的植入记录的解码和普遍性方面的有效性尚不清楚。在这里,我们评估了大脑和肌肉协同作用是否可以在非人类灵长类动物的IBMI表现中提高执行两多手指任务的IBMI表现。具体来说,我们测试了PCA,DPCA和NMF是否可以压缩和降低大脑和肌肉数据,并改善跨任务的解码器概括。我们的结果表明,尽管所有方法在解码准确性时都有最小的损失有效地压缩数据,但没有通过降解来改善性能。此外,这些方法均未增强跨任务的概括。这些发现表明,虽然降低维度可以帮助数据压缩,但仅凭它可能无法揭示提高解码器性能或概括性所需的“真实”控制空间。需要进一步的研究来确定协同作用是最佳控制框架还是是否需要替代方法来增强IBMI应用中的解码器鲁棒性。
患有严重神经损伤的人通常依赖辅助技术,但目前的方法在准确解码多自由度 (DoF) 运动方面存在局限性。皮层内脑机接口 (iBMI) 使用神经信号来提供更自然的控制方法,但目前难以处理更高自由度的运动——大脑可以轻松处理这些运动。据推测,大脑通过肌肉协同作用简化了高自由度运动,肌肉协同作用将多块肌肉连接起来作为一个单元发挥作用。这些协同作用已经使用降维技术进行了研究,例如主成分分析 (PCA)、非负矩阵分解 (NMF) 和分离 PCA (dPCA),并成功用于降低噪音和提高非侵入式应用中的离线解码器稳定性。然而,它们在改善不同任务中植入记录的解码和通用性方面的有效性尚不清楚。在这里,我们评估了大脑和肌肉协同作用是否可以提高非人类灵长类动物执行双自由度手指任务时的 iBMI 性能。具体来说,我们测试了 PCA、dPCA 和 NMF 是否可以压缩和去噪大脑和肌肉数据并提高解码器在任务中的泛化能力。我们的结果表明,虽然所有方法都能有效地压缩数据,同时解码精度损失最小,但没有一种方法能通过去噪来提高性能。此外,没有任何方法能增强跨任务的泛化能力。这些发现表明,虽然降维可以帮助数据压缩,但单独使用降维可能无法揭示提高解码器性能或泛化能力所需的“真实”控制空间。需要进一步研究以确定协同作用是否是最佳控制框架,或者是否需要替代方法来增强 iBMI 应用中解码器的鲁棒性。
目前,构建可靠的脑机接口 (BCI) 的努力涵盖了多个方面,从硬件到软件,再到更复杂的实验协议和个性化方法。然而,尽管付出了这些努力,但仍有显著改进的空间。我们认为,一个相当被忽视的方向是将 BCI 协议与基础神经科学的最新进展联系起来。鉴于这些进展,特别是对 beta 频带活动的爆发性特征和 beta 爆发的多样性的描述,我们重新审视了 beta 活动在“左手 vs. 右手”运动想象任务中的作用。目前针对此类任务的解码方法利用了运动想象在感觉运动皮层中产生时间锁定的诱导功率变化这一事实,并依赖于带通滤波功率变化或协方差矩阵,这些矩阵也描述了从不同通道记录的信号中共同变化的功率变化。尽管人们对运动想象过程中 beta 爆发活动的动态知之甚少,但我们假设 beta 爆发的调节方式应该类似于其在执行真实上肢运动时的活动。我们表明,基于 beta 突发调制模式的分类特征产生的解码结果等于或优于多个开放脑电图数据集中通常使用的 beta 功率,从而提供了对这些生物标志物特异性的洞察。
根据侵入性,BCI 主要分为两类。非侵入式 BCI 无需手术即可从外部刺激大脑。尽管某些技术可以针对大脑的较小区域,但非侵入式 BCI 可以覆盖大脑的较大区域。相比之下,侵入式系统可以应用于小区域,甚至具有单神经元分辨率,但会带来更高的生理风险(Ramadan 和 Vasilakos,2017 年)。基于 BCI 的相关性和扩展性,近年来出现了新的技术和公司,专注于开发新的侵入式系统,以神经元粒度刺激大脑。Neuralink 就是一个例子(Musk 和 Neuralink,2019 年),这家公司设计了颠覆性的 BCI 系统来记录神经元级别的数据,目前正致力于覆盖刺激功能。此外,神经尘埃(Seo 等人,2013)是一种由数百万个位于大脑皮层中的纳米级可植入设备组成的架构,可以进行神经记录。神经尘埃的演变是无线光遗传学纳米网络设备 (WiOptND)(Wirdatmadja 等人,2017),它使用光遗传学来刺激神经元。尽管这些方法很有前景,但 Bernal 等人 (2020) 的作者表明,它们存在漏洞,可能允许攻击者控制两个系统并执行恶意刺激动作,从而改变自发的神经元信号。根据攻击的覆盖范围(就大脑区域和受影响的神经元数量而言),网络攻击者可能会造成永久性脑损伤,甚至导致患者死亡。在同一方向上,Bernal 等人 (2021) 发现 BCI 的网络安全领域还不够成熟,非复杂的攻击可能会造成重大损害。总之,攻击者可以利用 BCI 漏洞来利用这些有前途的神经刺激技术。以这些研究的发现为动机,本文重点关注针对旨在改变神经元行为的网络攻击的稀缺研究。此外,还需要新的方法来衡量和理解这些攻击的影响。特别是,这些问题具有特殊的意义,因为攻击可能会恶化或重现常见神经退行性疾病的影响(Bernal 等人,2021 年)。为了改进以前的挑战,这项工作的主要贡献是定义和实施一种新的神经元网络攻击,即神经元干扰网络攻击 (JAM),重点关注神经活动的抑制。本研究旨在探索抑制性神经元网络攻击对大脑的影响。然而,文献中缺乏全面的神经元拓扑结构,因此,我们模拟了小鼠视觉皮层的一部分,放置在大脑的枕叶区域,定义了小鼠试图离开特定迷宫的用例。神经元拓扑是使用经过训练以解决此特定用例的卷积神经网络 (CNN)(Géron,2019)构建的。这项工作的第二个贡献是评估了 JAM 网络攻击对特定场景中的神经元和人工模拟造成的影响。为了进行分析,我们使用了现有指标,但也定义了一组新指标,得出结论:JAM 网络攻击可以改变自发的神经元行为,并迫使小鼠做出不稳定的决定以逃离迷宫。
脑机接口,尤其是被动脑机接口 (pBCI),由于能够估计和监控用户心理状态,越来越受到基础研究和应用研究与开发社区的关注。测试新的管道和基准分类器以及特征提取算法是进一步研究该领域的关键。不幸的是,pBCI 研究中的数据共享仍然很少。COG-BCI 数据库包含 29 名参与者在 3 个独立会话中的记录,这些会话中有 4 个不同的任务 (MATB、N-Back、PVT、Flanker),旨在引发不同的心理状态,总共超过 100 小时的开放 EEG 数据。该数据集在主观、行为和生理层面进行了验证,以确保其对 pBCI 社区的实用性。此外,还给出了一个概念证明,其中包含心理工作量估计管道和结果的示例,以确保数据可用于 pBCI 管道的设计和评估。这项工作为在开放科学框架中推广 pBCI 的使用做出了巨大努力。
受邀回答问题的 950 人中,有 846 人参与,其中 806 人完成了调查。调查对象的人口结构多种多样,大多数受访者年龄在 36-45 岁之间(26%),性别均衡(52% 为女性),主要为白种人(86%)。大多数受访者(98%)从未使用过 BCI,65% 的人在调查前并不知道 BCI 的存在。人们对 BCI 类型的偏好因情况而异。伦理问题很普遍,尤其是植入风险(98%)和成本(92%)。在人口统计变量和对 BCI 的不平等、监管及其在医疗保健中的应用的看法之间存在显著关联。结论:尽管人们对 BCI 有着浓厚的兴趣,尤其是用于医疗应用的 BCI,但伦理问题、安全和隐私问题仍然十分重要,这凸显了需要明确的监管框架和伦理准则,以及教育举措来提高公众的理解和信任。通过共同设计原则促进公众讨论并让潜在用户、伦理学家和技术专家等利益相关者参与设计过程,有助于使技术发展与公众关注保持一致,同时也帮助开发人员积极解决道德困境。
本文件为制定方法标准,部分内容参考国内现行标准、国外闭环器械监管指南以及科学 研究中的采用脑机接口技术的医疗器械常用测试方法。如 YY 0989.3-2023 手术植入物有源 植入式医疗器械第 3 部分:植入式神经刺激器、美国食品药品监督管理局 Technical Considerations for Medical Devices with Physiologic Closed-Loop Control Technology 、期刊论 文 Translating the brain-machine interface/Brain computer interface: control signals review/Brain computer interface: control signals review/A Comprehensive Review on Brain – Computer
Nadia Sciacca,Tom Carlson Aspire Create,伦敦大学学院 RNOH,斯坦莫尔,HA7 4LP,英国 电子邮件:{nadia.sciacca.17; t.carlson}@ucl.ac.uk 摘要— 如今,技术为人类提供了许多交流几乎所有事物观点的方式。视觉、听觉和触觉媒体是人类最常用的媒体,它们以如此自然的方式支持交流,以至于我们甚至不会主动考虑使用它们。但是对于那些失去运动或感觉能力的人来说,他们很难或不可能控制或感知这些技术的输出,该怎么办?在这种情况下,也许唯一的交流方式可能是直接使用脑信号。因此,本研究的目标是为四肢瘫痪的人(他们可能被限制在自己的房间或床上)提供一种远程呈现工具,以促进我们许多人认为理所当然的日常互动。在我们的案例中,远程呈现工具是一个远程控制的机器人。它可以作为用户日常生活的一种媒介,通过虚拟方式与位于远程房间或地方的朋友和亲戚联系,或者与不同的环境进行探索。因此,目标是设计一个人机系统,使用户能够仅使用思想来控制机器人。技术部分由脑机接口和视觉界面组成,以实现机器人的“模拟触觉共享控制”。在用户和机器人之间实现共享运动控制,并实现自适应功能分配以管理情况的难度。利用这种“模拟触觉反馈”的控制方案是使用人机合作框架进行设计和评估的,并且已经通过五名参与者评估了这种交互方式的好处。初步结果表明,使用“模拟触觉反馈”的控制和合作比没有“模拟触觉反馈”更好。