视觉神经解码,即从大脑活动模式中解释外部视觉刺激的能力,是神经科学研究中的一项具有挑战性的任务。最近的研究集中于表征可以用群体级特征描述的多个神经元的活动模式。在本研究中,我们结合空间、光谱和时间特征来实现神经流形分类,该分类能够表征视觉感知并模拟人脑中的工作记忆活动。我们通过基于黎曼流形和二维 EEG 频谱图表示的自定义深度学习架构分别处理时空和光谱信息。此外,在查看 11 类(即全黑加 0-9 数字图像)MindBigData Visual MNIST 数据集时,使用基于 CNN 的分类模型对视觉刺激引起的 EEG 信号进行分类。在刺激引起的 EEG 信号分类任务上评估了所提出的集成策略的有效性,总体准确率达到 86%,与最先进的基准相当。
主要关键词