机构名称：
¥ 1.0
我们引入了 Mind Artist (MindArt)，一种新颖而高效的神经解码架构，可以以可控的方式从我们的脑海中捕捉艺术照片。最近，使用非侵入性脑记录进行图像重建取得了进展，但由于数据注释的稀缺，仍然很难生成具有高语义保真度的真实图像。与以前的方法不同，这项工作将神经解码转化为最佳传输 (OT) 和表示解耦问题。具体而言，在离散 OT 理论下，我们设计了一个图匹配引导的神经表示学习框架来寻找概念语义和神经信号之间的潜在对应关系，从而产生了一个自然而有意义的自我监督任务。此外，所提出的 MindArt 具有多个独立模态分支结构，能够将语义表示无缝地合并到任何视觉风格信息中，从而使其具有多模态重建和无训练语义编辑功能。
心灵艺术家：用人类思维创造艺术快照
主要关键词
相关文件推荐
