通过视觉头脑风暴指令连接梦境
人机交互
2024-08-15 v1
摘要
近年来对人类大脑的理解取得了突破，揭示了其高效处理和解释人类思维的惊人能力，为干预脑信号开辟了可能性。本文旨在开发一个直接的框架，利用自然语言等其他模态来翻译原始梦境。我们提出了DreamConnect，采用双流扩散框架来操控视觉刺激脑信号。通过整合异步扩散策略，我们的框架建立了与人类梦境的有效接口，逐步完善其最终意象合成。通过大量实验，我们证明了该方法能够以高保真度精确指导人类脑信号。我们的项目将在 https://github.com/Sys-Nexus/DreamConnect 公开。
引用
@article{arxiv.2408.07317,
title = {Connecting Dreams with Visual Brainstorming Instruction},
author = {Yasheng Sun and Bohan Li and Mingchen Zhuge and Deng-Ping Fan and Salman Khan and Fahad Shahbaz Khan and Hideki Koike},
journal= {arXiv preprint arXiv:2408.07317},
year = {2024}
}