Concept2Brain：一种用于预测文本和图片引发的神经生理反应的AI模型

《Nature Communications》：Concept2Brain: an AI model for predicting neurophysiological responses to text and pictures

　　

摘要

基于人工智能的技术发展为人类行为与体验与大脑功能之间的关联研究带来了新的机遇。在此，我们介绍了Concept2Brain模型，这是一种深度学习网络，能够针对通过图片或文字传递的语义/情感信息生成模拟的电生理反应。该模型借助OpenAI的CLIP等人工智能技术，先对刺激内容进行表征，再将其映射到电生理潜空间中。我们的研究表明，这一公开可用的工具生成的模拟神经反应与实际观测结果极为相似。Concept2Brain模型作为一种网络服务工具，可通过预测大脑对各类语义概念或图片的反应，帮助创建开放且可重复的脑电图数据集。除了具有实际应用价值外，它还为基于人工智能的大脑活动建模铺平了道路，为研究大脑如何表征世界提供了新的可能性。