美国科学家开发了一种新的人工智能(AI)系统，可以将人在听故事或默想讲故事时的大脑活动转化为连续的文本流。
该系统由德克萨斯大学奥斯汀分校的一个团队开发，部分依赖于变压器模型，类似于驱动Open AI的ChatGPT和b谷歌的Bard的变压器模型。
研究小组在《自然神经科学》(Nature Neuroscience)杂志上发表了这项研究，他们表示，这可能会帮助那些有精神意识但无法说话的人，比如那些因中风而身体虚弱的人，再次进行清晰的交流。
与其他正在开发的语言解码系统不同，这个被称为语义解码器的系统不需要受试者进行手术植入，使过程无创。参与者也不需要只使用规定列表中的单词。
在解码器进行大量训练后，使用功能性核磁共振扫描仪测量大脑活动，在解码器中，个体在扫描仪中收听数小时的播客。
德州大学奥斯汀分校(UT Austin)神经科学和计算机科学助理教授亚历克斯·胡特(Alex Huth)说:“对于一种非侵入性的方法来说，与以前的方法相比，这是一个真正的飞跃。以前的方法通常是单个单词或简短的句子。”
他补充说:“我们正在让这个模型在很长一段时间内解码具有复杂思想的连续语言。”
结果并不是一字不差的文字记录。相反，研究人员设计它是为了捕捉所说或所想的要点，尽管不完美。大约有一半的时间，当解码器被训练来监控参与者的大脑活动时，机器产生的文本与原始单词的意思非常接近(有时甚至精确)。
例如，在实验中，一个参与者听到说话者说:“我还没有驾照”，他们的想法被翻译成“她甚至还没有开始学开车。”
该团队还解决了研究中可能滥用该技术的问题。本文描述了解码如何仅在自愿参与培训解码器的合作参与者中工作。
对于那些没有接受解码器训练的人，结果是不可理解的，如果接受了解码器训练的参与者后来表现出抵抗——例如，通过思考其他想法——结果同样是不可用的。
“我们非常重视对它可能被用于不良目的的担忧，并努力避免这种情况，”计算机科学博士生唐杰(Jerry Tang)说。“我们希望确保人们只在他们想要的时候使用这些技术，而且这些技术对他们有帮助。”
除了让参与者听故事或思考故事外，研究人员还要求受试者在扫描仪中观看四个简短的无声视频。语义解码器能够利用他们的大脑活动来准确描述视频中的某些事件。
