2
AI 研究证明大脑使用自动更正破译语言
source link: https://www.solidot.org/story?sid=69393
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
AI 研究证明大脑使用自动更正破译语言
在新研究中,MIT 的一组研究人员分析了 43 种不同的语言模型,许多模型都对下一个单词预测进行了优化。这些模型包括可以在得到提示时生成逼真文本的GPT-3(Generative Pre-trained Transformer 3),以及其他一些旨在提供填空功能的模型。研究人员给每个模型展示了一串单词,以测量其神经节点的活动。接着他们把这些模式同受试者在完成语言任务时候的人脑活动进行比较——受试者被要求完成听、阅读完整的句子,以及一次阅读一个单词等语言任务。研究表明,表现最好的下一个单词预测模型的活动模式与人类大脑的活动模式高度相似。此外这些模型中的活动也与人类行为指标相关,比如人们阅读文本的速度。
结果表明,下一个单词预测是语言处理中的一项关键功能,这一结论支持了之前提出但尚未得到证实的一项假设。科学家还没有发现任何进行此类处理的大脑回路或机制。研究者未来计划构建一些下一个单词预测模型的变体,以了解每个模型之间的微小变化会如何影响其处理能力。他们还计划将这些语言模型与为了完成其他类大脑任务(例如对物理世界的感知)而设计的模型结合起来。
Recommend
About Joyk
Aggregate valuable and interesting links.
Joyk means Joy of geeK