AI 读心术来了,准确率高达 82%?论文已刊登在 Nature!

560afc91cfd2e623316ea8c877973f9b.gif

整理 | 屠敏

出品 | CSDN(ID:CSDNnews)

AI 的潜力有多大?现如今,读心术就要来了:人类无须张口,你的所想,AI 都知道。更为重要的是,这是 AI 首次通过非侵入式的方法学会了“读心术”。

这项研究成果来自于美国得克萨斯州奥斯汀分校的团队,目前已经刊登在《Nature Neuroscience》杂志上。他们基于 GPT-1 人工智能技术开发出一种解码器,可将大脑活动转化为连续的文本流,它有可能为无法说话的患者提供另一种与外界沟通的新型方式。

根据实验结果显示,GPT 人工智能大模型感知语音的准确率可高达 82%,令人惊叹。

c86786aafe818f63f58db83a57d4d4a9.png

b8f54d240d12cf59c7a8e6a2954e51fb.png

“读心术”的探索

事实上,科技圈对“读心术”的探索并非近日才展开。

过去,马斯克建立的神经科技公司 Neuralink 也一直在寻找高效实现脑机接口的方法,其还与加州大学戴维斯分校合作,实现用猴子大脑控制电脑的实验,旨在最终想要将芯片植入大脑,用“细丝”探测神经元活动。

不过,值得注意的是,Neuralink 的这种方案属于侵入式的。所谓侵入式,是指将脑机接口直接植入到大脑的灰质,因而所获取的神经信号的质量比较高。这种方式的缺点是容易引发免疫反应和愈伤组织(疤),进而导致信号质量的衰退甚至消失。

与之相对应的是非侵入式脑机接口,它是一种能够在人脑与外部设备之间直接建立通讯的人机交互技术,具有操作便捷、风险性小等优点。

以往,行业内可以通过功能性磁共振成像(FMRI)捕捉人类大脑活动的粗糙、彩色快照。虽然这种特殊类型的磁共振成像已经改变了认知神经科学,但是它始终不是一台读心机:神经科学家无法通过大脑扫描来判断某人在扫描仪中看到、听到或思考的内容。

此后,神经科学家一直希望可以使用 fMRI 等非侵入性技术来破译人类大脑内部的声音,而无需手术。

如今,随着《Semantic reconstruction of continuous language from non-invasive brain recordings》(https://www.nature.com/articles/s41593-023-01304-9.epdf)论文的发布,该论文的主要作者 Jerry Tang 通过将 fMRI 检测神经活动的能力与人工智能语言模型的预测能力相结合,可以以惊人的准确度重现人们在扫描仪中听到或想象的故事。解码器甚至可以猜出某人在扫描仪中观看短片背后的故事,尽管准确性较低,但也实现了一大进步。这也意味着,参与者不需要植入任何外界设备,AI 系统就能解码大脑中的想法。

2c3b78fd30df5b4c4b64ee221d67365c.png

没说过的话,AI 是怎么知道的?

自 ChatGPT、GPT-4 发布的几个月间,我们见证了大模型根据提示词不断输出内容的过程。

要问 AI 系统如何了解人类大脑中的想法,在论文中,研究人员透露,首先让参与者听新故事,然后功能性磁共振成像(FMRI)可以呈现出参与者大脑的活动状态。进而,基于最新开发的语义解码器将这些状态,生成相应的单词序列,并通过将用户大脑反应的预测与实际记录的大脑反应进行比较,最终预测每个候选单词序列与实际单词序列的相似程度,看看准确率如何,是否能“读心”。

具体来看,为了收集大脑活动数据,研究人员让研究对象在 fMRI 扫描仪内听一些音频故事。与此同时,通过 fMRI 扫描仪观察他们的大脑在听这些话时反应情况。如图 a 所示,3 名受试者在听 16 小时的叙述性的故事时,AI 系统记录了 MRI(磁共振成像)的反应。

30def77654d07109604f27bbe66a0c4c.png然后,MRI 数据被发送到计算机系统中。在这个过程中,研究人员使用了基于贝叶斯统计的解码框架。大型语言模型 GPT-1 在系统的自然语言处理部分提供了帮助。由于这个神经语言模型是在大量的自然英语单词序列数据集上进行训练的,它擅长预测最可能的单词。

接下来,研究人员在这个数据集上训练编码模型。在初始训练时,如 b 图所示,当受试者在试听此前没有用于模型训练的测试故事时,大脑会做出不同的反应。

进而,语义解码器可以根据参与者的大脑活动生成词汇序列,语言模型(LM)为每个序列提出连续性,而编码模型对每个连续性下记录的大脑反应的可能性进行评分。

简单来看,语义解码器学会了将特定的大脑活动与特定的单词流相匹配。然后根据匹配出来的单词流,试图重新输出这些故事。

不过,语义解码器主要捕捉了参与者想法中的要点,并不是一字一句的完整思想内容。如参与者听到的是,“我从气垫上站起来,把脸贴在卧室窗户的玻璃上,希望看到有一双眼睛盯着我,但却发现只有一片黑暗。”

但是想法却是,“我继续走到窗前,打开窗户,我什么也没看见,再抬头看,什么也没看见。”

又比如说参与者听到的是,“我还没有驾照”,语义解码器解码之后的版本可能是,“她还没有学会开车”。

9bea1c04000988ca61142e7fc2a0b670.png

语义解码器捕捉参与者的想法

通过这种方法,在一系列语言相似性指标下,语义解码器对测试故事的预测与实际刺激词的相似度明显高于预期。准确率也高达 82%。

0baf59097f1583b5d0f12c67e9d2788c.png

5be8b2ca34dab8f3c77d7a74a14511ff.png

该论文的另一位作者 Alexander Huth 表示,他们对系统出色的表现感到惊讶。他们发现解码后的单词序列通常能够准确地捕捉到单词和短语。他们还发现他们可以从大脑的不同区域分别提取连续的语言信息。

除此之外,为了测试解码的文本是否准确捕捉到故事的含义,研究人员还进行了一项行为实验,通过向只阅读解码后单词的受试者提问一系列问题。受试者在没有看过视频的情况下,能够正确回答超过一半的问题。

51e0f89d45ee026b1156826f32610a16.png

语义解码器刚起步,道阻且长

不过,当前,该语义解码器还无法在实验室以外的地方使用,因为它依赖于 fMRI设备。

对于未来的工作, 研究人员希望自然语言神经网络的快速进展能够带来更好的准确性。到目前为止,他们发现较大、现代的语言模型至少在编码部分工作得更好。他们还希望能够使用更大的数据集,比如每个受试者 100 或 200 小时的数据。

虽然这种非侵入性的方式,可能会对医学维度的研究以及患者有极大的好处,使其可以与他人进行可理解的交流,但是也存在隐私、伦理审查、不平等和歧视、滥用和侵犯人权等诸多问题,所以想要现实中应用也大有难度。

与此同时,研究人员表明,语义解码器仅在接受过训练的人身上以及与其合作下才能正常工作,因为针对一个人训练的模型不适用于另一个人,当前还无法做到通用。

“虽然这项技术还处于起步阶段,但重要的是要规范它能做什么,不能做什么,”该论文的主要作者 Jerry Tang 警告说。“如果它最终可以在未经个人许可的情况下使用,就必须有(严格的)监管程序,因为如果滥用预测框架可能会产生负面后果。”

该小组已在 GitHub 上提供了其自定义解码代码: github.com/HuthLab/semantic-decoding 。据悉该团队也在得克萨斯大学系统的支持下提交了与这项研究直接相关的专利申请。

更多内容可查看完整的论文内容:

https://www.nature.com/articles/s41593-023-01304-9

参考:

https://spectrum.ieee.org/mind-reading-ai

https://www.auntminnie.com/index.aspx?sec=ser&sub=def&pag=dis&ItemID=140000

推荐阅读:

▶百度也要造手机了,小度科技确认发布AI智能手机;iPhone 16 Pro将采用固态按键;Wasmer 3.3发布|极客头条

▶对话凯文·凯利:AI 会取代人的 90% 技能,并放大剩余的 10%

▶Orillusion引擎正式开源!AIGC时代下的WebGPU轻量级3D渲染引擎!

2ce81ad8692da31572b230f839fe9021.jpeg

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/43719.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

“机器人三定律”问世 | 历史上的今天

整理 | 王启隆 透过「历史上的今天」,从过去看未来,从现在亦可以改变未来。 今天是 2023 年 3 月 29 日,在 7 年前的今天,中国共享单车市场规模达到 12.3 亿元,用户规模达到 0.28 亿人。共享单车,这是一款高…

chatgpt赋能Python-python_def

Python 9009:了解Python高效编程的秘密 如果你是一名程序员,那么你一定知道Python。Python是一种广泛使用的高级编程语言,具有易学易用、跨平台、可扩展等优点。而Python 9009则是Python最新的版本,是为了增强程序员的代码编写效…

亚马逊广告转化率这么低怎么办?

2020年已经过去了3/4,你今天的指标完成了吗?为什么你的广告投入这么多,转化率还是这么低?转化率是是我们卖家最关心的点,因为转化率和订单挂钩,亚马逊广告的转化率多少才算合格呢?下面我就来简单讲一下。 举…

什么是亚马逊listing,分析listing流量来源,怎么优化listing

什么是亚马逊listing,分析listing流量来源,怎么优化listing。想做亚马逊电商的,首先你了解什么listing吗?这里,我解答一下,listing是亚马逊的一个产品介绍页面,记住一个商品只有一个listing。说…

亚马逊站内广告该如何优化?

第一点:广告优化应从Listing优化开始 广告的投放是从Listing优化开始的,一些卖家非常草率和粗心做了产品详细信息页面之后,就急于在网站上放置广告。在这种情况下,导致的结果就是广告转换率难以提高。如果转换率长期保持较低水平…

如何优化Facebook广告提高您的转化率!Facebook广告投放优化的高阶策略

如果您以前从未尝试过Facebook广告,那么您可能想知道如何进行有效的营销活动,从而产生更多的潜在客户和销售量。在本文中,将向您展示创建转换广告的Facebook广告的4个步骤。 凭借超过23.8亿的活跃月度用户和深入的定位功能,Faceb…

亚马逊广告点击率如何才能提高?

亚马逊设置广告位主要是为卖家提供更好的曝光、点击、销量增长渠道,但是你是否遇到过投放了广告没有点击率及曝光率,那么亚马逊广告点击率如何才能提高? 想要提高自己的广告点击率可以使用亚马逊鲲鹏系统进行操作,亚马逊鲲鹏系统有…

使用 Amazon Personalize 的用户细分功能来提高广告投放效果

Amazon Personalize 是一个全托管式的机器学习服务,开发人员在没有机器学习背景的情况下,可以使用自己熟悉语言的 SDK 或者控制台 GUI 点击轻松地构建一个实时推荐系统任务来满足对应业务的需要。目前 Amazon Personalize 已经在个性化推荐,相…

如何正确跟踪广告转化数据,优化广告投放效果?

为什么要做转化跟踪 广告界有一句老话,我知道我的广告费有一半是浪费掉的,但是不知道是怎么浪费掉的。所以对广告主来说广告跟踪非常重要,当你花了一大笔预算去做广告投放,带来的效果如何?如何根据每次广告投放的数据…

如何利用QA来提高亚马逊Listing的流量?

在亚马逊的运营中,对于Listing的优化,很多卖家习惯性地只关注关键词和Review,却容易忽略QA部分;其实亚马逊QA也是影响Listing权重的重要因素。QA在亚马逊Listing的产品详情页中占有非常重要的位置,是买家购物的重要参考…

关于亚马逊广告优化如何把握设置细节值得一看?

当前的亚马逊运营,站内广告成为标配,但很多新卖家,遇到广告投放就蒙圈,既没有广告投放的思路,也不知道如何把握设置的细节。 比如,在日常遇到的咨询中,最常遇到的就是: 新品上架后…

亚马逊广告CPC优化技巧 投放就有效

上篇文章我们介绍了亚马逊广告为什么没有效果,为什么有展示没有成单,为什么有点击没有成单等问题。今天这篇我们主要介绍亚马逊广告如何设置。都是干货! 亚马逊广告问题自查之后才能知道自己的问题在哪,然后修改,大神…

亚马逊运营之广告优化问题的见解!

很多卖家在运营中把广告优化等同于设置否定关键词,这个词被点击了5次没转化,否定;那个词被点击了3次没转化,否定;N多个词被否定之后,广告也变得越来越差了。 原因很简单,否定固然是广告投放过程…

高薪聘请“软件测试”专业老师“在线修改测试人简历”、逆风下测试人的简历如何才能脱颖而出

小编热衷于收集整理资源,记录踩坑到爬坑的过程。希望能把自己所学,实际工作中使用的技术、学习方法、心得及踩过的一些坑,记录下来。也希望想做软件测试的你一样,通过我的分享可以少走一些弯路,可以形成一套自己的方法…

软件测试培训班出来的,为啥那么容易被发现,简历到底该怎么写

首先,我说一句:培训出来的,优秀学员大有人在,我不希望因为带着培训的标签而无法达到用人单位和候选人的双向匹配,是非常遗憾的事情。 ​ 1,工作年限不匹配的 应届生就是没有经验的,不要写1-2年…

你的简历真的做的好吗?一起来看看软件测试简历的常见误区

目录 误区一:简历整体排版混乱,花花绿绿,不够简洁大方。 误区二:不要出现明显拉低简历逼格的技能和证书 误区三:工作经历模块流水账记录公司日常工作内容 误区四:专业技能描述跟工作经验不匹配 误区五&…

你投的简历提示不合适,建议参考STAR法则

投简历的时候老被提示为 您与该职位不太合适,无法进入面试阶段。建议参考STAR法则对简历进行修改,并突出您在专业知识方面的优势。 目测你是在拉钩上投的,企业的投递回复都是拉钩给的模板(所谓的STAR都是套路) 如果你…

个股呈现普跌

今日两市震动调整,到收盘,上证指数跌0.92%失守3600点,深证成指跌0.99%,创业板指跌0.19%。商场心情转弱,多空博弈剧烈,个股呈现普跌,挣钱效应较差。盘面上,重型机械、酒店餐饮、电源设…

透过顶级机构Q2持仓报告看美股不同板块的行情

美股股市走到今年二季度,市场出现了分化行情。部分板块受到政策影响而陷入低迷状态;有的版块因经济增长强劲迎来上涨行情,为此受到了不少投资机构的青睐。 近期,2021年二季度13F报告陆续释出,许多投资者都比较关心投资…