田渊栋:关于GPT-4的一些感想

点击上方“AI遇见机器学习”,选择“星标”公众号

重磅干货,第一时间送

来自:新智元

作者:田渊栋

编辑:桃子

【导读】对于研究者们而言,GPT-4的出现意味着什么呢?

OpenAI昨天发布了GPT-4,试用了一下确实很不错。

在我主要关心的故事生成方面,与ChatGPT生成出来的故事相比,GPT-4文笔更佳细节更多,更擅长生动具体的描绘,情节也开始出现一些有趣的转折。当然,ChatGPT有的问题,比如说缺乏整体布局谋篇能力,角色不突出,叙事展开比较无聊,续写段落会很快归于一个平庸的结尾等等,在GPT-4上面仍然存在。

从它的性能报告上来看,与GRE verbal接近满分相比,GRE写作只有4分,大学预修英语写作也只有2分(3分及格),而且从GPT-3到4没有进步,不知道是不是和这些问题有关联。

e4ac1dcde140b9c1874f0b1fbfb2f947.png

但不管怎么说,GPT-4已经能帮我们干很多日常工作了。自从2013年深度学习开始爆发以来,仅仅过了十年,我们就有了如此强力的工具,其进化速度可以说是超出想象。

2017年我在为什么有些学数学的看不惯甚至鄙视 Deep Learning?这个回答里面写了一些大胆的猜测,比如说“漫漫长夜里瞎摸,太阳还没有露头”,现在看起来这些预测还是大体正确的,只是想不到,这一天会那么快到来。

一个技术,一旦变成像微积分一样的通用工具,那接下来带来的巨大变革,是可以预期的。

如果再把眼光放得长远些,将来会发生什么事呢?

我在2020年左右也有一些思考,放在自己的科幻小说里了。总的来说,如果这样的趋势发展到极致,再加上连实物产品的制造都可以就地取材完全自动化,那最后的结果就是「所思即所得」:只要能构思出一个东西,它就会以极低的成本出现在自己的面前。

大部分重复性劳动,只要可以被机器无限制复制,其价值就会降到近乎为零,成为和水和空气一样无所不在的公共品。

在这种条件下,「独一无二」就会成为大家所珍视的价值和意义。也许以后,判断人才的主要因素,不再是完成学位,考试过关,而是看个人的经历和成就。

「同样的目标下比别人做得更好」是一种独一无二,「去往从未有人去过的方向」也是一种独一无二。这不仅包括同行认可的学术成就,比如解开无人能解的难题,开创并探索一个新的学术方向,更包括独一无二的经验、见解、思考方式,乃至三观,比如说一个拄着拐杖徒步探险过南极的程序员,他/她对这个世界会有什么样的观点,见解和感悟?一个曾自制火箭去往月球但中途失控,又奇迹被救的历史系学生,将在自传里如何讲述这段经历?

这些与个人特质紧密结合的话语权,会让每个人都能占据人类社会中的一个独特生态位,成为「人之为人」最终的定海神针。即便是将来意识能够上传,数字孪生能够实现,这种独特人格仍然是无法复制的——完全相同的个体,只要变成了两个并开始各自接受不同的外界信号刺激,他们内部的状态就会因更新而不同,轨迹就会开始分叉,从而再次变得独一无二。

总的来说,每个人都通过自身的「道」来证明自己的选择,又因为过去的选择,来累计自己独一无二的特质。无法预先判断谁比谁更优秀,因为计算这个判定函数本身,就需要个体践行自己的道路。而无数的,坚持各自方向的人聚在一起,就会不断涌现出各种奇妙的想法,有一些被实践证明正确的,就会影响到他人并且吸引到追随者。而包含这些所有个体的,一个多元包容的世界,就会充满前进的动力。

扯远了。

对于研究者们而言,GPT-4的出现意味着什么呢?

16a81a2347a816a3549b81188e9110b1.jpeg

我们有两种极端的选择,其一是关起门来,不听不看,沿用旧的思维惯性去构思研究路线,继续发表下一篇文章;也可以从此百分百抛弃以前的研究思路,撕掉所有课本,相信算力为王,大模型大数据就是一切。

我觉得这两种态度都不可取。研究的范式要有变化,不再是发现特定的知识,而是研究模型学习的机制,寻求其学习能力的本源。比如说通过海量的数据训练,现有的模型可以自动学会很多概念。

但模型是如何学会这个概念的,为什么大模型会学得更快更好,它怎样从数据中被发现,被模型抓住并且在训练中不断被强化?高级的概念是如何形成的?现有的模型如何抓住这些概念,以什么样的机制抓住它们?我觉得这些可能是在长远上来看,真正有意义的基础研究方向,也是把”人工智能“这个玄学,真正转化成科学的最终出口。

当然了,这些应该说是几十年的尺度上看的,要做这些研究,需要大量的基础知识,充足的耐心,擅长接受超出自己认知范围内的新生事物,又能把它融入原本的工作流和研究思路中去。

这可以算是自己在研究上独一无二的「定海神针」吧,希望能够继续走下去。

参考资料:

https://zhuanlan.zhihu.com/p/614458786

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/45731.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

网络错误 请确保您已连接到网络并重试

windows2008从windows2003网络拷贝总提示:网络错误 请确保您已连接到网络并重试 处理办法: 运行 gpedit.msc,对组策略--计算机配置--windows设置--安全设置--本地策略--安全选项 中的 “网络安全:LAN管理器身份验证级别”项的值“没有定义”…

chrome连接已重置_如何重置(或调整)Chrome的下载设置

chrome连接已重置 By default, Chrome saves all downloaded files to the same location—a dedicated “Downloads” folder. The thing is, this isn’t always practical for all types of download files. The good news is you can easily tweak this setting. 默认情况下…

用友t1系统服务器连接失败,登录T1时服务器连接失败,请重新确认是怎么回事?...

可以重新再建一个新账套吗??? 可以重新再建一个新账套吗???[] 您好,软件未限制账套的个数,您可以在建立账套的服务社区李珊:怎么建立??铧霖钢材经营部:您打开…

LoadRunner提问求助 失败: “[10054] 对等端已重置连接” [MsgId: MERR-27780] 是什么

这里写自定义目录标题 欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants 创建一个自定义列表如何创建一个…

“已成功与服务器建立连接,但是在登录过程中发生错误“的解决方法

对于上述问题,我也曾被折磨得不轻。 网上找了很多方法,很多就是每个屁用! 别轻易就重新注册一个新的,否则后面可能还需要花时间去把它删了。 首先,我们会看到连接成功但是登陆不上的报错图。 电脑不同,可…

chrome报您的连接不是私密连接的解决办法之一一重置设置

一. 出现问题 公司WIFI环境下 访问某个项目的测试地址 一分钟前,谷歌浏览器正常使用 一分钟后就报 ”您的连接不是私密连接“ 然后我试一下访问自己本地跑起来的项目 竟然!竟然还报了跨域的错误。。。 然后我在Firefox和Safari试了下,…

window,tns连接关闭问题处理

哪位大佬救命下,我window上的oracle忽然就报了这个了,tns连接关闭,试了重启监听和数据库服务不行,重新配监听也不行, system账户管理员账户也全部登录不上都是报这个,账户登不上我数据也没法导出&#xf…

WP出现“无法登陆后台连接已重置”的原因及解决方法

个人博客:alvincr.com。此文链接:https://alvincr.com/2021/01/can-not-login-in-backstage/ 1 背景 1 现象描述 开启CDN加速后能够正常访问网站内容,但是当进入后台时会出现连接已重置。 2 产生原因 上述现象是由于CDN服务器使用缓存造成的&#x…

巴比特 | 元宇宙每日必读:AI时代,小团队获得大成就的案例会越来越多,未来百人、几十人规模上市公司将大量出现...

摘要:据投资实习所报道,AI 时代诞生的初创企业也将从小做起。他们将利用开源和云计算快速起步并迭代。但由于 AI 的存在,他们将在更长的时间内保持较小规模,其中最成功的企业只需要少数员工就能实现惊人的规模。像 Instagram &…

精神心理科医生:抑郁症正在好转的5种表现

对于“抑郁症的治疗手段有哪些”这个问题,想必好心情的老朋友们都会抢答了。 没错,主要有三种:药物治疗、心理治疗和物理治疗(答不上来的赶紧面壁去~)。 在这些“治疗利器”的助力下,我们只要积极接受并配…

广东省主修计算机学校,涉外学子在省职业院校技能大赛上频频获奖

知识点亮未来技能成就人生 近期,由广东省教育厅举办的2020—2021年度广东省职业院校学生专业技能大赛信息网络布线赛,在广东珠海广东科学技术职业学院举办。 广州涉外经济职业技术学院信息工程学院19级计算机网络技术1班同学周嘉立、19级计算机网络技术2…

春节前最后一场直播

春节前最后一场直播! 我们特别邀请了 TikTok官方认证TSP 红制作联合创始人 张捷 作客TiChoo直播间,和大家一起聊聊 【TikTok电商年度数据盘点及直播实操落地经验】 直播时间: 明晚!2022-01-20 晚 20:00 长按下方图片扫码预约&…

180天如何突击高考2-从465到378...

180天如何突击高考2-从465到378… 文章目录 180天如何突击高考2-从465到378...前言:关于遍历的策略关于英语学习的小技巧。关于其他技巧和心态的梳理关于下一步计划: 前言: 上次写了《180天如何突击高考-从400到550?》之后&#…

(附源码)node.js中小学生中文写作网 毕业设计 250623

基于node.js中小学生中文写作网 摘 要 信息化社会内需要与之针对性的信息获取途径,但是途径的扩展基本上为人们所努力的方向,由于站在的角度存在偏差,人们经常能够获得不同类型信息,这也是技术最为难以攻克的课题。针对中小学生中…

node.js-医院预约挂号系统的设计与实现毕业设计源码141041

医院预约挂号系统 摘 要 随着科学技术的飞速发展,各行各业都在努力与现代先进技术接轨,通过科技手段提高自身的优势;对于医院预约挂号系统当然也不能排除在外,随着网络技术的不断成熟,带动了医院预约挂号系统&#xff…

node.js+小程序基于微信小程序的校园失物招领系统毕业设计源码072343

微信小程序的校园失物招领系统 摘 要 随着我国经济迅速发展,人们对手机的需求越来越大,各种手机软件也都在被广泛应用,但是对于手机进行数据信息管理,对于手机的各种软件也是备受用户的喜爱,微信小程序的校园失物招领…

Node.js潮牌官网 毕业设计-附源码 010955

摘 要 随着社会的发展,计算机的优势和普及使得潮牌官网的开发成为必需。潮牌官网主要是借助计算机,通过对首页、站点管理(轮播图、公告栏)用户管理(管理员、注册用户)内容管理(潮流资讯、资讯分…

node.js基于微信小程序的校园失物招领毕业设计源码072343

微信小程序的校园失物招领系统 摘 要 随着我国经济迅速发展,人们对手机的需求越来越大,各种手机软件也都在被广泛应用,但是对于手机进行数据信息管理,对于手机的各种软件也是备受用户的喜爱,微信小程序的校园失物招领…

Flutter七日总结

多看星空方知何谓渺小,多看细胞方知何谓浩大,我是巨人,也是沙粒,崇高并谦卑着----张风捷特烈 写这个系列主要是出于以下目的: 1.给自己一个挑战,并附加时间限制 2.一直想要表达一下:遇到新技术时的态度&am…

node.js基于vue框架潮牌官网设计与实现毕业设计源码010955

摘 要 随着社会的发展,计算机的优势和普及使得潮牌官网的开发成为必需。潮牌官网主要是借助计算机,通过对首页、站点管理(轮播图、公告栏)用户管理(管理员、注册用户)内容管理(潮流资讯、资讯分…