通向AGI的规划和展望 - Sam Altman ,the CEO of OpenAI

我们OpenAI的使命是确保AGI(通用人工智能) - 一种智能程度普遍高于人类的AI系统可以造福于全人类。如果我们成功创建了AGI,这项技术可以丰富我们的生活、推动全球经济发展,帮助我们发现能改变人类目前所受限的新技术,提升全人类的幸福。

AGI有很大的潜力,可以赋予每个人令人难以置信的新能力;我们可以想象一个世界,在这个世界中,我们所有人都可以从AGI那里获得任何你想做的任务的帮助,包括现在人工智能不太行的认知任务(现在的人工智能在感知任务上的表现更为出色),减少我们很多的工作量,为人类的聪明才智和创造力提供更广阔的空间。

另一方面,不得不承认,伴随AGI而来的,会存在严重的滥用AGI、AGI造成错误事故,以及造成一些社会层面恐慌混乱的风险。虽然AGI的优势如此之大,相对的风险也如此大,但我们不认为社会会因对其能力的恐惧而阻止它的发展,相反,社会和AGI的开发者应该想办法把AGI做得更好。虽然我们无法预测将来具体会发生什么,而且我们目前的项目进展也会遇到一些障碍,但我们只需要关注一些关键问题,我们将最关心的三个AGI原则总结如下:

1.我们希望借助AGI的能力,使人类在所生存的这个宇宙中实现最大化的繁荣发展。我们不指望未来是一个毫无保留全部托出的乌托邦,但我们想要最大限度地利用AGI的优势,降低它的负面影响,并使AGI成为人类发展的助推器;

2.我们希望AGI的益处、利用和治理能够被广泛而公正地分享;

3.我们希望成功地应对AGI带来巨大的风险。在面对这些风险时,我们承认理论上看似正确的事情在实践中可能会出现一些奇怪的状况。但我们相信,我们必须通过部署不那么强大的技术版本来不断学习和适应,以便将“一次性成功”的风险降到最低。

为了更充分的应对AGI的到来而做好准备,我们认为现在有几件事情非常值得去做。

首先,随着我们创建的系统越来越强大,我们希望能够部署它们,并在现实世界中实践如何更好使用它们,积累相关使用经验。我们认为这是谨慎地引导AGI的最佳方式,逐渐过渡到拥有AGI的世界比突然进入这样的世界更好。强大的人工智能将使世界进步的速度大大加快,逐步适应这种变化也是更好的选择。

这种逐步过渡的方式可以给人们、政策制定者和机构足够的时间去了解正在发生的事情和变化,亲身体验这些AI系统的好处和弊端,以适应我们的经济社会发展,并制定相应的监管措施。这也允许社会和人工智能共同进化,让人们在风险相对较低的情况下,对于未来真正所想要的,所追求的,有更清晰的思考和规划。

在应对AI系统部署所面临的各种挑战时,最佳方式无疑是通过快速学习和谨慎迭代,来构建一个紧密的反馈循环。社会将面临这些AI系统部署应用的问题,例如,哪些是人工智能系统所允许的行为,如何解决AI系统偏见问题,如何处理人类的就业岗位流失问题等。最优决策将取决于技术的发展路径,像任何新兴领域一样,大多数专家的预测到目前为止都是错误的。这使得在我们在提前对项目做出详细规划变得非常困难,因为不得不考虑未来外部变量的变化,会影响我们一开始的设想。

一般来说,我们认为在世界范围内更广泛的使用人工智能将会带来巨大益处,并希望推广和促进它的使用(通过将模型放入我们的API、开放源代码等)。我们相信民主化的访问也将产生更多更棒的研究,更分散的权力(没有将算法权利集中在少数人中),更多的AI应用带来的增益,以及让更多的人贡献自己对此的新想法。

随着我们的系统越来越接近通用人工智能,我们对模型的创建和部署会变得越来越谨慎。我们的决策将需要比往常的新技术应用部署有更高的谨慎,也会比许多用户希望的更谨慎。虽然也有AI领域的观点认为AGI(包括后继系统)的风险是虚假的,如果他们最终是正确的,我们会对此感到高兴,但我们仍然会视风险存在去运作AI系统。

在某个时候,AI系统部署利弊之间的平衡(例如赋予恶意行为者权力,造成社会和经济混乱,加速不安全的竞赛等)可能会发生变化,在这种情况下,我们将围绕持续性迭代优化改进部署目标,修正和改变我们之前的计划。

其次,我们正在努力创建越来越和现实对齐,更为可控的模型。我们从第一版GPT-3模型转向InstructGPT和ChatGPT模型就是一个践行此目标的例子。

我们尤其认为社会必须就AI的使用范围达成广泛共识,在这个范围内,个体用户应具有很大的自主权。我们最终的希望是,全球机构将就这些界限达成共识;在短期内,我们计划进行外部输入的实验,不断完善我们的AI使用界限规则。同时世界机构也需要增强这方面的额外能力和经验,以便为AGI 的复杂决策的部署应用做好相关的准备。

虽然我们产品内置的“默认设置”可能会一定范围内限制用户使用发挥的空间,但我们计划让用户更轻松地更改他们正在使用的AI的行为。我们相信这样是对的,赋予每个人做出自己的决定的权力,尊重和巩固多样性的力量。

随着我们的模型变得更加强大,我们需要开发新的对齐技术(以及测试来了解我们当前的技术何时失效)。我们的短期计划是使用AI帮助人类评估更复杂模型的输出并监控复杂系统,并在长期内使用AI帮助我们想出更好的技术对齐方案。

更重要的是,我们经常认为需要同时取得AI在安全性和应用性能上的协同发展。单独谈论它们其中之一可能是一种错误的二元论,它们在许多方面是彼此相关的。我们目前做得最好的安全工作,就是与我们最强的AI模型一起完成的。所以,调高安全进步与模型能力进步的比率也很重要。

最后,我们希望进行全球对话,探讨三个关键问题:如何治理这些系统,如何公平分配它们产生的利益以及如何公平的进行共享接入。

除了上述这三个问题,我们尝试以一种使我们的激励与正向结果相一致方式,来建立我们的公司治理结构。我们在公司章程中有一条条款是关于协助其他组织推进安全性,而不是在后期阶段的AGI开发与他们进行激烈竞争。我们设有一个股东回报上限,这样我们就不会被激励去追求无尽的利润,从而冒险部署可能造成灾难性危险的AI系统(当然这也是为了与社会进行分享利益的一种方式)。我们有一个非营利组织来管理我们,让我们始终以人类的利益为导向而运营(并且可以置于任何营利利益之上),为了人类的安全需要,我们甚至可以做像取消股东的股权义务这样的行为,我们当然还会去赞助全球最广泛的UBI(普遍基本收入)试验。

同时我们也认为,向我们这样的AI机构在发布新系统之前接受独立审计很重要,我们将在今年晚些时候详细讨论这个问题。在某个时候,在新的AI系统进行训练之前,很有必要进行独立审查,对于目前最先进的AI系统,我们也同意限制其用于创建新模型的计算资源增长率。我们认为,关于AGI的相关安全使用,包括应该何时停止训练运行、决定释放安全模型或从生产中撤回模型的这些决策,需要在公共标准的制定中进行体现。最后,我们认为政府的介入参与也很重要,世界上的一些主要政府应该主动监督关注,超过一定规模的大模型的训练运行可能产生的问题,对此需要培养并具备对此的风险洞察力。

关于更远的规划,我们认为,人类的未来应该由人类决定,并且分享我们的工作进展信息对于公众来说是很重要的。所有尝试构建AGI的工作都应该受到严格审查,并对重大决策进行公众咨询。

第一个实现的AGI将成为智能持续演进的起点。我们认为,从这个起点开始会持续的向前进步,并在相当长的一段时间内保持过去十年的发展速度。如果这个真的实现,世界可能会变得非常不同,风险也会变得很高。一个错位的超级智能AGI可能会给世界带来严重的伤害,一个拥有决定性超级智能领先地位的专制政权也同样如此。

另外,能够加速科学进展的人工智能是特别值得考虑的,因为这可能比其他一切都更具影响力。足以加速自身进展的AGI可能会引起重大变革的出现,这可能发生得非常迅速(即使过渡开始比较缓慢,我们也预计在最后阶段会变得非常迅速)。我们认为,一个更缓慢的启动方式更容易保障安全,所以AGI的工作在关键时刻通过人类协调介入,使之减速就变得非常重要(即使在不需要介入协调问题的情况下,减速也可能很重要,因为要给社会足够的时间来适应这种变化)。

成功地过渡到具有超级智能的世界,可能是人类历史上最重要、最令人充满希望,也最令人恐惧的项目。这种成功还远未得到保证,而其间的利害关系(无限的下行和无限的上行)却可能将我们所有人团结起来。

我们可以想象人类能到达这样一个世界,这个世界的繁荣可能对于我们中的任何人来说都无法完全想象。我们希望为世界做出贡献,创造一个与创造这种繁荣相一致的AGI。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/21745.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

HTML的入门与进阶学习

一、简介 1、前端最核心技术 HTML (犹如骨架,毛坯房) CSS(装潢,把页面渲染更好看)二 二、基础内容 1.基础总结 1.内核划分 谷歌 火狐 ie 360浏览器 苹果浏览器 欧朋浏览器等等这些浏览器分别对应不同内核, 想让其浏览器…

OpenAI发布通用人工智能路线图:AGI比想象中来得更快

来源:机器之心 本文约2600字,建议阅读5分钟 通用人工智能的出现可能只是技术发展历程中的一个小节点,因为 AGI 或许可以加速自身的进步,从而以指数方式扩展能力。 在 ChatGPT 引爆科技圈之后,人们对于先进技术产生了更…

ChatGPT秘籍:学会prompt让你的对话质量瞬间提升

ChatGPT秘籍:学会prompt让你的对话质量瞬间提升 首先总结一下本文中会说到的prompt(提示词)种类以及我预期给出的分数: 随口一问流 0~40分 细节描述流 60~75分 案例投喂流 75~85分 模型赋能流 85~90分 一、随口一问流 这种提问方式非常简单&#…

前沿技术|人工智能的崛起和发展历程

前言: 人工智能的作用是使计算机能够模仿人类智能和学习能力,从而实现自动化、智能化和优化决策的目标。 文章目录 人工智能背景介绍发展状态未来展望 总结 人工智能 背景 人工智能(Artificial Intelligence,AI)的产生…

博士申请 | 新加坡国立大学金玥明组招收医学影像处理方向全奖博士/博后/RA

合适的工作难找?最新的招聘信息也不知道? AI 求职为大家精选人工智能领域最新鲜的招聘信息,助你先人一步投递,快人一步入职! 新加坡国立大学 新加坡国立大学(National University of Singapore)&#xff0c…

新加坡南洋理工大学招募博士生、博士后、研究工程师和研究科学家

关注公众号,获取更多AI领域发展机会 新加坡南洋理工大学是一所科研密集型大学,有3万3千多名本科生和研究生,分布于工学院、商学院、理学院、文学院、研究生院,以及与伦敦帝国学院联合创办的李光前医学院。南洋理工大学“QS世界大学…

博士申请 | 香港中文大学(深圳)吴保元教授招收人工智能全奖博士/博后/RA

合适的工作难找?最新的招聘信息也不知道? AI 求职为大家精选人工智能领域最新鲜的招聘信息,助你先人一步投递,快人一步入职! 香港中文大学(深圳) 香港中文大学(深圳)是一…

博士申请 | 香港中文大学(深圳)李彤欣老师课题组招收全奖博士/博后

合适的工作难找?最新的招聘信息也不知道? AI 求职为大家精选人工智能领域最新鲜的招聘信息,助你先人一步投递,快人一步入职! 香港中文大学(深圳) 香港中文大学(深圳)是一…

博士申请 | 新加坡国立大学Xinchao Wang老师招收图神经网络方向博士/博后

合适的工作难找?最新的招聘信息也不知道? AI 求职为大家精选人工智能领域最新鲜的招聘信息,助你先人一步投递,快人一步入职! 新加坡国立大学 新加坡国立大学(National University of Singapore)…

博士申请 | 香港理工大学招收机器学习全奖博士生/博士后/研究助理

合适的工作难找?最新的招聘信息也不知道? AI 求职为大家精选人工智能领域最新鲜的招聘信息,助你先人一步投递,快人一步入职! 香港理工大学 香港理工大学位于中国香港特别行政区,QS 最新排名-世界 66 位。计…

博士申请 | 香港理工大学智能计算实验室招收机器学习方向全奖博士/RA/博后

合适的工作难找?最新的招聘信息也不知道? AI 求职为大家精选人工智能领域最新鲜的招聘信息,助你先人一步投递,快人一步入职! 香港理工大学 香港理工大学 (The Hong Kong Polytechnic University) 是一所位于中国香港的…

告诉ChatGPT,我想读博了!

告诉ChatGPT,我想读博了! 上篇文章详细写了如何体验ChatGPT。在实际使用中发现它对固定模板式的文字工作做的比较好。于是我瞬间想起了毕业前被论文支配的恐惧,我突然有一个大胆的想法,那么ChatGPT是否能帮我写一篇毕业论文呢&am…

老胡的周刊(第085期)

老胡的信息周刊[1],记录这周我看到的有价值的信息,主要针对计算机领域,内容主题极大程度被我个人喜好主导。这个项目核心目的在于记录让自己有印象的信息做一个留存以及共享。 🎯 项目 ChatGPT-Next-Web[2] 一键免费部署你的私人 …

4个技巧 教你如何在激烈的市场竞争中脱颖而出

最近部门搞产品分享,感觉市场分析报告(MRD)、竞品分析报告满大街都是,按照框架填充内容和大家分享其实没有意义,于是给自己拟定了一个主题:当我想开一个火锅店。然后,事情就变得有意思起来~ 一…

解锁Python挣钱方式!副业的快乐你根本想象不到!

Python作为一门编程语言,一门技术,就一定能够为我们所用,至少赚个外快是绝对没有问题的。 以我差不多四年的 Python 使用经验来看,大概可以按以下这些路子来赚到钱,但编程技能其实只是当中必不可少的一部分&#xff0…

猜猜看!哪张甜甜圈图是真的?AI数字人商业实践「真经」;LangChain X Prem挑战赛;故事绘本生成与盈利平台 | ShowMeAI日报

👀日报&周刊合集 | 🎡生产力工具与行业应用大全 | 🧡 点赞关注评论拜托啦! 🤖 猜猜看!你觉得,哪张甜甜圈的图片是真的? 这是 Reddit网站 Midjourney 子区发起的一项趣味挑战&…

冲冲冲!找到了用AutoGPT+爬虫搞¥的新路子!

近几个月真是太魔幻了,优秀的AI接连问世,原本ChatGPT3.5的表现就足够震撼了,现在又来了一个更重磅的东西——AutoGPT! 它是一个由GPT-4驱动,能自主完成各项任务,几乎不需要人类插手的新AI产品。有了AutoGP…

怎么用电脑兼职赚钱,普通人可做的6个副业项目

现在的生活中,我们总是感觉所过的日子都很紧张,虽然我们尽可能地工作和努力,但是生活成本和社会压力仍然那么大。为了弥补自己的生活经验和财务困难,很多人开始寻找一种额外的收入来源。 其实这种额外的收入来源就被称之为&#x…

我找到了用AutoGPT+爬虫搞钱的新路子!

ChatGPT 已经过时了? ChatGPT已经是old news,AI 界又出现了一种新的趋势:AutoGPT——自主人工智能。 AI领域迭代之快,也难怪有人戏称:AI时代不能睡觉,眼睛一闭就OUT~ 【AutoGPT爬虫】 AutoGPT 到底是什么&a…

BOSS直聘+Chatgpt+RPA

1.BOSS直聘上项目的优势 很多路子,基本上见了光之后,就成千上万的人跟着做, 所谓的路子,最后连平台都知道了,也就挂了。 很多时候,不是别人吝啬分享, 分享往往意味着自掘坟墓。 所以生财这无数的…