一路狂飙的 ChatGPT,背后算力的竞赛!

0b09591195de48a91a678a11b3c5e4f5.jpeg

没有强大的算力支撑,ChatGPT 就没法无所不能。

还有人没听过、没用过 ChatGPT 吗?怕是没有!

现在,ChatGPT 几乎到了无所不能地步,写歌作诗、编代码、查资料、回答问题……你能想到的,它都能干!上线不到两个月,ChatGPT 的全球活跃用户就突破了一亿大关。如此火爆的背后,究竟是什么在支撑?

据统计,ChatGPT 需要超过1万颗 A100 GPU 提供算力支持,单次训练成本超过400万美元,每天成本超过10万美元。而研究机构 TrendForce 也在3月1日的报告中测算称,处理1800亿个参数的 GPT-3.5大模型,需要的 GPU 芯片数量高达2万枚。

归根到底:没有强大的算力支撑,ChatGPT 就没法无所不能。

db5e67a55459c1d194095fa8644ad1ad.png

云端算力,软硬系统协同优化才是标配

想要获得强大的算力,自研芯片是国内外云计算大厂发力的重点,并以此打造核心竞争优势和差异化。此外,云计算领域木桶效应越来越明显,软件和硬件不能有短板;未来算力进化方向,一定是软硬件协同优化。而在这方面,亚马逊云科技是最早发力的。

d612548e6994da61f09813a8fef01c49.jpeg

c1e6f946b09463d94dbbef0a2085f5fd.png

硬件之力:自研芯片,加速算力进化

目前,亚马逊云科技自研的 Amazon Nitro 和 Amazon Graviton3E,已经助力企业在性能、成本、安全性方面实现了大规模突破。

Nitro:亚马逊云科技的基石芯片

Nitro 是亚马逊云科技自研芯片的起点,它的核心设计理念,就是为了很好的平衡云计算的性能、成本和安全性。从2013年推出首颗 Nitro 芯片起,它已经经历了4代迭代,并且已经成为驱动当今所有 Amazon EC2 实例的基础性技术。

2022年,最新一代 Nitro v5 芯片发布,重点聚焦在通信带宽的提升:PCIe 带宽提升2倍、DRAM 速度提升50%、数据包处理速度提升60%、通信延时降低30%。和前一代相比,Nitro v5 的晶体管数量增加一倍,并由此带来每瓦性能40%的提升。

Nitro 的高性能和虚拟化功能,也给用户提供了更多的计算实例。在2022年初,Amazon EC2 实例有400多款;经过一年的发展,已经超过600款,这就让算力的供给更加快速和灵活。

Graviton3E:一切为了高算力

基于 ARM 架构的服务器 CPU 芯片 Graviton,是亚马逊云科技的看家芯片。Graviton 系列处理器,不仅能取得高性能、更能兼顾 ARM 架构低功耗的优势,从而实现更好的「性能功耗比」。和 x86 实例相比,基于 Graviton3 的实例能取得高达60%的每瓦功耗提升。

在去年的 re:Invent 大会上,Amazon Graviton 在第三代的基础上增加了对高性能计算的优化,特别优化了对向量计算和浮点计算的支持。这也是 ARM 架构进一步进军 HPC 的重要尝试。在性能、功耗、成本、性价比。在这些方面,ARM 架构有着更大优势。再加上自研芯片的加持,通过大规模部署进一步摊薄成本,就会让性价比进一步提升。

83431a59d7e86fb60e83730393dd3511.jpeg

f6437aefd7e5bb191f8acacdf22e7b6d.png

软件之功:协议服务助力持续创新

云计算未来的发展方向,肯定是软硬件协同优化。对于云厂商来说,芯片和硬件只是一小部分,剩下的主要部分,都集中在软件和系统层面的创新。

在协议层面,亚马逊云科技提出了新的网络协议 SRD(Scalable Reliable Datagram)和 TCP,采用了多路径路由,并且可以乱序传输数据包,从而达到更高的吞吐量。

在服务层面,亚马逊云科技持续加码 Serverless。2006年就搭建了 Amazon S3 存储服务。2014年,发布了著名的 Serverless 计算服务 Amazon Lambda ,直到目前已经有超过百万用户、每月的调用请求量超过100万亿次。最新推出的 Amazon Lambda SnapStart,在首次启动时会执行标准初始化,并且将内存和磁盘状态进行快照并缓存,将启动延时降低90%以上。

为云计算的客户提供更强、更灵活的算力,实现算力像水和电一样能随用随取,是云计算未来的发展趋势。作为全球云计算的开创者和引领者,亚马逊云科技正通过提供强大、经济且绿色的云端算力,赋能企业实现更大的商业成功。

1022d0bf94980b64d278a2d196398284.jpeg

点击“阅读原文”,走进下一代云基础设施

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/14260.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

ChatGPT - 学习和提高新技能的Prompt

文章目录 Prompt例子 Prompt “我想学习/提高[技能]。我是一个完全的初学者。创建一个30天的学习计划,可以帮助像我这样的初学者学习和提高这项技能。”例子 我想学习/提高Flink。我是一个完全的初学者。 创建一个30天的学习计划,可以帮助像我这样的初…

chatGPT 每个人都应该掌握的技能

chatGPT必是一个划时代的产品,它的火爆🔥程序不需要多说,这段时间大家应该都能感受到。可以说它的重要性不亚于互联网的出现,将改变很多人,颠覆很多行业! 我这几天发现很多公司已经将chatGPT的使用列为关键…

硅谷公司:我们称他们为软件工程师,而非打工人

点击参与 2020 开发者大调查:https://bss.csdn.net/m/topic/dev_survey2020,有效信息填写者均能在第一时间获得包含专家解读和丰富干货调查报告的电子版,还有幸运大奖等你来拿。 【编者按】有个很有意思的话题,拿高薪的工程师得做…

在硅谷,华人程序员创业者支棱起来!

作者 | 闫辉 责编 | 朱珂欣 出品 | CSDN(ID:CSDNnews) 提到硅谷,大家会想到些什么? 这座位于美国旧金山的科技城,也是吸引无数怀揣梦想的年轻人到来的互联网创业梦之地,他们在此开启…

Twitter新任80后印度裔CEO的职场开挂史

草根工程师,33岁 CTO,37岁CEO;印度裔CEO军团引发思考 荣登世界500强企业最年轻CEO,他背后培养出大量硅谷CEO的印度神校也浮出水面。 文|Lianzi 来源:硅星人 “我会设身处地为你们着想......我见过&#x…

ChatGPT前世今生;AI编剧的奇葩剧本;硅谷福报初体验;输入指令就能P图;机器的编程能力超过54%程序员;元宇宙+新零售=?AIoT新黄金十年 | ShowMeAI每周通讯

这是ShowMeAI每周通讯的第2期。通讯聚焦AI领域本周热点,及其在各圈层泛起的涟漪;关注AI技术进步,并提供我们的商业洞察。欢迎关注与订阅! 👀通讯合辑 | 🎡AI应用与工具大全 | 🔔公众号资料下载 …

重磅通知!OpenAI又放大招:官宣开放API接口-3.5版本 需求大涨,机遇与挑战并存,谁能拔得头筹?

3月2日,在各大论坛网站霸榜了一个多月,ChatGPT相关话题的热度仍高居不下。这边热度未歇,那边研发ChatGPT的人工智能公司又在互联网上投下一颗重磅“炸弹”:OpenAI在其官方博客宣布,将开放ChatGPT和Whisper的模型API。 …

玩 ChatGPT 的正确姿势「GitHub 热点速览 」

火了一周的 ChatGPT,HG 不允许还有小伙伴不知道这个东西是什么?简单来说就是,你可以让它扮演任何事物,据说已经有人用它开始了颜色文学创作。因为它太火了,所以,本周特推在几十个带有“chatgpt”的项目中选…

[chatGPT]429You are being ratelimited

使用chatgpt后出现如下错误而不能进入平台。但是网上关于这个的解决方案很少(我甚至没找到QAQ)分享了一个自用了3次都成功的方法 429 You are being ratelimited. We have detected an increased number of requests and have limitedtraffic temporaril…

华为昇思MindSpore首席架构师金雪锋:ChatGPT的哲学基础,维特根斯坦思想

在科学的顶端,与哲学相遇——ChatGPT已然开启了这一趋势。在ChatGPT之前,AI产业界对于技术哲学的探讨主要集中在AI的伦理道德上,但大语言模型除了这一点之外,它的哲学命题还可以追溯至维特根斯坦。 作者 | 金雪锋 语言的边界就是思…

ChatGPT的哲学基础,维特根斯坦思想!

Datawhale干货 作者:金雪锋,编辑:AI科技大本营 在科学的顶端,与哲学相遇——ChatGPT已然开启了这一趋势。在ChatGPT之前,AI产业界对于技术哲学的探讨主要集中在AI的伦理道德上,但大语言模型除了这一点之外…

ChatGPT的哲学基础是?

ChatGPT的哲学基础是:休谟之问维特根斯坦思想。 休谟之问:从事实中能否推出价值?维特根斯坦前后两个阶段思想:第一阶段,是理性建构主义,希望通过类似乔姆斯基文法一样去构建我们的语言系统,实现…

国内外大模型盘点

序号模型名称时间公司国家是否开源备注1T52019google是2GPT-32020openAI3GShardgoogle4mT52021.1-4google5PanGu-ɑ华为中国6PLUG阿里中国7Ernie3.0(文心一言)2021.5-8百度中国8BlOOMBigScience中国是9codexopenAI10Jurassic-1AI21 labs以色列11HyperCLO…

GPT-4、百度文心一言摆擂,AI大模型将掀起新一轮AIGC军备竞赛?

科技云报道原创。 一觉醒来,万众期待的GPT-4来了。OpenAI老板Sam Altman直接开门见山地介绍说:“这是我们迄今为止功能最强大的模型!”仅隔一天,“中国版ChatGPT”百度文心一言正式发布,双方大有摆擂之势。 当深度学习…

莫言用 GPT 写颁奖辞,那如果他自己写会是什么效果呢?

在《收获》杂志 65 周年庆典上,莫言在为余华颁奖时表示,余华是自己的好朋友,但给他的颁奖词写了好几天也想不出来,后来找了 ChatGPT 帮忙写。最后,莫言让 ChatGPT 写了一篇莎士比亚风格 1000 多字的颁奖词,…

【ChatGPT背后的技术演进】

ChatGPT背后的技术演进 1.自然语言处理的发展历史回顾 自然语言处理(Natural Language Processing, NLP) 作为人工智能的 重要研究方向,旨在帮助计算机理解、解释和运用人类语言。 回顾 NLP 的主要发展历程,可大致分为三个阶段&…

2023年的深度学习入门指南(14) - 不能只关注模型代码

2023年的深度学习入门指南(14) - 不能只关注模型代码 最近,有一张大模型的发展树非常流行: 这个图是相当不错的,对于加深对于Transformer模型编码器、解码器作用的理解,模型的开源和闭源情况等等都相当有帮助,大家使…

浅评ChatGPT在软件开发上的辅助能力(附GPT-4对比)

01 背景 ChatGPT于去年正式公测后,凭借其强大的自然语言处理能力迅速获得业内广泛关注,特别是辅助软件开发上,初步表现出了令人满意的能力,然而正当业内积极探索引入ChatGPT后的新工作模式之时,OpenAI又发布了基于GPT-…

PDF转CAD在线怎么转换?分享个在线转换的方法

从事CAD设计的小伙伴有没有经常收到PDF格式的CAD文件呢?因为使用PDF格式来传输不仅方便我们查阅,且能保证图纸内容不会因不同设备导致内容错乱,而且如果用手机查阅也不用担心不能直接打开文件!但是PDF文件不能直接进行编辑&#x…

如何转换DWG文件格式?来试试这两种方法

DWG格式的文件如何转换格式呢?从事CAD相关工作的小伙伴都知道,DWG格式文件是CAD文件里最常见的一种文件格式,与它相伴出现的还有DXF格式,如果我们想要将DWG格式文件转换成DXF格式文件来进行绘图,我们该如何转换呢&…