文心一言算力从哪来?自家最大智算中心:算力规模4EFLOPS,base李彦宏老家

百度版ChatGPT底层算力支持,李彦宏老家阳泉助一臂之力!

量子位获悉,百度阳泉智算中心从2月底开始就布设了两个新机房,专门为自家大模型产品文心一言提供计算推理的算力需求。

同样功能的机房,在百度保定计算集群,还有两个

北京、华南的云计算资源也会为文心一言提供支持。

其中,阳泉智算中心是亚洲单体最大的智算中心,算力规模可达4EFLOPS(每秒400亿亿次浮点计算)。

而就在最近,微软也表示为ChatGPT专门打造了超算集群,由上万块英伟达A100组成,并专门为此调整了服务器架构。

那么百度的算力基础设施水平如何?

量子位刚刚从阳泉智算中心探访归来,给大家来波揭秘~

每秒400亿亿次浮点计算

据百度介绍,阳泉智算中心在3月份刚刚完成升级。

它是目前亚洲最大单体智算中心,算力规模达4EFLOPS(每秒400亿亿次浮点计算),整个建筑面积约12万平方米。

一共包括13个模组,可承载约28万台服务器。

智算中心采用CPU+GPU+XPU三种计算架构。

其中XPU应该主要指百度自家的昆仑芯,其产品一代二代均已实现量产,落地规模在2万片以上。

计算能力上,基于天蝎机柜服务器、“冰山”冷存储服务器和X-MAN超级AI计算平台等,可支持10G、25G的通用计算网络接入100G的AI高速无损网络的交换机

每秒可完成2000万亿次深度神经网络计算。

节能低碳方面,阳泉智算中心PUE可以低至1.08。(这一数值大于1、越接近1表示能效水平越好)

在供电上,阳泉智算中心去除了传统的UPS(不间断电源),采用HVDC offline(高压直流离线)技术、分布式锂电池(BBS)供电技术,把供电效率从90%提升到99.5%

同时采用太阳能光伏发电(阳泉日照比较充足),在顶楼铺设太阳能光伏面板,直接并网发电给服务器使用。

散热方面,由于阳泉年平均气温在8-12度,昼夜温差大,智算中心可以直接利用当地气候条件散热。

据介绍,全年96%的时间可以使用室外冷空气实现免费冷却,换算过来一年里有14.6天才需要全部开冷水机组制冷,从而节省了大量的能源。

技术人员表示,智算中心会按需发电和散热,日常运维也是基于AI来实现的。

自21年4月以来,阳泉智算中心正式投入使用。在去年12月起,开始对外开放服务。

当时项目计划投资为47.08亿元。

目前,阳泉智算中心可以支持各种AI应用场景,如语音识别、图像处理、自然语言处理和机器学习。为百度搜索、社区、推广服务等提供算力支撑。

云计算要借大模型的东风

无独有偶,微软也在近日公开了为ChatGPT专门打造的超算集群,包含了上万张英伟达A100

微软表示,他们给OpenAI提供这台超算已经有3年之久,而ChatGPT也正是基于这台超算提供的算力训练的。

此举背后,微软有两方面考量。

其一,吸引更多企业来使用Azure训练自己的大模型。微软执行副总裁Scott Guthrie表示:

虽然它是OpenAI的定制版,但同样具备某种通用性,任何企业都可以基于这种方式来训练自己的大语言模型。

其二,直接在Azure中提供OpenAI模型服务(Azure OpenAI Service)。

此前包括GPT-3、Codex和DALL·E 2等模型,都已经接入Azure。

至于纳德拉1月份立的“要把ChatGPT加入Azure服务”flag,目前也已经实现。

类比来看,百度想打的算盘,或许也不会局限在文心一言本身。

据介绍,为了支持文心一言的大规模智能算力需求,百度智能云已经完成了三大配套云服务。

  • 3月份升级阳泉智算中心;

  • 2月,百度智能云升级了AI研发运营一体化(MLOps)能力;

  • 去年12月,百度发布了全栈自研的AI基础设施“AI大底座”(阳泉智算中心搭载了这一底座)。

前段时间李彦宏内部信中还提到:

文心一言将通过百度智能云对外界提供服务,根本性地改变云计算市场的游戏规则。

这里的意思是,大模型浪潮将改变传统云计算服务看算力、存储的旧习惯,而是进入到看框架好不好、模型好不好,以及模型、框架、芯片、应用之间的协同的新游戏规则。

由此也可推理,百度寄希望于文心一言,向市场验证自家云计算能力,并吸引更多企业用户。

据介绍,百度搭建的“AI大底座”包括了百舸异构计算平台和AI中台两大部分。

百舸异构计算平台可以在AI计算、存储、加速、容器方面进行系统优化,承载数据处理、超大模型的推理和训练。

AI中台整合了飞桨深度学习框架和百度文心大模型,实现了从数据存储到模型训练、生产、部署、测试的全链路、批量化生产。

而百度智能云更具体的能力如何?

或许从文心一言上线后的表现就能略知一二了。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/15713.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

阿里版ChatGPT已进入测试,中文聊天截图曝光,达摩院出品

谷歌硬刚ChatGPT消息一出,科技圈全坐不住了。 就在2月9号,阿里百度网易京东一众公司全宣布要推出类ChatGPT新产品,战况那叫一个激烈。 阿里内测中的达摩院版ChatGPT,也被提前曝光。 竟然连画画技能都具备了?&#xff0…

ChatGPT标注数据比人类便宜20倍,80%任务上占优势 | 苏黎世大学

Pine 发自 凹非寺量子位 | 公众号 QbitAI 又一“人类饭碗”被AI抢走,还是和训练AI息息相关的: 数据标注。 苏黎世大学研究发现,在ChatGPT面前,无论成本还是效率,人类可以说是毫无优势: 成本上,C…

ChatGPT引爆变革:第五个被颠覆的行业——市场营销与广告

随着人工智能技术的不断发展,ChatGPT已经开始在市场营销与广告领域产生深远影响。作为一款强大的文本生成工具,ChatGPT不仅能够撰写各类文章,还可以用于广告文案创作、营销策略设计以及消费者行为分析。 在广告文案创作方面,ChatG…

GPT-5根本不存在!ChatGPT之父Sam Altman首次公开表态,最新视频流出

新智元报道 编辑:编辑部 【新智元导读】4月13日,OpenAI CEO、GPT-4老板Sam Altman在接受视频采访时的一句话,让在场所有人惊呆了:「压根就没有GPT-5」! Sam Altman辟谣了!根本就没有GPT-5! 之…

LLM 系列 | 06:ChatGPT Prompt实践:文本摘要推断转换

简介 梅子留酸软齿牙,芭蕉分绿与窗纱。日长睡起无情思,闲看儿童捉柳花。小伙伴们好,我是微信公众号《小窗幽记机器学习》的小编:卖雪糕的小女孩。更多、更新文章欢迎关注 微信公众号:小窗幽记机器学习。后续会持续整理…

分布式session解决方案

一、Session工作原理: 三个问题: 1、Tomcat中的Session保存在哪? Tomcat本地的ConcurrentHashMap中(本地缓存),以sessionid为key。 2、Tomcat是怎么追踪到请求是属于哪个Session? 通过cook…

类ChatGPT编程秀-编写爬虫代码

随着ChatGPT的大火,越来越多的人习惯于用ChatGPT搞一些有趣的事。去年小编做了一个“有书乐享”的小程序,其中有部分的书籍信息是通过爬虫来抓取的数据,有书乐享”小程序可以看文章《一款简约的乐享书籍小程序》,现在主要是用Clau…

从运维的意义谈起

上周五在北京,原本约了优诺的傲寒想找他去聊聊,然后再回家,因为临时有事未能前往。每次和傲寒聊聊都会有很多收获,这回没能见面聊一聊,觉得有些遗憾。不过在机场的时候看到了天旦的CEO Vader的《运维的意义》&#xff…

OpenAI开放ChatGPT API:2分钱700字

我是卢松松,点点上面的头像,欢迎关注我哦! 昨天 ( 3 月1号)刚出的新闻,OpenAI宣布开放API了,定价为 0.002 美元/750 字,约合人民币2分钱700字。 OpenAI 现宣布,它现在允许第三方开发者通过 API…

一文通透优化算法:从梯度下降、SGD到牛顿法、共轭梯度(23修订版)

23年版前言 本文最初发布于2018年,然因今23年年初在写ChatGPT笔记故而研究RL,研究RL又开始系统重修微积分、概率统计,然后就注意到了此文,仔细审视本文之前18年的版本之后,发现写的和网上不少千篇一律的同类优化文章没…

0门槛克隆ChatGPT!30分钟训完,60亿参数性能堪比GPT-3.5

【新智元导读】破解「CloseAI」,ChatGPT克隆羊问世!0门槛实现「自研」,从此大语言模型不再只是少数大公司的「金手指」。 此前,OpenAI不Open的事件,已经引发了坊间的诸多争议。 光放出基准和测试结果,不提…

手把手教你使用React和OpenAI API构建和部署ChatGPT克隆应用程序

随着聊天机器人和虚拟助手的使用不断增加,许多企业和开发人员正在寻找创建自己的人工智能驱动的聊天机器人的方法。ChatGPT就是这样一个聊天机器人,它由OpenAI创建,能够进行类似人类的对话,并回答各种问题。 要建造什么&#xff…

开箱即用,完整版 ChatGPT 克隆方案,开源了!

在过去的短短几个月,以 ChatGPT、GPT4 为代表的 AI 应用和大模型火爆全球,被视为开启了新的科技工业革命和 AGI (通用人工智能)的新起点。 不仅科技巨头间你追我赶,争相推出新品,许多学术界、工业界的 AI 大…

元宇宙地产暴跌,林俊杰亏麻了

文/章鱼哥 出品/陀螺财经 随着元宇宙的兴起,元宇宙地产曾一度被寄予厚望,成为各大投资者追捧的对象。然而,最近的一次元宇宙地产价值暴跌再次提醒我们,高收益背后可能伴随着高风险。根据元宇宙分析平台WeMeta的数据显示&#xff0…

挤出泡沫、脱虚向实,AI大模型正在回归价值投资?

商品推荐、交通管理、生成文章、代码编程、电影特效制作……自ChatGPT横空出世以来,AIGC浪潮席卷全球,上下游产业链也因此大放异彩。 市场行情的高景气直观反映在股价上,无论AI公司是否盈利,其股价多呈上升趋势。一些与AI概念有所…

一路对标顶级产品,奇遇XR为何仍不见起色?

临近6月,再度遇冷的XR行业,又让很多人充满期待。外界普遍认为,基于苹果酝酿多年的MR头显产品,将于6月举行的WWDC 2023全球开发者大会正式亮相,XR行业或将迎来“iPhone时刻”。 在一派期待中,一家国内XR企业…

xAI迎战OpenAI|没有什么能够阻挡马斯克的AI梦想

出品|网易科技《智见焦点》 作者|赵芙瑶 编辑|丁广胜 马斯克的“X”系列又添新成员了。 对“X”有执念的马斯克,前不久刚刚将推特“注册名称”改为X Corp.,今天又在推特宣布成立新公司“xAI”。公司团队由马斯克领导&a…

上天了!但炸了:马斯克的「星舰」离火星又近了一步

点击“开发者技术前线”,选择“星标” 让一部分开发者看到未来 来自:机器之心 成功发射,但在空中爆炸了。 这一刻,我们都仰望星空。 北京时间 4 月 20 日晚 9 点半,随着倒计时声音的结束,在 SpaceX 位于得州…

AI“应用商店”来了。OpenAI首批70个ChatGPT Plugin最全梳理

OpenAI放出大招,本周将向所有ChatGPT Plus用户开放联网功能和众多插件,允许ChatGPT访问互联网并使用70个第三方插件。 根据华尔街见闻的梳理,本批第三方插件能够全方位覆盖衣食住行、社交、工作以及学习等日常所需,基本上能够扮演…