Redian新闻
>
文心一言算力从哪来?自家最大智算中心:算力规模4EFLOPS,base李彦宏老家

文心一言算力从哪来?自家最大智算中心:算力规模4EFLOPS,base李彦宏老家

公众号新闻
明敏 发自 凹非寺
量子位 | 公众号 QbitAI

百度版ChatGPT底层算力支持,李彦宏老家阳泉助一臂之力!

量子位获悉,百度阳泉智算中心从2月底开始就布设了两个新机房,专门为自家大模型产品文心一言提供计算推理的算力需求。

同样功能的机房,在百度保定计算集群,还有两个

北京、华南的云计算资源也会为文心一言提供支持。

其中,阳泉智算中心是亚洲单体最大的智算中心,算力规模可达4EFLOPS(每秒400亿亿次浮点计算)。

而就在最近,微软也表示为ChatGPT专门打造了超算集群,由上万块英伟达A100组成,并专门为此调整了服务器架构。

那么百度的算力基础设施水平如何?

量子位刚刚从阳泉智算中心探访归来,给大家来波揭秘~

每秒400亿亿次浮点计算

据百度介绍,阳泉智算中心在3月份刚刚完成升级。

它是目前亚洲最大单体智算中心,算力规模达4EFLOPS(每秒400亿亿次浮点计算),整个建筑面积约12万平方米。

一共包括13个模组,可承载约28万台服务器。

智算中心采用CPU+GPU+XPU三种计算架构。

其中XPU应该主要指百度自家的昆仑芯,其产品一代二代均已实现量产,落地规模在2万片以上。

计算能力上,基于天蝎机柜服务器、“冰山”冷存储服务器和X-MAN超级AI计算平台等,可支持10G、25G的通用计算网络接入100G的AI高速无损网络的交换机

每秒可完成2000万亿次深度神经网络计算。

节能低碳方面,阳泉智算中心PUE可以低至1.08。(这一数值大于1、越接近1表示能效水平越好)

在供电上,阳泉智算中心去除了传统的UPS(不间断电源),采用HVDC offline(高压直流离线)技术、分布式锂电池(BBS)供电技术,把供电效率从90%提升到99.5%

同时采用太阳能光伏发电(阳泉日照比较充足),在顶楼铺设太阳能光伏面板,直接并网发电给服务器使用。

散热方面,由于阳泉年平均气温在8-12度,昼夜温差大,智算中心可以直接利用当地气候条件散热。

据介绍,全年96%的时间可以使用室外冷空气实现免费冷却,换算过来一年里有14.6天才需要全部开冷水机组制冷,从而节省了大量的能源。

技术人员表示,智算中心会按需发电和散热,日常运维也是基于AI来实现的。

自21年4月以来,阳泉智算中心正式投入使用。在去年12月起,开始对外开放服务。

当时项目计划投资为47.08亿元。

目前,阳泉智算中心可以支持各种AI应用场景,如语音识别、图像处理、自然语言处理和机器学习。为百度搜索、社区、推广服务等提供算力支撑。

云计算要借大模型的东风

无独有偶,微软也在近日公开了为ChatGPT专门打造的超算集群,包含了上万张英伟达A100

微软表示,他们给OpenAI提供这台超算已经有3年之久,而ChatGPT也正是基于这台超算提供的算力训练的。

此举背后,微软有两方面考量。

其一,吸引更多企业来使用Azure训练自己的大模型。微软执行副总裁Scott Guthrie表示:

虽然它是OpenAI的定制版,但同样具备某种通用性,任何企业都可以基于这种方式来训练自己的大语言模型。

其二,直接在Azure中提供OpenAI模型服务(Azure OpenAI Service)。

此前包括GPT-3、Codex和DALL·E 2等模型,都已经接入Azure。

至于纳德拉1月份立的“要把ChatGPT加入Azure服务”flag,目前也已经实现。

类比来看,百度想打的算盘,或许也不会局限在文心一言本身。

据介绍,为了支持文心一言的大规模智能算力需求,百度智能云已经完成了三大配套云服务。

  • 3月份升级阳泉智算中心;

  • 2月,百度智能云升级了AI研发运营一体化(MLOps)能力;

  • 去年12月,百度发布了全栈自研的AI基础设施“AI大底座”(阳泉智算中心搭载了这一底座)。

前段时间李彦宏内部信中还提到:

文心一言将通过百度智能云对外界提供服务,根本性地改变云计算市场的游戏规则。

这里的意思是,大模型浪潮将改变传统云计算服务看算力、存储的旧习惯,而是进入到看框架好不好、模型好不好,以及模型、框架、芯片、应用之间的协同的新游戏规则。

由此也可推理,百度寄希望于文心一言,向市场验证自家云计算能力,并吸引更多企业用户。

据介绍,百度搭建的“AI大底座”包括了百舸异构计算平台和AI中台两大部分。

百舸异构计算平台可以在AI计算、存储、加速、容器方面进行系统优化,承载数据处理、超大模型的推理和训练。

AI中台整合了飞桨深度学习框架和百度文心大模型,实现了从数据存储到模型训练、生产、部署、测试的全链路、批量化生产。

而百度智能云更具体的能力如何?

或许从文心一言上线后的表现就能略知一二了。

3月29日「中国AIGC产业峰会」

抢票开启

「中国AIGC产业峰会」定档3月29日,线下会场抢票开启!

百度袁佛玉、智源林咏华、澜舟科技周明、小冰徐元春、科大讯飞高建清、启元世界袁泉、云舶科技梅嵩、特赞王喆、微软关玮雅、源码资本黄云刚、元语智能朱雷、无界Ai马千里、Tiamat青柑、峰瑞资本陈石等来自产学研界大咖嘉宾,还有重磅嘉宾陆续确认中。

扫描下方二维码,报名峰会线下会场啦~


点这里👇关注我,记得标星哦~

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见 ~ 

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
美国医生职业倦怠在大流行期间持续增加百度推出文心一言对标GPT,55岁的李彦宏打响中国AI背水一战李彦宏的那条白腰带,盖过了百度文心一言所有的光芒李彦宏坦言文心一言并不完美;美国要求字节出售TikTok股份;虾品供应商斥东方甄选甩锅;Office将能一键生成PPT...李彦宏谈AI:算力可以买,创新能力买不来谷歌版ChatGpt犯下低级错误,市值蒸发超7000亿;李彦宏内部定OKR,百度搜索将直接接入文心一言;知乎股价暴涨丨雷峰早报李彦宏回应文心一言没用实时,新iPhone或将有最薄边框,特朗普回归油管,马斯克称CEO最先被AI取代,这就是今天的其他大新闻!迫切需要的调查与迫切需要的学科百度王海峰:文心一言响应速度一个月提高十倍,后台成本大幅降低,缘于飞桨文心联合优化大模型引爆算力缺口,智算中心是正“途”ChatGPT全球赛开场,李彦宏已无退路,百度文心一言今日正式开始邀请测试!李彦宏霸气喊话4万员工:算力可以买来,创新能力买不来科技周报:李彦宏称文心一言市场反馈符合预期;315被曝光的直播账号已消失;GPT-4已接入微软Office全家桶李彦宏回应文心一言与ChatGPT差距2个月;OpenAI去年亏损5.4亿美元;未来五年AI淘汰超2千万个岗位 | AI一周资讯搞研发10年砸了1100亿,文心一言即将上线,李彦宏等风来李彦宏霸气喊话:算力可以买来,创新能力买不来销声匿迹了的阿尔巴尼亚电影AI先生李彦宏和文心一言生命所在,灌水有感之二GPT-4老板称害怕ChatGPT/ 李彦宏:文心一言符合预期/ 马斯克欠账不还…今日更多新鲜事在此1956年到1957年的国内政治局面的变化BB鸭 | 首个国产新冠药停产;苹果AR头显售价或超2万;特斯拉推出468元车贴;李彦宏称文心一言和ChatGPT只差一两个月文心一言:李彦宏不能输的关键一战李彦宏重磅官宣!"文心一言"要来了,400多家公司宣布接入!股价大涨,百度火速推出回购青年节李彦宏内部演讲致敬技术创新:算力可以买来,创新能力买不来李国庆称汽车降价潮是忽悠消费者;李彦宏称文心一言市场反馈符合预期;马斯克:CEO最先被AI替代丨邦早报百度李彦宏:算力能买但创新不能买,与ChatGPT的差距取决于这些因素百度搜索将整合文心一言,李彦宏剑指下一个互联网流量入口李彦宏:百度文心一言邀请测试,五大场景、五大能力革新生产力工具 | 推荐信心不减!李彦宏称外界对百度“文心一言”的反馈跟他预期差不多五四青年节李彦宏内部演讲:算力可以买来,创新能力买不来欧盟警告苹果不得对C口加密;微软全面开放新Bing;李彦宏回应文心一言落后2个月UNReal 每周一场主题电音节|本周六𝘿𝙧𝙪𝙢 𝙣' 𝘽𝙖𝙨𝙨 炸裂舞池!李彦宏文心一言发布会 highlight李彦宏:外界对文心一言的反馈跟我预期差不多
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。