Redian新闻
>
英伟达 GTC 大会携万亿参数 GPU「炸裂」 AI 行业

英伟达 GTC 大会携万亿参数 GPU「炸裂」 AI 行业

科技
GTC一晚,国内厂商十年?

作者丨郭思、赖文昕

编辑丨陈彩娴

北京时间3月19日凌晨4点,英伟达公司创始人兼CEO黄仁勋踏上了美国加州圣何塞SAP中心的舞台,开始讲述 2024 GTC 主题演讲《见证AI的变革时刻》。

作为“AI界春晚”中最重要的一项日程,黄仁勋在演讲中揭开了号称“史上最强AI芯片 GB200”的神秘面纱,并推出了NVIDIA Blackwell、NIM 微服务、Omniverse Cloud API 等一系列涵盖硬件、软件开发、云计算的更新。

此外,黄仁勋还官宣了英伟达在机器人和具身智能技术的众多进展,包括了与比亚迪的合作以及运用在人形机器人的基础模型和新型计算机。

英伟达指出,新 Blackwell 架构 GPU 组成的 GB200,将提供 4 倍于 Hopper 的训练性能,大模型参数达到了万亿级别。这意味着同样的计算能力,科技厂商所需的芯片数量会减少。

在目前大模型火爆,商业落地却前景尚不明朗的情况下,GTC对于整个产业链都来了不同凡响的技术以及商业启发。



1

史上最强AI芯片“GB200”

黄仁勋称,随着Transformer模型被发明,大型语言模型以惊人的速度扩展,每六个月就会成倍进步,为了训练这些越来越大的模型,自然也需要更强的算力。

什么是“更强的算力”呢?

黄仁勋从口袋里掏出一块 Blackwell 芯片,将它与 Hopper 芯片并排举起,“我们需要更大的 GPU”。

他宣布英伟达将推出GB200系列芯片,将搭载专为处理万亿参数级生成式人工智能而设计的NVIDIA Blackwell架构。

新架构继承了两年前推出的 NVIDIA Hopper 架构,以 David Harold Blackwell 命名,这是加州大学伯克利分校专门研究博弈论和统计学的数学家,也是第一位入选美国国家科学院的黑人学者。

同自家产品相比,芯片的性能有了显著的提升。GB200芯片由两个Die封装组合而成,拥有高达2080亿个晶体管,采用了台积电4NP工艺制程技术,使其能够支持庞大的AI模型,参数量可达10万亿。相比之下,H100/H200系列芯片则只配备了800亿个晶体管。

Blackwell 能大幅提高大模型的训练、推理效率。在 FP8 训练方面,Blackwell 的每芯片性能是其前身的 2.5 倍,在 FP4 推理方面的性能是其前身的 5 倍。它具有第五代 NVLink 互连,速度是 Hopper 的两倍,并且可扩展至 576 个 GPU。

黄仁勋以训练1.8万亿参数GPT模型的资源消耗为例,直观地展现了 Backwell 作为 “一个巨型 GPU” 的强大之处:使用Hopper GPU,需8000张,耗能15兆瓦,耗时90天;而Blackwell GPU仅需2000张,电力消耗减少75%,同样90天内完成。

为了扩大 Blackwell 的规模,英伟达还构建了一款名为 NVLink Switch 的新芯片。每个 Blackwell 芯片能以每秒 1.8 TB 的速度与四个 NVLink 互连,并通过减少网络内流量来消除流量。

此外,GB200芯片的设计将两个B200 Blackwell GPU与一款基于Arm架构的Grace CPU相结合,旨在提供更加强大的计算能力和更高的效率。这种配对设计不仅增强了处理能力,也为AI大模型的运行提供了更为优化的平台。

正如黄仁勋所说的一样,“整个行业都在为 Blackwell 做准备”,目前 Blackwell 正在被全球各大云服务提供商、AI公司和电信公司等采用。

在GTC大会上,微软和英伟达深化了双方长期以来的合作关系,整合了英伟达生成式人工智能和Omniverse技术,这些技术已广泛应用至微软Azure、Azure AI服务、微软Fabric以及微软365等平台。

微软CEO萨提亚·纳德拉表示:“与英伟达携手合作,我们正在将人工智能的潜力变为现实,助力全球各地的人们和组织实现新的效益和生产力提升。

从将GB200 Grace Blackwell处理器引入Azure,到DGX Cloud与微软Fabric之间的新集成,我们今天宣布的一系列举措将确保客户能够在Copilot堆栈的每一层面上,从硅芯片到软件,都能拥有最全面的平台和工具,以构建自己的突破性AI能力。”

除了“GB200”这位绝对主角外,黄仁勋也在GTC大会上官宣了英伟达在软件开发的革新“NVIDIA NIM”。他表示,未来构建软件时不太可能从头开始编写或编写一大堆 Python 代码之类的东西,“很可能你会组建一支AI团队。”

NVIDIA NIM 由英伟达的加速计算库和生成式 AI 模型构建,支持行业标准 API,因此易于连接,可在英伟达庞大的 CUDA 安装基础上工作,针对新 GPU 进行重新优化,并不断扫描安全漏洞和漏洞,目前 Cohesity、NetApp和 Snowflake 等科技公司已在使用。

在GTC大会上,黄仁勋还宣布了与众多公司的合作。

在半导体制造行业,英伟达已与台积电和Synopsys合作,将其计算光刻平台CuLitho应用于先进芯片的生产过程。

在电信行业,推出NVIDIA 6G研究云,这是由生成式人工智能和Omniverse技术提供动力的平台,致力于推进下一代通信技术的进步。

在交通运输行业,比亚迪计划利用英伟达的集中式车载计算平台DRIVE Thor来开发其下一代电动车型。

此外,黄仁勋还宣布了一系列旨在推动英伟达机器人技术研发的项目,如机械臂感知、路径规划和运动学控制库 Isaac Manipulator,人形机器人的模型平台GR00T,和新型计算机 Jetson Thor。

最后,搭载了英伟达为机器人设计的首款AI芯片Jetson的迪士尼机器人orange和green也登上了舞台,陪伴黄仁勋为演讲画上了句号。



2

AI芯片新皇登场的后续思考

We need Bigger GPUs…  A very very big GPU!

非常非常大的GPU,是老黄对于整场GTC大会最切实的表达。毕竟,新 Blackwell 架构 GPU 组成的 GB200,将提供 4 倍于 Hopper 的训练性能,大模型参数达到了万亿级别。

另一方面,为了更好地服务于日益壮大的大模型应用领域,英伟达推出了极具针对性的服务——模型定制服务Nvidia Inference Manager(简称NIM),这意味着只要有英伟达硬件的存在,用户就能便捷地进行大模型的调试与应用。

看得出来,老黄对于大力出奇迹这一理论也持认可态度。

而大众对于这一消息的第一反应则大部分是震惊,甚至用了感到炸裂来形容。通过英伟达的种种做法,我们也不禁感慨,英伟达在AI行业的地位已有目共睹。

甚至有业内人士用了AI时代的思科以及AI时代的Wintel来形容。(思科在网络设备和协议标准化方面曾起到了至关重要的作用,而英伟达通过其GPU和AI平台推动了AI计算基础设施的发展,为数据中心、云端和边缘计算提供了关键的硬件支持。)

在炸裂之后,我们可以看到,英伟达GB200的发布对于行业的技术突破和商业发展都带来了深远的影响。

在技术上,业界一致认为通过不断挖掘和利用高性能计算的力量,来拓展人工智能技术的规模化疆界,是推动行业发展的重要手段。

国家超级计算深圳中心主任冯圣中在评价英伟达GB200的卓越表现时,则用“进步显著,但仍有巨大潜力可挖”进行了精辟总结。这也意味着GB200乃至整个高性能计算与AI领域,未来都还可能在技术上有更为突破性的表现出现。

不过除了对GTC所展现出来的对技术强烈认可和憧憬之外,更多行业人士关注的则是GB200发布对于商业和国内整体市场的影响。

在芯片领域,产能和定价是最为被大家关注的问题。一位资深投资者向笔者指出,GB200的发布是技术上的突破,但如果产能能放量的话,则会更加成为商业上的炸裂。

目前整体而言,大模型的成本还是太贵。拿大家熟知百度文心为例,业内消息指出文心大模型4.0的推理成本相比于之前的版本出现了大幅增长,最高据说增加了8-10倍,这意味着提供实时生成内容服务的成本骤增。这意味GB200的成本一旦打下来,国内芯片厂商的空间会被挤压得更加厉害。

而在整个GTC大会上,我们发现,不同于以往的发布单一芯片,这次英伟达直接放出整个服务器。也引发了对于市场格局的思考。国内某大型元器件公司从业者告诉AI科技评论,英伟达的做法很明显,自身在底层东西很强势,就干脆直接不做单套,直接卖整机,反正最后都得垄断。

下放到中国市场,大家的一致看法则是,按照以往美国的做法,大概率产品一经发行便会受到制裁。业内投资人告诉AI科技评论,新一波的制裁大概率会出现在四月份。

这意味着,在国内先进制程中短期内(5年)或都难以赶上国外的现状之下,H800等被阉割系列的存量运营效率价值将显著提升,水货和渠道货的价格可能会迎来回弹和普涨,这其实也将进一步加剧供应链紧张态势。

在此背景下,大模型厂商如何合法合理地借鉴云服务提供商的经验,寻求海外采购及储备策略,成为一个具有实际意义的研究课题。

另一方面,稳扎稳打投资Infra公司、把生态+推理的量提升或许也更加具有借鉴意义。

正如搭建高楼大厦,追求最顶尖的建筑材料和技术固然重要,但这并不意味着所有建设项目都将仅仅依赖于最先进的顶层设计,其余基础材料也同样至关重要。这也就意味着即使在高端产品领域我们暂时未能赶超,但在AI在基础建设层面孕育大量的市场需求和发展机遇。

而对于国内GPU厂商而言,套用某GPU从业者的话则是:英伟达牛逼惯了,大概率会被制裁,国内的GPU公司则更加要好做产品,从能卖掉的做起来。

本文作者长期关注一大模型计算与框架、芯片领域动态,欢迎添加作者微信lionceau2046anna042023互通有无。

阿里云创业者计划Startup Day

活动亮点抢先看>>赶紧报名


过去一年,AI技术的革新带来了生产新范式,推动了新一轮AI创业的热潮。今天,“云+AI”不断降低创新创业的门槛,无数AI创业者们试图从更多应用场景中寻找突围路径。


阿里云创业者计划从启动以来,已累积支持超过1万家企业上云,提供包括3500到100万不等的上云抵扣金、1对1技术专家指导、大企业资源对接、融资服务、品牌曝光等创业权益。


迈进2024年,解读“云+AI”时代下的创业机遇,见证创新企业成长,我们将于3月22日举办Startup Day活动日。不仅有更多权益升级,还邀请了产、投、学、研专家与AI创业者们,深度探讨新一代人工智能在基础设施及应用领域的创新机遇。


明星创变者现身说创业,行业大咖齐聚圆桌对话


百炼2.0升级,AI训练营开课


创业者计划新一批合作伙伴发布


最具应用价值的AI创变者Top50榜单评选启动


AI应用创新项目Quick Show,投资人现场Q&A


创业者计划合作伙伴交流会


……


席位有限>>>点击报名吧!


更多详情>>>点击查看



未经「AI科技评论」授权,严禁以任何方式在网页、论坛、社区进行转载!


公众号转载请先在「AI科技评论」后台留言取得授权,转载时需标注来源并插入本公众号名片。

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
will + louisa | love me like you do老黄最近攻势很猛啊!英伟达宣布推出新款 GPU“黑好”!OpenAI有望在今年夏季推出GPT-5;英伟达推出更强GPU芯片;马斯克宣布正式开源Grok-1|AIGC周观察第三十七期苹果iOS 18将搭载生成式AI;谷歌Bard最新排名超GPT-4;百川发超千亿参数大模型Baichuan 3丨AIGC大事日报英伟达GTC解读,看懂未来3年AI格局!|预告AI风向标!除了B100,英伟达GTC还要关注什么?突破摩尔定律极限!前谷歌量子计算团队首创「热力学计算机」,英伟达GPU「退役」?英伟达推「万亿参数」GPU,继续加速「AGI 时代」天工3.0正式开放!4000亿参数MoE开源,开启音乐生成ChatGPT时刻来自科技进步一等奖的肯定:腾讯破解万亿参数大模型训练难题英伟达新核弹B200发布,一台服务器顶一个超算,万亿参数大模型30倍推理加速|亮马桥小纪严选大模型又开“卷”!万亿参数闭源模型、四千亿开源模型来了零一万物发布千亿参数模型 Yi-Large,李开复:中国大模型赶上美国,立志比肩 GPT-521、长篇家庭伦理小说《嫁接》第五章 同道知音(2)领航与挑战,英伟达GTC怎么看?全球顶尖AI研究者中国贡献26%;1320亿参数大模型开源;Anthropic大模型测评首超GPT-4丨AIGC大事日报流放14:招聘丁薇,规划后事,金素送车,忆起不堪往事:兰姐如何跌落风尘最神秘国产大模型团队冒泡,一出手就是万亿参数MoE,两款应用敞开玩号称中文评测超越 GPT-4,百川智能发布超千亿参数大模型 Baichuan 3中国人世界上读书最多的民族?最强开源大模型 Llama 3震撼发布!开源模型将追上GPT-4,4000亿参数模型也在路上黄仁勋、英伟达、GTC、机器人,给我带来的几个震撼……关于未来,英伟达GTC24告诉了人们什么?GPU的“泼天富贵”,英伟达一家吃不下告别微软,姜大昕带领这支精英团队攀登Scaling Law,万亿参数模型已有预览版美股基本面 - 2024_01_19 * 晚报 * 纽约黄金期货周五小幅走高。旧金山联储行长:对降野心藏不住了!不满CPU统治,英伟达决定彻底重写软件开发栈!黄仁勋:为什么还要用Python?命令行都不需要!GPU开发时代将至对话联想创投宋春雨:相信万亿参数、多模态是通往 AGI 的最佳路径国产黑马一年肝出万亿参数MoE!霸榜多模态,剑指AGI国内首个开源千亿参数MoE大模型来了!性能超Grok-1,单张GPU可跑AI行业买英伟达GPU,花的钱比赚的多17倍最强开源大模型Llama 3来了!4000亿参数狙击GPT-4,训练数据达Llama 2七倍开源大模型Llama 3王者归来!最大底牌4000亿参数,性能直逼GPT-4台积电董事长预测:未来15年每瓦GPU性能提升1000倍,GPU晶体管数破万亿!北京算力基建实施方案重磅发布!重点支持采购自主可控GPU,要支撑万亿参数大模型训练[时尚]全天候慢跑 Asics GT-2000 11 GTX 开箱及GT-1000千公里使用感受
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。