Redian新闻
>
谷歌发布Gemini,负责人:原生多模态大模型是AI「新品种」,正探索与机器人结合

谷歌发布Gemini,负责人:原生多模态大模型是AI「新品种」,正探索与机器人结合

科技

机器之能报道

编辑:吴昕


又是一个不眠之夜,神仙扎堆献技

当地时间 12 月 6 日,谷歌 CEO Sundar Pichai 官宣 Gemini 1.0 版正式上线。在此之前,这款被谷歌寄予厚望对抗 OpenAI 的武器,发布时间一直被拖延。
未曾料到,来得如此猝不及防。
研发负责人、谷歌 DeepMind CEO  Demis Hassabis 代表 Gemini 团队在发布会上正式推出大模型 Gemini,它拥有「视觉」和「听觉」,还有学习和推理能力。

作为谷歌迄今为止最强大、最全面的模型,在大多数基准测试中, Gemini 性能都超越了 GPT-4。

Hassabis 在发布会前接受连线杂志专访时,将 Gemini 称为「新 AI 品种」。

目前,大多数模型都通过训练单独的模块,然后将它们拼接在一起来近似多模态,不足之处在于没办法在多模态空间进行深层复杂推理。

而 Gemini 最大亮点之一就是原生多模态大模型——设计时就原生支持多模态,要具有处理不同形式数据(语言+听力+视觉)的能力;一开始就在不同模态上进行预训练,利用额外的多模态数据进行微调以提升有效性。

因此,Gemini  可以泛化并无缝理解、操作和组合不同类型的信息,包括文本、代码、音频、图像和视频,远远优于现有(近似)多模态模型,并且它的能力在几乎每个领域都是最强的。

Hassabis 透露,谷歌 DeepMind 已经在研究如何将 Gemini 与机器人技术结合起来,与世界进行物理交互。毕竟,要成为真正的多模态还需要触摸和触觉的反馈。
这条从未被前人踏过的路,未来可能带来重大新突破。他对连线杂志表示,新的多模态模型将成为智能体、规划和推理、游戏甚至物理机器人快速创新的基础。

除了原生多模态的亮点,谷歌表示,Gemini 还是他们迄今为止最灵活的模型,能够高效地运行在数据中心和移动设备等多类型平台上。

Gemini 包括三种量级:能力最强的 Gemini Ultra,适用于多任务的 Gemini Pro ,以及适用于特定任务和端侧的 Gemini Nano。

目前Gemini 提供了三个不同版本

特别是 Gemini Nano,可以在使用特殊芯片的终端设备上运行,而不是在云端某些服务器上,这样谷歌就可以将生成 AI 引入遍布世界角落的安卓手机。

同时,在没有网络连接的情况下使用生成 AI 模型也会让用户感到安全,他们的个人数据不会离开其设备。这也是苹果多年来隐私实践的方向。

Pixel 8 Pro 在录音机应用中使用 Gemini Nano 来总结会议音频,即使没有网络连接也可以实现。

据说,Pixel 8 Pro 将是第一款运行 Gemini Nano 的智能手机。虽然谷歌已将它与 Pixel 8 Pro 的操作系统集成,但尚未将其全部功能植入 Google Assistant。

谷歌副总裁兼 Bard and Assistant 总经理 Sissie Hsiao 在新闻发布会上表示,目前正在对这一联姻进行「早期测试」。

写到这里,我们几乎可以嗅到未来在终端,谷歌势必与苹果一战。

接下来几个月,谷歌聊天机器人 Bard 将迎来重大升级 —— 使用 Gemini Pro 的微调版本来执行更高级的推理、规划、理解等任务。不久的将来, Bard 还会扩展到更多模态,支持更多种语言。
公司表示,Gemini 还将在未来几个月被引入其他谷歌产品,包括生成搜索、广告和 Chrome。
最强大版本 Ultra 的安全测试工作仍在进行中,计划将于明年推出。其在大规模多任务语言理解 (MMLU) 基准测试中得分为 90%,高于包括 GPT-4 在内的任何其他竞争对手。
不过,谷歌还没有抢尽人工智能的风头。Meta、AMD 都凑巧有了新发布。

为了不被超越,虚拟助手 Meta AI 也在昨晚有了重要更新。


最常用的功能之一 Imagine——文本到图像生成功能,现在有了「重新想象」的新能力,将聊天斗图推到新高度:

使用 Imagine 生成一张图片,你的聊天对象可以按住这张图片,通过简单文本提示进行修改,新功能会生成一张新图片。网友们可以像接龙一样不断修改图片,疯狂搞笑。

Meta 还推出了一个免费网络工具 Imagine with Meta AI ——一个在线 AI 图像生成器(https://imagine.meta.com/),可在几秒钟内创建高分辨率的 AI 图像。它使用公共 Facebook 数据进行训练。

每一次使用,生成器都会创建四张 1280×1280 像素图像,可以以 JPEG 格式保存,图像左下角有一个小小的「 Imagined with AI 水印。

Screenshot by Lance Whitney via Imagine/ZDNET
来自arstechnica的作品
除了文生图功能,Meta AI 的文案能力也有了提升。比如,帮忙撰写生日祝福、帖子甚至交友资料的自我介绍。
Meta AI 还推出 Reels 功能。假如你在群聊中计划与朋友一起去旅行,可以要求 Meta AI 推荐最佳游览地点并分享热门景点,决定哪些景点是必去的。


现在还能帮忙将图像从横向转换为纵向,更方便分享到文本中。
翻开大模型竞争硬币另一面,是各家深陷的最强算力军备。

发布会上,与 Gemini 1.0一起亮相的,还有谷歌迄今为止最强大、最高效、可扩展的 TPU 系统 — Cloud TPU v5p,专为训练尖端的 AI 模型而设计,能比 TPU v4 更快地训练大模型。

谷歌表示,TPU 对其在 Gemini 等尖端模型上进行最大规模的研究和工程工作至关重要。
同样是昨晚,AMD 「最强算力」芯片、专为 AIGC 和大模型场景打造的纯 GPU 产品 Instinct MI300X 加速器也隆重亮相。
AMD 表示,与英伟达 H100 HGX 相比,Instinct MI300X 加速器在运行大语言模型推理时的吞吐量和时延表现明显高出一筹。
AMD MI300X 人工智能加速器

AMD CEO 苏姿丰预计到 2027 年,人工智能芯片市场将达到 4000 亿美元或更多,希望 AMD 能在该市场占据相当大的份额。

AMD 已经与一些最渴望 GPU 的公司签约使用该芯片,包括 2023 年 Nvidia H100 GPU 的两个最大买家 Meta 和微软。

Meta 表示,将使用 MI300X GPU 来处理 AI 推理工作负载,例如处理 AI 贴纸、图像编辑和 AI 助手。

微软首席技术官 Kevin Scott 表示,该公司将通过 Azure 提供对 MI300X 芯片的访问。

甲骨文的云服务也将使用这些芯片。OpenAI 表示,公司开发的 GPU 编程语言 Triton 将从接下来的 3.0 版本开始支持 MI300 等 AMD 芯片。

参考链接
https://about.fb.com/news/2023/12/meta-ai-updates/
https://www.wired.com/story/google-deepmind-demis-hassabis-gemini-ai/



© THE END 

转载请联系本公众号获得授权

投稿或寻求报道:[email protected]

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
火了半年整天吊打别人的GPT-4,今天碰到个头铁的被吊打, 谷歌发布史上最强大模型Gemini清华大学与智谱 AI 联合推出 CogAgent:基于多模态大模型的 GUI Agent,具备视觉问答、视觉定位等能力Google发布Gemini,暗示GPT-4不是「原生」多模态北京内推 | 腾讯光子工作室群招聘多模态大模型方向实习生聊聊我心中浩气长存的《黑道家族》 ? 世间再无Tony Soprano思谋进博会首秀:发布全球首个工业多模态大模型,现场与松下、江森自控签署全面战略合作谷歌深夜放复仇杀器Gemini,最强原生多模态史诗级碾压GPT-4!语言理解首超人类AI搞定谷歌验证码,最新多模态大模型比GPT-4V空间理解更准确 | 苹果AI/ML团队首创pix2emb范式!NUS清华联合发布NExT-Chat:对话/检测/分割全能多模态大模型谷歌深夜放杀器Gemini,最强原生多模态碾压GPT-4?黎曼假设的秘密阿里云中标9亿AI算力大单;浙大校友开源LLaVA-1.5多模态大模型;Meta因开源模型遭抗议丨AIGC大事日报挑战GPT-4V,浙大校友推出开源版多模态大模型,获GitHub 6k+星标红色日记 读世界史 4.29-30双林奇案录第三部之昭雪嘉州: 第七节腾讯发表多模态大模型最新综述,从26个主流大模型看多模态效果提升关键方法GPT-4V只能排第二!华科大等发布多模态大模型新基准:五大任务14个模型全面测评横扫13个视觉语言任务!哈工深发布多模态大模型「九天」,性能直升5%媒体基础:打开多模态大模型的新思路超越GPT-4!谷歌DeepMind重磅发布Gemini,史上最强最通用大模型!我的学生曾在以色列当过兵清华团队攻破GPT-4V、谷歌Bard等模型,商用多模态大模型也脆弱?UC伯克利团队开源MemGPT大模型上下文内存管理方案;AgentLM、多模态Fuyu-8B、数学LLEMMA等专用大模型开源大模型+自动驾驶=?普渡大学等最新《自动驾驶领域多模态大型语言模型》综述斯坦福机器人炒虾爆火网络,谷歌DeepMind发布机器人最新进展,2024智能机器人元年到来?智能周报|Google发布Gemini;OpenAI推迟发布GPT商店;微软明年发布新版Windows,AI功能大幅增强…​AAAI 2024 | 首个多模态实体集扩展数据集MESED和多模态模型MultiExpan震惊!!!谷歌发布最强多模态大模型Gemini理想汽车发布史上最大更新:多模态大模型首次上车,无人泊车即将推送AI早知道|ChatGPT模型大更新;阿里云发布多模态大模型;百度推多模态模型UNIMO-G我国自主研发的新一代通用处理器在京发布;谷歌发布首个AI Core应用更新;亚马逊推出AI聊天机器人丨AIGC日报突发!谷歌发布史上最强大模型Gemini,赶超GPT-4|亮马桥小纪严选EMNLP 2023 | MMEdit——如何编辑多模态大语言模型?将多模态大模型稀疏化,3B模型MoE-LLaVA媲美LLaVA-1.5-7B学术成果 | EMNLP2023:MMEdit——如何编辑多模态大语言模型?
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。