国庆假期前一天,Meta 公司发布了最新的 VR 头显 Quest 3,轻薄的设计,更强调虚拟与现实融合的混合现实体验,采用高通最新的骁龙 XR2 Gen2 芯片,只卖 499 美元,可以说相当亲民。
不过,当天 Meta CEO 扎克伯格用在 Quest3 身上的时间,远不如发布会上讲 AI 贴纸、 AI 陪聊机器人上面的长。也可以理解,毕竟 OpenAI 掀起的新一波人工智能浪潮,让 AI 成为所有巨头最紧张也最期待的赛道。扎克伯格展示 Quest 3 上玩 Xbox 游戏|Meta Connect 2023当 ChatGPT 将要吞噬一切,成为唯一的互联网入口的时候,依然有人记得,要用 XR 设备取代已经成名 20 年的智能手机,勇气可嘉。苹果推出的高价 XR 头显 Vision Pro 再次点燃了人们对于混合现实行业的信心,Meta 的 Quest3 则希望以前者七分之一的加个,让更多用户体验到混合现实功能的乐趣。而要实现这个梦想,行业需要一个进展更迅速的底层基础的进步。
如果说过去 Meta 所代表的曾经收购的 Oculus 公司,及其产品 Quest 是 VR 头显的头牌,那么随着时间推移,加上外部竞争者如苹果的加入,Meta 已经不得不加快从 VR 向 MR 的进化。
从两天前的 Meta Connect 2023 大会上,Quest3 的内容演示上可以看出,混合现实类体验的重要程度已经超过了单纯的 VR 体验。一个重要的例证,就是来自积木厂商乐高的 Lego Bricktales MR 体验,成为开场第一个展示的内容。另一个例证,则是 QUest3 的外观设计,三颗摄像头在前面板处以非常夸张的三道竖杠的形式展现出来,基本预示了新机将在 Video See Through 视频穿透形式的 MR 体验上进行发力。根据国外体验者的感受,有人甚至称 Quest3 的透视模式,要比上一代机器好 10 倍,多少有点夸张,但可能并非虚言。毕竟,新一代机器的双眼分辨率已经达到了 4K,并且视场角也扩大了,保证了视觉体验方面的进步。但要保证 MR 体验的完美,还有一个底层基础必不可少,就是芯片。Quest3 搭载了最新的高通骁龙 XR2 Gen2 芯片,相比于上一代芯片,新的 XR2 Gen2 在 GPU 速度、交互以及链接方面的效果,都有较大提升:骁龙 XR2 Gen2 的 GPU 和前代相比实现了 2.5 倍的性能提升,能够赋能惊艳的图形效果和出色的色彩和细节。开发者可以充分利用新平台的 GPU 能力,提升应用和游戏的视觉保真度,或是在同样的视觉效果下节省 50% 的功耗。要达到 MR 混合现实体验,设备需要对周围环境、人手部、头部和眼部动作进行多方位追踪,对算力要求巨大。骁龙 XR2 Gen2 的终端侧 AI 能力,相比第一代骁龙 XR2 提升高达至 8 倍。骁龙 XR2 Gen2 支持 INT8,并优化了不同 AI 模块之间的连接,以实现紧密的协同处理,同时扩展了终端侧的内存。为了在 MR 体验中增加现实世界的存在感,现实世界将通过外置摄像头实时流传输到头显屏幕上,并且需要视频透视时延保持极低的水平,从而实现出色用户体验。通过对整个视频透视线程进行全面优化,骁龙 XR2 Gen2 可以实现低至 12ms 的视频透视时延。同时,高通还通过几何校正、降噪、动态亮度调整等技术,提升视频透视的图像质量。从某种意义上说,高通在 XR 芯片上的持续努力,保证了主要厂商,能够持续推出迭代产品,满足几乎对行业灰心了的消费者的期待。Meta Connect 2023 大会上,同样发布但是多少有点被忽视的是第二代 Ray-Ban Stories 智能眼镜。这个售价 299 美元的电子产品,因为和墨镜品牌合作,多少让人觉得有点像玩具,而非像 AR 眼镜那样的生产力工具。新一代的 Ray-Ban Stories 智能眼镜看起来更时尚了|Meta这一点可能要赖在欧美青少年最喜爱的 Snap 身上,后者推出的 Spectacles 是真的用来拍摄影像的、可玩性很高的智能眼镜。从某种意义上来看,这两家社交巨头推出的,其实是「社交眼镜」,而非智能眼镜。但不可否认,这种轻量级的智能眼镜,反而可能是未来 AR 眼镜最有潜力的一个进化方向。而要达成在有限尺寸和轻薄程度下,保证视听体验和续航,同样要求硬件在底层基础上的技术积累。第二代 Ray-Ban Stories 眼镜,采用了高通推出的骁龙 AR1 Gen1 芯片,这也是高通针对轻薄智能眼镜打造的首个专用平台。根据智能眼镜的强项和弱势,以及用户的诉求,骁龙 AR1 Gen1 具有以下特性:骁龙 AR1 Gen1 采用 14-bit 双 ISP,支持顶级即时拍摄体验,同时我们还结合了智能手机上的诸多顶级特性,比如自动曝光、自动人脸检测、计算 HDR 和人像模式。AI 能力对于智能眼镜至关重要,它能够帮助增强照片和视频的拍摄质量,通过降噪实现更清晰的通话,并通过计算机视觉实现更清晰的视频拍摄,以及 Meta 在发布会上展示的视觉搜索能力。骁龙 AR1 Gen1 是一款可扩展平台,旨在通过支持多种不同配置,为 OEM 厂商提供灵活性:其中包括具备出色摄像头和音乐功能、以图像拍摄为核心的智能眼镜;支持单目显示、完美支持提醒通知和导航应用的智能眼镜;以及支持双目显示、具备更丰富视觉效果的更强大的智能眼镜。虽然媒体在不断唱衰苹果 Vision Pro 的销量和进展,但不容怀疑的是,苹果的加入确实让之前几乎一摊死水的 XR 行业,迎来了转机。而作为底层基础的高通公司,依然在不断推出迭代的芯片如 XR2 Gen2,AR1 Gen1,证明这家移动芯片大厂依然在关注 XR 行业,押注它有希望取代手机,成为下一代计算平台,也确实能让从业者放下心,继续打造更好的 XR 产品。
本文为极客公园原创文章,转载请联系极客君微信 geekparkGO今天凌晨,扎克伯克在Meta Conference上发布了新产品AIs。AIs 基于 Llama 2开发,被赋予了28种性格,包括巴黎·希尔顿、肯豆·卡戴珊等28个名人的个性。