Meta与高通合作,为头显与手机应用优化Llama 2大语言AI模型
看日报是个好习惯
图源:网络
Meta与高通合作,为头显与手机应用优化Llama 2大语言AI模型
近日,高通和Meta宣布从2024年起,双方将合作在设备端优化Llama 2大型语言模型的执行,不依赖于云服务的单独使用。
图源:网络
高通将在其设备上提供Meta的开源Llama 2模型,支持智能虚拟助手等应用程序。Meta的 Llama 2可以做许多与 ChatGPT 相同的事情,但它也可以打包在一个更小的程序中,使得可以在手机上运行。
据团队表示,对于直接在VR/AR头显和智能手机等设备运行Llama 2这样的生成式人工智能模型的能力,可以帮助开发者节省云成本,并为用户提供私密、更可靠和个性化体验。
高通过去曾与 Meta 密切合作,特别是在 Quest 虚拟现实设备的芯片方面。为了支持Llama生态系统,两家公司目前的合作涵盖了研究和产品工程方面的工作。
玩美移动与Dufry建立全球AR旅游零售合作伙伴关系
玩美移动是AR美容与时尚技术解决方案提供商,近日宣布与旅游零售商合作,可在全球27个国家/地区的机场提供15个品牌的店内和网络虚拟试妆服务。
例如在伦敦希思罗机场、伦敦斯坦斯特德机场、曼彻斯特和巴塞罗那,可以试用贝玲妃、Kylie Cosmetics、娇兰、Huda Beauty等品牌的AR彩妆产品。Dufry计划今后在更多机场推出虚拟试妆购物体验。
图源:Business Wire
由于旅行者的购物时间非常有限,虚拟试妆解决方案有助于在极短的时间内为旅行者提供个性化和高效的购物体验,从而提高转换率,增加机场零售商的客户量。
玩美移动已经与全球500多个品牌达成合作,品牌的虚拟产品SKU可以很容易地部署到各个零售点,其拥有超过35万个SKU的庞大数据库。零售商可以选择他们希望合作的品牌,并在获得品牌批准后,轻松部署AI和AR技术驱动的购物体验。
奢侈品牌Valentino推出Meta Avatar服装道具
近日,意大利奢侈品牌Valentino首次在Meta Avatar Store上发布了数字服装道具。上线的道具包含了受近期IRL系列启发而设计的服装,涉及两件迷你连衣裙、一件紧身连身裤、一件西装外套、一件飞行员夹克、一件T恤、一条牛仔裤和一条短裤,这些数字服装售价均为5美元。
用户购买后,可在Quest、Horizon Worlds、Instagram、Facebook以及Messenger平台调用相关服装以装扮自己的头像,此外,头像效果也可以在视频通话中呈现。
图源:Meta
Meta升级HRTF模型以优化Quest空间音频
空间音频的工作原理基于头部相关传递函数(HRTF),这是一种数学函数,可用于计算应用于每只耳朵的音频滤波器,使音频听起来像是从3D空间中相对头部的精确点所发出的,它与常见非VR游戏使用的基本音频平移完全不同。
Oculus在2015年推出了使用HRTF的音频SDK,随后几年中出现了多项改进,如近场HRTF、体积源、动态房间建模、基于几何的声音传播等。
今年早些时候,Meta弃用了Oculus Audio SDK,转而采用了Meta XR Audio SDK(它是一次品牌重塑,里面的核心技术是一样的),近日,Meta对它进行了新的升级。
来源:Meta
值得一提的是,HRTF因人而异,因为每个人的耳朵形状和耳朵之间的距离有很大不同,对此,苹果的解决方案是通过iPhone的TrueDepth面部扫描技术生成HRTF。
Meta无法测量用户的脸部和耳朵信息,因而它使用平均值进行预设。Meta声称它在“音频研究方面进行了大量的投资”,并且在过去几年中,研究人员捕获了超过150人的更大、更精确的HRTF数据集。
Meta将这一基于新数据集的模型称之为Universal HRTF,并透露它可以提高定位和频率精度。
Meta表示,改进的定位意味着音频听起来与现实效果更为匹配,“这在判断高度时尤为明显”。而改进的频率精度则意味着音频听起来更自然,“着色和过滤更少”。
目前新的模型已对超过100名用户进行了测试,调查显示用户的平均主观偏好得分从37分提升至了52分,海拔检测准确度提升了81%。
新模型将集成在即将发布的Unity Meta XR Audio SDK v55当中。想要使用Universal HRTF,开发人员只需要升级SDK并重建应用程序,而无需进行其他更改。
微信扫码关注该文公众号作者