Redian新闻
>
Meta与高通合作,为头显与手机应用优化Llama 2大语言AI模型

Meta与高通合作,为头显与手机应用优化Llama 2大语言AI模型

公众号新闻


看日报是个好习惯

 上海:支持生产性互联网服务平台引入垂类大模型、产业元宇宙、AR等技术 

7月18日,据《科创板日报》消息显示:上海市人民政府办公厅印发了《关于促进本市生产性互联网服务平台高质量发展的若干意见》。

其中提出,加快新技术的整合应用。市经信委总工程师葛东波在市政府新闻发布会上表示,“聚焦现代化产业体系,打造以新技术赋能的各类平台。例如,面向生物医药,要运用区块链等技术培育具有全渠道供给能力的服务平台。面向汽车产业,打造基于区块链和隐私计算技术的全场景服务平台。同时,还要支持平台引入垂类大模型、产业元宇宙、增强现实等技术,要搭建基于订单驱动的专业服务平台,运用区块链、物联网等技术建设碳管理公共服务平台。”

图源:网络


 Meta与高通合作,为头显与手机应用优化Llama 2大语言AI模型 


近日,高通和Meta宣布从2024年起,双方将合作在设备端优化Llama 2大型语言模型的执行,不依赖于云服务的单独使用。


图源:网络


高通将在其设备上提供Meta的开源Llama 2模型,支持智能虚拟助手等应用程序。Meta的 Llama 2可以做许多与 ChatGPT 相同的事情,但它也可以打包在一个更小的程序中,使得可以在手机上运行。


据团队表示,对于直接在VR/AR头显和智能手机等设备运行Llama 2这样的生成式人工智能模型的能力,可以帮助开发者节省云成本,并为用户提供私密、更可靠和个性化体验。


高通过去曾与 Meta 密切合作,特别是在 Quest 虚拟现实设备的芯片方面。为了支持Llama生态系统,两家公司目前的合作涵盖了研究和产品工程方面的工作。


 玩美移动与Dufry建立全球AR旅游零售合作伙伴关系 


玩美移动是AR美容与时尚技术解决方案提供商,近日宣布与旅游零售商合作,可在全球27个国家/地区的机场提供15个品牌的店内和网络虚拟试妆服务。


例如在伦敦希思罗机场、伦敦斯坦斯特德机场、曼彻斯特和巴塞罗那,可以试用贝玲妃、Kylie Cosmetics、娇兰、Huda Beauty等品牌的AR彩妆产品。Dufry计划今后在更多机场推出虚拟试妆购物体验。


图源:Business Wire


由于旅行者的购物时间非常有限,虚拟试妆解决方案有助于在极短的时间内为旅行者提供个性化和高效的购物体验,从而提高转换率,增加机场零售商的客户量。


玩美移动已经与全球500多个品牌达成合作,品牌的虚拟产品SKU可以很容易地部署到各个零售点,其拥有超过35万个SKU的庞大数据库。零售商可以选择他们希望合作的品牌,并在获得品牌批准后,轻松部署AI和AR技术驱动的购物体验。


 奢侈品牌Valentino推出Meta Avatar服装道具 


近日,意大利奢侈品牌Valentino首次在Meta Avatar Store上发布了数字服装道具。上线的道具包含了受近期IRL系列启发而设计的服装,涉及两件迷你连衣裙、一件紧身连身裤、一件西装外套、一件飞行员夹克、一件T恤、一条牛仔裤和一条短裤,这些数字服装售价均为5美元。


用户购买后,可在Quest、Horizon Worlds、Instagram、Facebook以及Messenger平台调用相关服装以装扮自己的头像,此外,头像效果也可以在视频通话中呈现。


图源:Meta


 Meta升级HRTF模型以优化Quest空间音频 


空间音频的工作原理基于头部相关传递函数(HRTF),这是一种数学函数,可用于计算应用于每只耳朵的音频滤波器,使音频听起来像是从3D空间中相对头部的精确点所发出的,它与常见非VR游戏使用的基本音频平移完全不同。


Oculus在2015年推出了使用HRTF的音频SDK,随后几年中出现了多项改进,如近场HRTF、体积源、动态房间建模、基于几何的声音传播等。


今年早些时候,Meta弃用了Oculus Audio SDK,转而采用了Meta XR Audio SDK(它是一次品牌重塑,里面的核心技术是一样的),近日,Meta对它进行了新的升级。


来源:Meta


值得一提的是,HRTF因人而异,因为每个人的耳朵形状和耳朵之间的距离有很大不同,对此,苹果的解决方案是通过iPhone的TrueDepth面部扫描技术生成HRTF。


Meta无法测量用户的脸部和耳朵信息,因而它使用平均值进行预设。Meta声称它在“音频研究方面进行了大量的投资”,并且在过去几年中,研究人员捕获了超过150人的更大、更精确的HRTF数据集。


Meta将这一基于新数据集的模型称之为Universal HRTF,并透露它可以提高定位和频率精度。


Meta表示,改进的定位意味着音频听起来与现实效果更为匹配,“这在判断高度时尤为明显”。而改进的频率精度则意味着音频听起来更自然,“着色和过滤更少”。


目前新的模型已对超过100名用户进行了测试,调查显示用户的平均主观偏好得分从37分提升至了52分,海拔检测准确度提升了81%。


新模型将集成在即将发布的Unity Meta XR Audio SDK v55当中。想要使用Universal HRTF,开发人员只需要升级SDK并重建应用程序,而无需进行其他更改。


  第一时间了解XR资讯  
  关注VR陀螺官网(vrtuoluo.cn)

VR陀螺的联系方式:
商务合作 | 投稿 :
西瓜(微信号 18659030320)
六六(微信号 13138755620)
寻求免费曝光:
六六(微信号 13138755620)
投稿邮箱:[email protected]


推荐阅读

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
ICCV 2023 | 基于预训练视觉语言模型和大语言模型的零样本图像到文本生成以 LLM 为核心 LLM@Core:程序员的大语言模型技术指南美国既然必输,何必要在台湾发动战争呢?中美沟通合作才是王道雷鸟创新与高通技术公司合作打造下一代消费级AR体验苹果AIGC招兵买马!挖角Meta,数十个大语言模型岗位招聘LangChain:2023年最潮大语言模型应用开发框架微软发布 Guidance 语言,用于控制大语言模型Meta为什么要发布开源Llama 2大模型;2027上市,Meta AR眼镜放弃MicroLED技术Meta开源Code Llama,号称编程领域 “最先进的大语言模型”改写游戏规则!Meta开源大语言模型Llama 2,可免费商用;微软Copilot定价每月每用户30美元 | 环球科学要闻Meta开源像语言识别系统,模型识别唇语翻译6种语言,本地部署人人可用大型语言模型专场上线!四位AI新青年直播讲解MiniGPT-4、LLaVA、Gorilla以及大型语言模型Token危机Meta 开源多语言大模型,可识别 4000 多种语言、错误率仅为 OpenAI 产品的一半学习生成式大语言模型,东北大学自然语言处理实验室有一堂课校友活动丨清华经管EMBA安徽校友会“科创未来·畅想空天地”无人机应用展示与小学生科普教育活动成功举办WAIC 2023 | 微软Office产品团队技术负责人蔡玮鑫:Copilot中大语言模型应用实践经验小说连载 《四维空间的魔鬼与人类起源》-- 06Meta被曝明年发布「开源版GPT-4级」全新大模型!参数量比Llama 2大数倍,可免费商用in your convenient time, or at in your convenient time?传言称Meta正与LG电子合作开发高端头显产品;Oculus创始人提出VR头显舒适度新标准博采众长!我全都要!Allen AI推出集成主流大语言模型的LLM-BLENDER框架硬核观察 #1070 社区批评 Meta 滥用“开源”来称呼其新大语言模型When RS Meets LLM:推荐系统如何从大语言模型中取长补短?面向应用视角的全面综述LLM in Medical Domain: 一文速览大语言模型在医学领域的应用小说连载 《四维空间的魔鬼与人类起源》-- 04面向真实用户需求的中文大语言模型评测第二期(LLMEVAL-2)发布破局之作:首部开源 AIGC 软件工程应用电子书《构筑大语言模型应用:应用开发与架构设计》小说连载 《四维空间的魔鬼与人类起源》-- 07AI协助完成披头士最后一首歌;GPT-4参与手冢治虫漫画续作;国内大模型侵权第一案丨AIGC大事日报碾压ChatGPT?Meta开源多语言大模型,可识别4000多种语言、错误率仅为OpenAI产品的一半小说连载 《四维空间的魔鬼与人类起源》-- 05Erklärung zur Zusammenarbeit大语言模型技术进展及应用 | 5月25日TF105报名得州起诉拜登政府: 这款手机应用鼓励了无证移民网信办一纸指令,游戏厂商与手机渠道即便不是“大和解”,也得合作了
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。