国庆假期已经结束,复工第一天不妨来快速浏览一下这几天VR/AR圈发生了哪些事。以下为本次汇总包含的资讯目录,具体内容可查阅后文详情。- 苹果智能眼镜新专利曝光:带有蜂窝连接功能,或成为未来iPhone新形态
- 苹果Vision Pro新专利:可通过手势ID检测不同用户,以提供相应操作权限
- 苹果Vision Pro光栅显示屏相关专利曝光,可实现立体观看效果
- 苹果获虚拟在线商店专利,可通过VR环境或虚拟化身提升用户购物体验
- 苹果虚拟绘画应用程序专利曝光,用户可使用Vision Pro进行绘画
- 苹果Vision Pro配件系统专利曝光,用户可添加额外扬声器、摄像头、传感器等设备
- 苹果Vision Pro的“视频聊天角色创建”不能识别真实眼镜
- 因96%的预购用户购买4K版本,Immersed取消生产2.5K版本头显
Meta VR/AR芯片开发部门计划裁员
- 沉浸式协作技术提供商Campfire宣布其3D协作平台将登陆Meta Quest商店
- 前Oculus首席技术官约翰·卡马克对MR技术“不以为然”
- Valve聘请了《半衰期:爱莉克斯》Mod开发者Nate Grove
- Meta向顶级创作者支付数百万美元,以使用其肖像打造AI角色
- VR职业技能培训公司Transfr获40万美元C轮投资
- PS VR2游戏9月下载榜:《穿越火线 塞拉小队》评价褒贬不一仍夺魁
苹果智能眼镜新专利曝光:带有蜂窝连接功能,或成为未来iPhone新形态
近日,美国专利商标局公布了苹果公司的一项智能眼镜专利申请,该专利涉及眼镜形态,该眼镜具有一个环绕镜片的金属框架,并可能具有通过铰链与框架相连的镜腿。更重要的是,苹果智能眼镜中的射频收发器电路(如蜂窝电话收发器电路)可能与一个或多个天线相连。这些天线可能具有天线谐振元件,其形成方法是在金属框架上放置填充介质的缝隙,以将框架分成若干段。由金属框架分段形成的天线谐振元件可通过传输线与射频收发器电路耦合。图源:patentlyapple
苹果Vision Pro新专利:可通过手势ID检测不同用户,以提供相应操作权限
近日,美国专利商标局公布了苹果公司的一项专利申请,涉及基于手部特征验证用户身份的技术。苹果公司的发明涵盖了捕捉周围环境的传感器数据,这些数据可用于提取手部特征。在某些实施例中,二维图像帧可用于提取手部特征,这些特征可用于手部追踪。根据一个或多个实施例,可对网络进行训练,以读取传感器数据(如二维图像帧)并生成手部特征,如边界框、手部关键点、手部中心和手的特性。网络经过训练后,可根据单个二维图像帧为手部特征提供三维数据。例如,关键点、边界框和/或手中心能够以空间三维坐标的形式提供。在某些实施例中,手部特征可用于预测环境中的特定手部是否属于应被追踪的特定用户。例如,可以追踪捕获传感器数据的设备的用户,而忽略场景中的其他手。被追踪的手的手部特征可用于手部追踪技术。
图源:patentlyapple
苹果Vision Pro 光栅显示屏相关专利曝光,可实现立体观看效果
近日,美国专利商标局(USPTO)正式公布了苹果公司一系列共73项新专利。在其中,有一项与苹果Vision Pro相关的新授权专利。苹果这项获得授权的Vision Pro专利与光栅显示屏的使用有关。苹果公司在其专利简介中指出,光栅显示屏可以形成凹凸弧度。光栅显示屏可具有光栅透镜薄膜,透镜横跨显示屏的长度。光栅透镜的配置可实现显示屏的立体观看。为使显示屏具有更多曲率,同时确保令人满意的立体显示性能,显示屏可具有立体区和非立体区。在第一和第二非立体区之间可以设置一个中央立体区。非立体区的曲率可能大于立体区。为防止光栅显示屏内的串扰,可在显示屏中加入百叶窗薄膜。百叶窗薄膜可具有多个由不透明壁分隔的透明部分。不透明壁可控制显示屏的光线发射角度,从而减少串扰。百叶窗薄膜可以安装在光栅透镜薄膜和显示面板之间。
图源:patentlyapple
苹果获虚拟在线商店专利,可通过VR环境或虚拟化身提升用户购物体验
近日,美国专利商标局正式授予苹果公司一项专利,该专利涉及在其下一代在线苹果商店中提供可进行演示的虚拟化身销售人员等,提升用户购买设备和软件的体验。该专利的重点是在CGR/扩展现实环境中实现零售体验。
苹果公司在专利申请中描述的技术涵盖了与远程销售人员(通过虚拟通信会话)进行实时通信的能力,该销售人员可以在CGR环境中指导用户进行购物。销售人员可以提供相关产品,根据互动情况提出建议,并在CGR环境中为各种产品和服务的全面演示提供便利。销售人员可以在CGR环境中显示产品或产品系列,用户可以与产品互动,在销售人员提供或不提供信息的情况下进行产品试用。销售人员还可以操作产品,指出产品的特征并演示产品的功能,而无需用户输入。本文所揭示的技术为用户提供了一种在远程环境(如用户家中)中的零售体验,但同时又具有亲身购物体验的好处和功能。
图源:patentlyapple
苹果虚拟绘画应用程序专利曝光,用户可使用Vision Pro进行绘画
美国专利商标局正式向苹果公司授予了一项专利,该专利与未来可能推出的 Vision Pro应用程序有关,可为艺术家提供虚拟画布和素描本,提供虚拟擦除和涂抹技术,并可分层进行绘画或编辑。苹果公司在其新专利中描述了提供交互式计算机生成现实(CGR)环境的技术,该环境用于使用电子系统和设备(如 Apple Vision Pro)在绘画表面上创建虚拟绘画,其中CGR环境在创建虚拟绘画时为用户提供逼真和身临其境的体验,就像用户在现实世界中创建真实绘画一样。通过这种方式,所述技术可使用户无需使用传统的物理绘图工具即可创建绘图。此外,由于绘图是在CGR环境中创建的,所述技术允许用户根据需要轻松有效地操作(例如更改、擦除、改变)绘图的一部分。因此,所述技术使用户能够体验在 CGR环境中创建虚拟图纸,就像用户在真实环境中创建真实图纸一样,同时减少了与在真实环境中创建真实图纸相关的一些不便。根据某些实施方案,专利描述了一种方法。该方法包括:使用一个或多个图像传感器检测包括第一预定义手指方向类型的第一输入;以及在检测到第一输入时,响应于使用一个或多个图像传感器检测到的手部运动在计算机生成的现实环境中的绘图表面上绘图,其中响应于在计算机生成的现实环境中的绘图表面上绘图的手部运动,包括在计算机生成的现实环境中的绘图表面上产生与检测到的手部运动相对应的视觉效果。
图源:patentlyapple
苹果Vision Pro配件系统专利曝光,用户可添加额外扬声器、摄像头、传感器等设备
近日,美国专利商标局公布了苹果公司的一项专利申请,其中描述了未来可能添加到Vision Pro模块化系统中的“附件”组件。虽然苹果Vision Pro提供了基本的设计和功能,但不同用户对特定头戴式设备提供的组件和功能可能有不同的偏好。考虑到所需组件和功能的多样性,允许用户修改头戴式设备的组件和功能以根据用户的需求定制用户体验将是有益的。本专利公开的头戴式设备便于用户根据自己的愿望进行定制、调整和修改。本专利公开的头戴式设备可以包括连接机构,提供与其他设备的可调节和可交换连接,以提高头戴式设备的性能。这种连接既可以提供机械啮合,也可以在连接的设备之间提供可操作的通信。附件设备和/或外部设备可以方便地连接起来,以便根据需要在不同时间提供不同的组件和功能。因此,头戴式设备的主要部分不必包括提供用户日后需要的所有功能的永久性组件。相反,头戴式设备可以通过使用一个或多个附件设备来扩展和定制功能。
图源:patentlyapple
苹果Vision Pro的“视频聊天角色创建”不能识别真实眼镜
借助Apple Vision Pro头显,内置摄像传感器将创建一个类似于用户的定制“角色”,而这个角色将被用于FaceTime等视频聊天应用程序中。创建角色需要对面部和上半身进行3D捕捉,但事实证明,苹果的技术似乎还不够完美,无法将眼镜考虑在内。
图源:macrumors
正如M1Astra在社交平台上所指出的那样,visionOS代码要求用户摘掉任何遮盖脸部的东西,例如眼镜。然而,似乎没有任何二次扫描机制来单独捕获用户的眼镜,相反,苹果将允许用户从各种资产中“选择眼镜”。visionOS代码表明,Vision Pro用户将能够从一系列不同的眼镜和太阳镜选项中进行选择,这些选项具有方形、圆形、椭圆形、飞行员等常见形状,以及粗框和细框。用户可能能够找到与自己的框架接近的东西,但可能没有精确的匹配。目前尚不清楚是否会提供颜色选项,但这似乎是苹果将提供的定制资产。
图源:社交平台截图
苹果使用 Vision Pro摄像头将用户的面部表情和手部动作带入他们的角色中,使其具有模仿人与人互动的更真实的感觉。人物角色是“visionOS”的一个方面,苹果在Vision Pro头显推出之前正在努力完善该系统。9月,苹果开始对拥有Vision Pro 的开发者进行角色扮演调查,征求有关面部表情、外观匹配等方面的意见。
因96%的预购用户购买4K版本,Immersed取消生产2.5K版本头显
Immersed的VR头显Visor于8月份发布,是一款紧凑型设计的VR硬件,目标是提升生产力,其配备Micro-OLED屏幕、Inside-Out追踪、全彩VST、手势和眼动追踪功能,将于2024年发布,支持Windows、Mac和Linux系统。此前,Immersed公司为两款Visor开放了预售,其中一款采用单眼2.5K Micro-OLED屏幕(类似Bigscreen Beyond),售价500美元;另一款采用单眼4K Micro-OLED屏幕(类似Apple Vision Pro),售价750美元。但这家初创公司现在表示,它将不再生产2.5K版本,因为96%的预购用户选择了4K版本。Immersed称,那些选择2.5K版本的用户将“通过电子邮件收到特价购买4K版本头显的购买优惠,也可以选择全额退款”。与Bigscreen Beyond一样,Visor也将根据每位购买者的瞳间距定制镜片间距。Immersed在公布定价计划的文件中还提到,一旦确认扫描了用户的瞳间距数据,一般情况下不再退还定金。
图源:Immersed
Lynx-R1宣布将涨价至1300美元
法国XR硬件创企Lynx日前宣布,Lynx-R1的价格将从850美元上涨到1300美元。在此前的YouTube直播和博客文章中,Lynx创始人Stan Larroque将价格上涨归咎于制造成本上升和不及预期的销量,并称Lynx已将企业视作新的重点客户。Lynx表示,现有的众筹平台支持者和预购者仍将以他们支付的价格收到他们的耳机,但新订单的价格将很快提高到1300美元。
图源:uploadvr
据悉,Lynx-R1最初宣布将以1500美元的价格在2020年推出,但在2021年,Lynx转变了其产品策略,取消眼动追踪,大幅降低价格,并通过众筹活动以几百美元的低价瞄准普通消费者市场。之后,Lynx-R1本应在2022年4月发货,但在四次宣布延迟后,终于在今年8月开始发货。而如今虽然Lynx-R1涨价至1300美元,但Lynx仍然声称该款头显相较Quest 3来说对许多企业更具吸引力。
Meta VR/AR芯片开发部门计划裁员
10月3日,Meta内部论坛Workplace发布了一篇关于员工裁员通报的帖子,消息指出,Meta计划解雇Reality Labs Facebook Agile Silicon Team(后简称FAST)部门成员,裁员人数暂未清楚。FAST是Meta的一个专注于研发制造VR/AR定制芯片的部门,目前该部门拥有约600名员工。路透社指出,Meta于今年春季聘请了一位新高管来领导该部门,FAST的重组其实是一件预料之中的事情。从现阶段来看,Meta的芯片开发进展仍没有较大突破,其最新发布的Quest 3采用了高通的XR2 Gen 2芯片,而Ray-Ban Meta智能眼镜则采用了高通的AR1 Gen 1芯片。除FAST外,Meta还有一个专门面向AI计算的芯片开发部门,曾负责该部门工作的Meta基础设施副总裁Alexis Black Bjorlin于上周离职,目前该职位已由Meta工程副总裁Yee Jiun Song接任。
图源:网络
沉浸式协作技术提供商Campfire宣布其3D协作平台将登陆Meta Quest商店
近日,沉浸式协作技术提供商Campfire宣布,其3D协作平台将于2023年11月1日在Meta Quest商店推出。据该公司称,新的Campfire应用程序将在Meta Quest上使用全彩透视技术,使远程协作在整个物理产品生命周期的工作流程中更加自然。Campfire平台引入了一种新的数字媒体,旨在用交互式3D场景取代2D文档和视频。有了Campfire,技术内容创作者可以利用该平台从桌面上现有的CAD和3D文件创建场景,然后使用Mac、PC、iPad和现在的Meta Quest 3进行协作。“Quest 3通过全彩透视技术带来了全新的协作体验。与以前的VR设备相比,用户感觉自己与环境、内容和团队紧密相连,”Campfire联合创始人兼首席执行官Jay Wright说道,“无论是在设计评审中展示概念,还是解释复杂的装配程序,Quest 3上的Campfire带来的都是与实物互动的体验。”Campfire表示,适用于Quest的Campfire应用程序将于11月1日在Quest Store推出,支持Quest 3、Quest Pro和Quest 2设备。
图源:Campfire
前Oculus首席技术官约翰·卡马克对MR技术“不以为然”
Meta将通过Quest 3全面进军MR领域,但前Oculus首席技术官约翰·卡马克(John Carmack)似乎“不以为然”。从Meta Connect大会的信息来看,Meta对MR的野心有了更近一步的动作,有100多款新游戏和升级游戏将登陆 Quest 3,其中50多款之前发布的游戏将获得升级和MR功能。2022年12月离开Meta的卡马克就在X(原Twitter)上对MR功能表示了担忧。卡马克没有提及Quest 3,他表示MR虽然有“很多小众培训”案例,但他怀疑MR在大众市场的短期潜力。我仍然不相信MR应用是增加头显销量的手段。高质量的Passthrough效果固然很好,但我并不认为围绕将渲染与现实环境整合在一起而开发的应用是任何一种杀手级应用。我认为这是一项有趣而又具有挑战性的技术,它正在寻找一个合理的理由。VR的力量在于用更好的东西取代你的环境,而不是在你的真实环境中悬挂一个虚拟屏幕。在所有制作精良的展示MR未来的视频中,周围环境总是时尚、干净、宽敞的。这并不能代表现实世界的用户群体。这些努力当然有一定的价值,但我始终认为,还有更多容易实现的首要目标可以实现。
图源:X(原Twitter)
Valve聘请了《半衰期:爱莉克斯》Mod开发者Nate Grove
日前,《半衰期:爱莉克斯》一位Mod开发者Nate Grove宣布被Valve聘用。
图源:Nate Grove
Nate Grove负责制作了两款优秀的《半衰期:爱莉克斯》战役风格 MOD:《Incursion》和《Re-Education》,这两款MOD的整体游玩节奏、设置等,都与Valve的风格如出一辙。
图源:X(原Twitter)
Nate Grove在一条推文表示:“我被聘用的一个重要因素是我在工作室项目《Incursion》和《Re-Education》上的工作。在Valve工作是我(和许多其他人)的梦想,我认为这突出了支持将社区工作融入任何游戏的重要性。它只会让产品(和行业)变得更强大。”Nate Grove现在是Valve的关卡设计师和美术师,他此前为Annapurna Interactive公司工作,该公司以发行《Outer Wilds》、《Stray》和《What Remains of Edith Finch》等获奖作品而闻名。Nate Grove还为两款《半衰期:爱莉克斯》MOD制作了自定义资产。 Meta向顶级创作者支付数百万美元,以使用其肖像打造AI角色
据The Information称,Meta正向Snoop Dogg、Tom Brady、MrBeast和 Charli D'Amelio等明星付费,以使用他们的肖像来塑造虚拟AI角色。
图源:网络
据知情人士透露,对于几位顶级创作者来说,多年来每人的报酬可能高达数百万美元。目前,这些角色主要是Instagram、WhatsApp和Messenger上基于文本的聊天机器人,不过扎克伯格表示,明年年初还将推出语音功能。Meta可能希望通过与知名人士合作,利用这些明星在不同平台上已经积累的庞大受众群体。
VR职业技能培训公司Transfr获40万美元C轮投资
近日,总部位于美国的一家基于虚拟现实的中等技能职业技能培训公司Transfr宣布获得了40万美元的C轮增长资本投资。这笔投资将用于进一步开发Transfr的VR模拟和培训平台,适应其快速增长的客户群。
图源:Transfr
本轮融资由ABS Capital、摩根大通等以及现有投资者Lumos Capital Group、Akkadian Ventures、Spring Tide Capital等领投。至此,Transfr筹集的资金总额已超过90万美元。Transfr创始人兼首席执行官Bharani Rajakumar表示:“这项40万美元的投资使Transfr能够通过开发更多的模拟和解决方案,将课堂与教育和工业合作伙伴的职业道路联系起来,继续投资于未被发现的人才。”
《Among Us VR》即将登陆PS VR2
近日,游戏厂商Schell Games透露旗下游戏《Among Us VR》即将以9.99美元的价格登陆PS VR2。游戏此前已经可以在Meta Quest和SteamVR平台上体验。
图源:game-news24
据悉,《Among Us VR》最初声称将在PS VR2上市时同步平台推出,但最终Schell Games在今年2月份推迟了游戏PS VR2版本的发售时间。作为太空狼人杀游戏的VR版本,《Among Us VR》于去年11月发布,游戏发布后不到10周就实现了100万的销量。 PS VR2游戏9月下载榜:《穿越火线 塞拉小队》评价褒贬不一仍夺魁
据VR陀螺统计,PS VR2平台在9月的新作数量为11款,游戏总数则达到109款。而根据PlayStation Blog最新发布的榜单,知名IP《穿越火线》系列的新作《穿越火线 塞拉小队》(Crossfire: Sierra Squad)延续了8月底的良好势头,顺利夺得9月下载榜的桂冠。第二和第三名则依旧是老面孔《Beat Saber》和《Pavlov》。新上线的作品中,《ALVO VR》与《Hellsweeper VR》均跻身榜单前十。《穿越火线 塞拉小队》由韩国的Smilegate Entertainment开发,相较PS VR2上目前的主流VR射击类游戏,《塞拉小队》的玩法和操作更加简单易上手,比较适合新手玩家体验。单人模式包含13个主要战役,50个小队任务允许双人合作,此外还有支持最多4名玩家联机的Horde模式,内容体量充足。但对于VR射击老手而言,就容易显得缺乏新意与沉浸感。
图源:Smilegate Entertainment
具体榜单情况如下(日服待更新):
美/加拿大服 TOP 10
Crossfire: Sierra Squad
Beat Saber
Pavlov
Hellsweeper VR
ALVO VR
Job Simulator
Creed: Rise to Glory – Championship Edition
Walkabout Mini Golf
Swordsman VR
Firewall Ultra
欧服 TOP 10
Crossfire: Sierra Squad
Beat Saber
Pavlov
Job Simulator
Walkabout Mini Golf
Creed: Rise to Glory – Championship Edition
Swordsman VR
Kayak VR: Mirage
ALVO VR
The Dark Pictures: Switchback VR