微软眼动追踪系统新专利曝光,或将用于未来VR头显设备;PS VR2或将支持手势识别功能
看日报是个好习惯
Sandbox VR推出LBE VR游戏《Seekers of the Shard: Dragonfire》
提供线下VR体验的Sandbox VR公司推出了新的LBE(线下实体场馆娱乐)VR游戏《Seekers of the Shard: Dragonfire》,6月9日后,玩家可在Sandbox VR的门店进行体验。
该作品由Sandbox VR内部的游戏工作室制作,《刺客信条》系列的前首席设计师Michael Hampden执导,其他团队成员也曾参与过不少3A大作如《孤岛惊魂6》《赛博朋克2077》、《巫师》系列和《战地2142》等热门游戏的制作。
图源:Sandbox VR
Sandbox VR创始人兼CEO Steve Zhao表示,《Seekers of the Shard: Dragonfire》是其首个具有多支线剧情的VR游戏,这意味着玩家可以多次重复体验,并解锁全新的冒险。
《Seekers of the Shard: Dragonfire》支持多人线下体验,玩家们将扮演西幻背景中的冒险家,使用剑、斧、弓和魔法与各种敌人对战。
Sandbox VR目前在全球拥有超过35家门店,并在迅速扩张中。在过去的12个月里新增了十几个门店,每个门店的场地都有5000多平方英尺供玩家体验虚拟世界的乐趣,据悉Sandbox VR现在每个月售出近10万张入场券。
Wayfair 结合虚拟现实技术推出数字设计工作室
欧美一家在线家具电商平台Wayfair宣布,将结合虚拟现实技术创建了数字设计工作室,提升家具购物者的店内体验,该技术允许客户创建各种房间布局并与之交互,以及在数字 3D 房间中以逼真的画面体验产品。
图源:consumeraffairs
据称,其第一个数字设计工作室位于马萨诸塞州戴德姆的 AllModern 商店。有了这项技术,购物者就不必猜测某个沙发与咖啡桌的搭配效果如何,或者他们喜欢的地毯是否与他们的抱枕相配。Digital Design Studio 允许客户自定义所有内容,以确保他们购买的东西看起来像他们想要的那样——他们可以看到布局、尺寸并测试不同的照明选项。
除此之外,还可以选择更改虚拟房间的背景颜色,以便购物者可以找到最适合自己房间的东西。
美国医疗保险和医疗补助服务中心为VR设备创建二级HCPCS代码
近日,美国医疗保险和医疗补助服务中心 (CMS) 为 VR 设备 RelieVRx(及其配套软件)创建了一个新的二级医疗保健通用程序编码系统 (HCPCS) 代码。该决定将该设备置于耐用医疗设备、假肢、矫形器和用品 (DMEPOS) 福利类别下。
本次调整更新是为了回应 AppliedVR 提交的申请,AppliedVR 是一家专门从事基于 VR 治疗的数字健康公司。RelieVRx 是 AppliedVR 的沉浸式 VR 产品,经 FDA 授权可用于治疗慢性腰痛。它包括一个头显、一个获得专利的呼吸放大器,以及配套软件,该软件可以指导患者完成包括疼痛管理技术在内的日常疗程。
HCPCS 代码 E1905 被描述为“虚拟现实认知行为治疗设备 (cbt),包括预编程治疗软件。” 它已于 4 月 1 日生效,不过,其报销率尚未确定,CMS 已要求在未来的 HCPCS 公开会议上考虑 AppliedVR 的定价信息,以便做出相应决定。
VR 技术在医疗保健领域的应用正在逐步加深,美国食品和药物管理局最近表示,申请批准的 VR 医疗设备有所增加。他们最近发布了一份清单,列出了目前通过 510(k)许可、De Novo 分类或上市前申请批准在美国合法上市的 VR 产品达到了 39 种。
FDA 强调了 VR 护理的好处,指出了该技术在诊断和治疗过程中的潜力,称其“能够以高度沉浸式和逼真的方式远程提供标准和全新类型的内容,并针对各种临床需求量身定制。”
苹果新专利曝光,或将为下一代汽车推出AR显示系统
今天,美国专利商标局公布了苹果公司的一项专利申请,该专利与AR技术有关。这份专利这与该公司即将推出的XR头显无关,但是与下一代AR挡风玻璃显示屏有关,它可以为用户提供有关车速的信息,为司机提供有关进入学校区域的各种警告,以及提供更清晰的路标并指出重要地标等。
苹果公司在其专利中指出,在许多情况下,可以在通过透明表面(包括窗户)感知的环境上提供图形覆盖。图形覆盖可以向观察者提供信息,包括与感知环境的一个或多个部分相关的信息。
在某些情况下,图形覆盖层被用于车辆,其中图形覆盖层可被车辆的乘员感知,并提供与车辆的一个或多个部分相关的信息,包括车辆速度,以及车辆所在环境的一个或多个部分。这样的信息可以提供在透明的表面上,包括前窗,在此也被称为挡风玻璃,这样的信息可以被车辆的操作者,包括驾驶员,在靠近车道的地方感知到。当操作者观察车辆行驶所经过的环境(包括迎面而来的道路)时,显示在操作员的视线范围内。
在某些情况下,所显示的图形应能覆盖位于通过透明表面感知的环境中的某些物体,并能增强、改变、控制与环境有关的信息,这些信息通过透明表面提供给观察者。这种图形叠加可以被称为AR显示。
苹果公司的专利图1说明了包括车辆导航系统(VNS)#140的车辆#110。在一些实施例中,VNS可以自主地控制一个或多个车辆控制元件#150,以使车辆沿着一条或多条驾驶路线自主地导航通过环境#100。VNS可以包括一个AR显示模块#111,也被称为AR显示系统。
图源:patentlyapple
苹果公司的专利图2A-B说明了一种包括透明表面的车辆,根据一些实施例,该透明表面提供AR显示,表明车辆相对于当地限速的空间指示;图3A-B说明了一种包括透明表面的车辆,该透明表面提供AR显示,修改位于外部环境的标志所呈现的乘员感知信息。
图源:patentlyapple
苹果公司的专利图4A-B说明了一种包括透明表面的车辆,它提供了一个AR显示,根据一些实施方案,该显示元件提供了环境中静态物体的表示,该物体目前通过车辆的透明表面被遮挡,无法直接看到。该表示可以包括环境中静态对象的3D表示。
在一些实施例中,包括在沿公路#400导航通过环境#490的车辆#410中的AR显示系统接收关于各种静态对象的信息,包括一个或多个结构、标志、地标、植物等。
在一些实施例中,包括在车辆#410中的AR显示系统确定与环境#490的传感器数据,表示相关的盲点#440,这些数据是由包括在车辆#410中的传感器设备产生的,基于一个或多个各种对象的存在,包括图示的车辆#420。
苹果公司的上述专利图7A-B说明了一种车辆,该车辆通过提供AR显示的透明表面和主动悬挂系统中的一个或多个,模拟环境中的一个或多个对象。
苹果公司的专利图8A-B说明了一种包括透明表面的车辆,该表面提供AR显示,其中包括环境中特定驾驶区的表示。驾驶区可以是学校区、过街区、与儿童存在有关的区域、与不同的残疾人有关的区域或其某种组合等。
需要了解更多专利细节,请查阅苹果公司的专利申请11640812。
苹果新3D建模专利曝光,可在模型生成过程中排除人、动物等可移动对象
今天,美国专利商标局正式公布了苹果公司一系列共25项新授权专利。在其中,有一份与生成3D模型相关的专利。
在3D模型生成过程中排除活动对象
苹果公司在其专利背景中指出,物理环境已经通过生成3D网格、利用3D点云和其他方式进行建模(例如,重建)。重建的网格代表3D表面点和物理环境的地板、墙壁和其他对象的其他表面特征。这种重建可以基于物理环境的图像和深度测量来生成,例如,使用RGB相机和深度传感器。
现有的基于物理环境的图像和物理环境中检测到的深度信息生成3D模型的技术,在捕获的图像信息中有移动的对象(如人、动物等)时,可能是不准确和低效的。此外,在重建物理环境时,在3D模型中包括某些对象可能是不可取的。
因此最好能排除那些正在移动或被认为是“可移动物体”的对象。例如,当一个物体在移动,而光强度信息由RGB相机捕获,深度信息由深度相机捕获时,在图像采集过程中可能会产生失真和干扰。因此,移动物体产生的干扰可能会导致不理想的效果或意外的出现,例如,导致3D表示法显示不准确和其他明显的问题。
苹果公司的发明涵盖了各种实施方案,其中包括使用深度数据和从RGB图像数据中生成的物体掩码,生成排除了可能移动的人或其他物体的3D模型的设备、系统和方法。3D模型是根据物理环境的图像、在物理环境中检测到的深度信息以及用于跟踪设备/深度相机的特定位置和方向的其他信息生成的。
出于各种原因,可能希望将各种物体从生成的3D模型中排除。例如,可能需要排除那些通常不是物理环境的固定部分的物体(例如,人、动物等)。这样做可以提供一个更有用的、真实的或有物理意义的模型。作为一个具体的例子,可以对一个人坐在椅子上的物理环境进行建模,通过排除人而得到椅子的建模。
图源:patentlyapple
苹果公司的专利图6是使用3D数据和基于深度和光强图像信息的分割掩码生成3D模型的示例系统流程图。
想了解更多专利细节,可查阅苹果的授权专利11640692。
AR/VR透镜开发商Imagia宣布完成450万美元种子轮融资
新一代透镜技术开发商Imagia最近宣布完成了450万美元的种子轮融资。该轮融资由Gates Frontier领投,MetaVC Partners和其他战略投资者参投,这笔资金将帮助Imagia加快公司第一代平面硅基光学透镜的开发和初步商业部署。
Imagia表示,其超透镜技术可以将整个光学组件缩小到一个平面、晶圆般薄的设备中,从而使光学组件的尺寸和复杂性大幅降低。据Imagia称,通过利用一种正在申请专利的方法,该公司的技术可以直接在各种基材上精准地绘制纳米级结构,创造出完全扁平的超透镜,通过设计引导光波,而不需要传统的曲面透镜。这些透镜可以是方形或圆形的,而且可以做得像数字显示器上的单个像素那么小。
图源:Imagia
Imagia指出,由于传统体光学器件的制约和限制, AR/VR头显等复杂光电产品的制造商一直不得不在人体工程学外形和光学功能之间做出权衡。Imagia表示,超透镜将不再受这些问题的限制,它为制造商提供了更多的光学设计灵活性,在减少尺寸、重量和复杂性的情况下实现更高性能的产品。
该公司还声称,其方法可以实现全新的设备架构;其超透镜可以在同一制造流程中直接建立在CMOS设备(如LED和图像传感器)之上,从而消除了光学机械对准的几个关键步骤。
Imagia公司首席执行官Greg Kress说道:“超材料是我们操纵光线方式的真正范式转变,类似于从模拟到数字计算的转变。传统的玻璃透镜已经有几百年的历史了。使用这些类型透镜的固有限制导致了复杂、笨重的光学组件,并且需要精准的机械对准。Imagia改变了这种方法,我们像集成电路一样建造透镜,这直到最近才成为可能。”
目前处于原型阶段的Imagia表示,其超透镜技术已经证明在各种应用中,光学系统体积总体上减少了90%以上,包括轻质、高性能AR眼镜和下一代全息显示器。该公司补充说,它还在努力为图像传感透镜设计奠定基础,以便为智能手机摄像头、卫星和计算机视觉系统设计带来显著优势。
“我们坚信,下一代AR眼镜将由这种超透镜技术驱动,Imagia的超透镜技术有望为光学设计开辟新的领域,这在以前是不可能的。”Pulsar公司的创始人兼首席执行官David Bonelli说道,该公司是Red6的ATARS和NuEyes的NuLoupes背后的AR硬件和光学设计公司。
Imagia补充说,它现在正与Pulsar公司合作,探索超透镜的未来应用。
Imagia由斯坦福大学博士工程师Greg Kress创立,由光学物理学家和材料科学工程师组成的团队领导,旨在通过其正在申请专利的超透镜技术,以及使用专有的硅基光学材料和光刻工具重塑下一代高性能光电子器件。
Imagia指出,它目前正在为客户开发AR显示和LED照明方面的产品。
松下紧凑型VR头显MeganeX将于7月上市
松下子公司Shiftall宣布紧凑型VR头显MeganeX的标准版及其商业版将于7月发布。MeganeX标准版售价为249,900日元(折合人民币约12552元),商业版售价暂未公布。
这款产品采用Micro OLED+Pancake光学方案,支持HDR,重量仅有320g(不含电缆)。耳罩可以折叠,内置扬声器,以及3.5mm耳机接口。MeganeX 可与SteamVR兼容,并支持Index控制手柄。
图源:Shiftall
今年1月,Shiftall曾宣布这款产品将于2023年3、4月份上市销售,但其更新的公告中以“对关键部件的制造过程进行审查”的理由宣布延期至7月发布,届时将在门店中展出MeganeX设备以方便用户体验。
第三届Meta Quest游戏展示会将于6月1日召开
Meta公司今天宣布,今年的Meta Quest游戏展示会将于6月1日举行。自2021年开始,Meta Quest Gaming Showcase到今年已经是第3届,而前两届都是在4月下旬召开。
本次展示会将有40分钟的内容,包括游戏更新和新作预告片,以及一个展后的开发者圆桌会议。届时VR陀螺会第一时间跟进直播情况。
图源:Meta
往届回顾:25分钟12款游戏!Meta Quest游戏展示会资讯汇总
索尼专利申请公布,PS VR2或将支持手势识别功能
近日,索尼公布了一项新的专利申请,未来PS VR2或能在脱离手柄的情况下,可完成特定的手势识别任务。
根据专利信息,玩家可将特定的手势动作录制到其资料库中,当玩家在游戏中触发相应的动作,即可转化为关联动作。例如当用户用双手完成一个心形动作,那么对应的角色可触发一个眼睛带有心形图案的动作。这套动作可适用于平台所有游戏。
专利文件指出,目前VR游戏的交互方式五花八门,涉及手柄、语音、眼动追踪等,这可能会拔高一些VR新玩家的上手门槛。因此,索尼认为有必要改进VR中个性化控制和交流的系统和方法,显然通用型手势识别是其中一种。当然,手势识别只是处于专利申请阶段,目前尚未清楚它能否顺利应用落地。
图源:索尼
索尼一直在开发有趣的创意体验,如今年3月,索尼发布了一份有关VR安全边界的专利申请,当玩家靠近安全边界或者有其他人或者宠物闯入,头显会发出相应的预警信息,预警信息可以设置为知名游戏角色的声音。
此外,另一项专利申请还提到了一个震动视觉警告系统,当有物体进入边界,屏幕边缘会出现一个对话气泡,系统可结合眼动追踪来判断玩家是否注意到警告信息。如果气泡没有引起玩家注意,那么头显还会相应提高其振动幅度。
《Horizon Worlds》现已支持将游戏内容发布至Instagram快拍
去年,《Horizon Worlds》开始支持把游戏内容分享至Meta的短视频平台Reels。近日,《Horizon Worlds》发布了v108版本更新,用户可进一步将游戏截图/录屏分享至Instagram和Facebook平台的快拍功能当中。
Meta指出,游戏快拍分享选项正在面向50%的游戏用户进行测试,该功能会在本月得到进一步推广。
此外,《Horizon Worlds》还引入了更多新功能,如其安全区可呈现更多真实世界信息、用户配置文件和菜单栏在呈现上也变得更加全面。
图源:Horizon Worlds
“XAI”可以有效识别用户产生 VR/AR 晕动症的根本原因
在体验增强现实 (AR) 或虚拟现实 (VR)设备 时,可能会导致人们出现晕动症——这是一种特殊类型的晕动病,症状从头晕到恶心,而减轻症状的现有研究通常依赖于“一刀切”的方法。
基于该问题,密苏里大学电气工程与计算机科学系助理教授 Khaza Anuarul Hoque 和一组研究人员正在努力开发一种个性化的方法,通过关注“根本原因”来识别每个人为什么会产生晕动症。
图源:showme
“晕动症并不普遍。例如,一个模拟的环境可能使我产生晕眩,而同样的场景可能并不会引起其他人的晕动症。人们在佩戴 VR/AR 头戴设备时通常会遇到的一个问题是用户体验会在一段时间后变差,包括恶心和呕吐的症状,尤其是当用户沉浸在大量运动的虚拟环境中时。这取决于很多因素,包括一个人的性别、年龄和经历。”Hoque 说他想专注于使用可解释的人工智能(XAI)的新角度,尝试改变 AR 和 VR 行业的产品体验问题。
Hoque 说道:“可解释的人工智能是一个很好的工具来帮助解决这个问题,因为通常机器学习或深度学习算法只能告诉你基于现状的决定是什么,而可解释的人工智能可以告诉用户人工智能如何以及为什么做出决定。因此,与其对所有用户强加一种静态的缓解技术,不如知道为什么某个特定的人会产生晕动症,并针对性地为他们提供需要的缓解措施,这样会更有效。可解释的人工智能可以帮助我们在不影响用户体验的情况下做到这一点。”
Khaza Anuarul Hoque(图源:showme)
除了观察自己的学生出现晕动症外,Hoque 还注意到过去五到七年中识别晕动症的学术和行业方法通常侧重于机器学习 (ML) 和深度学习 (DL) 等数据驱动技术。
“这种方法通常是‘黑匣子’,因此它们缺乏可解释性。我还意识到,DL 晕动症模型的可解释性可以显著提高模型的理解力,并深入了解这些 AI 模型为何以及如何做出特定决策。此外,通过识别和理解哪些类型的重要特征可能导致晕动症,我们可以帮助设计人员开发更有效的晕动检测模型。”Hoque 说。
Hoque 说,XAI 还可以帮助软件开发人员确定优化模型所需的最重要的功能,以教 AI 如何识别患有晕动症的人,这对于佩戴一体式 VR 头显的用户尤为重要。
这项研究最近在 VR/AR 研究的三大会议上发表:
2023 年 3 月 25 日至 29 日在 IEEE 虚拟现实会议上发表了“LiteVR:使用 XAI 进行可解释和轻量级晕动症检测”。
2023 年 3 月 27 日至 31 日在 ACM 智能用户界面会议上发表了“VR-LENS:基于超级学习的晕动症检测和虚拟现实中 XAI 引导部署”。
在 2022 年 10 月 17 日至 21 日举行的混合现实和增强现实国际研讨会 (ISMAR) 会议上发表了“ TruVR:使用可解释机器学习进行可靠的电子晕眩检测”。
《浴血黑帮 国王的赎金》发布更新计划,4~8月每月均有新内容
基于高分剧集《浴血黑帮》改编的VR游戏《Peaky Blinders: The King's Ransom》(译名:浴血黑帮 国王的赎金)已于今年3月、4月先后登陆Quest和PICO平台,目前收获的评价分别为3.88/5分(票数313)和4.4/5分(票数48)。
在收集了玩家的反馈后,近日开发商Maze Theory公开了本作的后续更新计划,从4月~8月每月均有新内容:
4月27日:3个新射击场、章节选择功能、游戏质量提升 5月18日:新射击场、新武器·霰弹枪、新战斗挑战 6月22日:2个新战斗任务、新武器挑战、新道具皮肤 7月20日:新战斗挑战、新武器挑战、道具皮肤定制功能、粉丝喜爱的场景 8月24日:玩家定制选项、新武器挑战、新玩法
图源:Maze Theory
以上只是第一阶段的更新,制作组表示将在今年晚些时候公开第二阶段更新的详细内容。此外本作还预定登陆Steam平台,故PC VR玩家应该很快也能玩到。
年货赛车游戏《F1 23》正式公开,今年6月将登陆PC VR
继《F1 22》首次支持PC VR后,系列最新作《F1 23》同样宣布将对应PC VR,游戏将于6月16日正式发售,预购冠军版可于6月13日提前解锁游玩。
在本作中,除了对应世界一级方程式锦标赛2023赛季的新款赛车、20名车手以及10支车队的官方阵容外,还有以下新元素:扣人心弦的故事模式“刹车点”将揭开崭新的篇章;赛道新增拉斯维加斯与卡塔尔;引入全新的红旗功能,赋予游戏战略元素;35%比赛距离功能,让比赛更加动感刺激;在线模式“F1 世界”借助全新的进度系统呈现,玩家可完成挑战、角逐奖励并获得升级。
图源:Electronic Arts
去年的《F1 22》口碑不佳,包括VR模式的适配也遭到了玩家的口诛笔伐,希望今年的《F1 23》能带来真正的进化。《F1 23》的登陆平台也包括PS5,但目前尚不确定是否会对应PS VR2。
苹果眼动追踪新专利曝光:可通过生物反馈确定用户注意力,以增强娱乐、学习体验
不久前,有消息称苹果正在开发一个AI驱动的情绪跟踪和健康教练应用程序和/或服务。彭博社的Mark Gurman表示:“苹果公司正在开发一项由AI驱动的健康教练服务和跟踪情绪的新技术,这是其用健康和保健功能吸引用户的新尝试。”更具体地说,“新的辅导服务(代号为Quartz)旨在让用户保持锻炼的动力,改善饮食习惯,并帮助他们改善睡眠。” 沿着同样的思路,苹果在欧洲的一项新专利从另一个方向扩展了他们对健康的关注。
苹果公司在欧洲申请的这一专利名为“基于眼球的生物反馈”,于2023年4月12日在欧洲公布。该专利涉及到用XR头显显示内容,以确定用户在显示内容时的专注状态。
苹果公司在其专利背景中指出,用户在电子设备上观看内容时的认知或专注状态,会对用户的体验产生重大影响。
例如,在扩展现实(XR)环境中使用头戴式设备(HMD)时保持专注和参与,可能是有意义的体验所需要的,如冥想、学习新技能、观看教育或娱乐内容、阅读文件等。用于评估用户观看和与内容互动的专注状态的改进技术可以提高用户对内容的享受度、理解和学习。此外,内容可能不会以一种对特定用户有意义的方式呈现。内容创作者和显示系统可能能够提供更好、更有针对性的用户体验,使用户更有可能在能够确定认知状态的基础上享受、理解和学习。
苹果公司的专利涵盖了设备、系统和方法,这些设备、系统和方法根据用户的注视特征确定用户在展示内容(例如,视觉和/或听觉内容,可能包括现实世界的物理环境、虚拟内容或每种内容的组合)期间或之后的注意状态,以增强体验。
虽然该专利可能侧重于XR头显的使用,但苹果公司指出,他们的系统也可以适用于iDevice、MacBook和iMac/桌面电脑,向用户提供内容(例如,视觉和/或听觉体验),并通过传感器获得与用户对内容的反应有关的生理数据(例如,注视特征)。
基于获得的生理数据,所述技术可以通过对用户的凝视特征进行分类,确定用户在呈现(例如,冥想体验)期间或之后的专注状态(例如,冥想与思维游离)。
基于分类的注视特征,技术可以向用户提供反馈,即当前的注意状态与内容的预期注意状态不同,推荐类似的内容或内容的类似部分,和/或基于当前的注意状态与内容的预期注意状态不同,调整内容或对应于内容的反馈机制。
在一个示例性的实施中,将冥想和正念练习与本专利中描述的技术相结合,可以通过向个人提供冥想表现的实时反馈来增强冥想体验。
在XR环境中使用HMD时,在冥想期间保持专注和参与,可以改善用户的冥想练习,并帮助用户获得与冥想相关的益处。
例如,对冥想感兴趣的新手可能难以在冥想过程中专注于任务,他们可能会从对其表现的准确反馈中受益。本专利中描述的技术可以根据用户的注视特征的变化来检测用户在冥想时何时分心。
在冥想过程中找到注意力缺失的定义标记并提供表现反馈,可以增强用户体验,从冥想课程中获得额外的好处,并为用户提供指导性和支持性的教学方法,以推进他们的冥想练习。
眼球注视模式可以根据个人的注意力状态和面前场景的特征而变化。这些模式可以在用户执行需要不同程度注意力的正念任务时,在使用带有眼动追踪技术的HMD时获得,例如集中注意力进行呼吸冥想。
在冥想过程中,注意力会向呼吸方向波动。当一个人在睁眼冥想任务中专注于他们的呼吸时,眼睛注视的时间可能会慢,并被限制在场景的一个特定区域。当一个人失去注意力并开始游离时,眼睛注视的稳定性可能会下降和/或眼睛注视的速度可能会增加。
观察一段时间内(几秒钟到几分钟)眼球注视速度和位置的重复测量,可以了解用户在不同时间尺度上的基本注意状态。这些注意力的指标可以用来在冥想体验中提供反馈。
苹果公司的专利图1说明了一个显示视觉体验并从用户那里获得生理数据的设备;图2说明了图1中用户的瞳孔,其中注视特征随时间变化。图3是一个流程图,表示对注视特征的变化进行分类以确定用户的专注状态的方法。
苹果公司的专利中,图4A和4B是说明用户在两种不同的注意状态下的目光特征变化的图表;图5A和5B是说明用户在两种不同的注意状态下的目光特征变化的图表。
图源:patentlyapple
在苹果公司的专利图6中,我们能够看到一个框图,说明一个示例性设备的设备组件;图7是一个示例性头戴式设备(HMD)的框图。
苹果这项专利于2020年申请,并于2023年4月12日在欧洲公布,编号为EP4162345。
开发人员、内容创作者和教育工作者可能会对苹果公司的发明产生浓厚的兴趣,因为他们知道用于头戴式设备的眼动追踪生物反馈系统可以使他们未来的客户和/或学生在观看内容时保持更深的注意力状态,增强他们的学习和/或娱乐体验。
微软眼动追踪系统新专利曝光,或将用于未来VR头显设备
近日,微软提交了一项新的专利,该专利可能与未来潜在的VR头显有关。
截至目前,PlayStation是唯一通过PS VR2拥有VR兼容性的家用游戏机。甚至任天堂也涉足了VR,推出了Labo套件,该套件中包括一个用于Switch的可构建外壳,该外壳可以被玩家举到面前感受VR效果。不幸的是,任天堂的Labo并没有真正得到玩家的青睐。甚至索尼的PS VR2在销售方面也没有达到该公司的预期。微软对VR没有表现出太大的兴趣,可以说这一领域被索尼、Meta和Valve等公司所主导。
图源:微软
但近日微软的一项关于增强型眼动追踪系统的新专利有可能被应用至未来的VR头显。该专利描述了一个可以自我校准的系统,也可以适应设备的变形或其他变化。虽然这项专利可能看起来不太像VR头显,但一个能够自我校准和补偿变形的坚实眼动追踪系统可以构成一个直观和用户友好的VR系统的一部分。该专利可能只是对微软Hololens的改进,Hololens是美国军队等使用的AR设备。
微软似乎正在努力保持Xbox游戏平台的相关性和竞争力。一个Xbox品牌的VR头显可能还很遥远,但随着VR在主流游戏市场上获得吸引力,微软很可能希望在VR领域具有竞争力。微软最近还试验了一种手持模式,允许用户在Steam Deck等设备上更舒适地使用Windows系统,然而据说这只是一个原型,据其背后的开发者透露,目前“没有什么进展”。
专利并不总是能转化为消费产品,但增强型眼动追踪系统似乎是一项明智的技术,与一些不时申请的更深奥的专利相比,它更有可能转化为消费产品。最近,索尼在其一项专利中提到了来自“劣质制造商”的不同家庭娱乐系统,从而向微软泼了一盆冷水,证明两家公司之间的关系不佳。
韩国东西大学推出基于AI技术的数字人与真人混合XR全息表演
近日,韩国东西大学正通过以SW为中心的大学项目组,为所有学生提供SW相关的基础教育,同时通过融合联动专业的运作实现各种跨学科融合。
在本项目中,正在进行AI工学、大数据、AI内容融合专业、视频动画专业、外语专业、音乐专业的融合教育,创造出一个基于人工智能技术的数字人(魔法少女),旨在通过在人工智能的帮助下创作的歌曲,将数字人和真实演员的混合全息表演。
该项目将持续到明年1月,将获得3亿韩元的预算。
当地广播电台KNN和釜山信息产业振兴院作为合作伙伴参与,计划通过文化艺术内容策划和制作实践、AI联动培训和项目支持培训,制作“魔法少女” 全息图表演内容作为最终输出,将于11月28日在东西大学Centum校区昭香音乐剧场公演。
东西大学 SW 融合中心负责人 Kim Ki-hong 表示:“人工智能正在对内容产业产生强大的影响,预计未来将继续扩大。通过这个项目,我们希望能成为一个使用人工智能呈现创意融合的模型。”
ARway宣布其AI平台将与Magic Leap的AR眼镜进行集成开发
提供基于室内定位和AR导航的SDK服务的公司ARway宣布其人工智能平台ARway.ai,预计将在未来60天内完成与AR眼镜Magic Leap Glasses的整合。
据悉,通过与Magic Leap的AR眼镜整合,ARway产品能为客户提供了手机以外的设备带来更大兼容性,这将提高技术的利用率。随着Magic Leap硬件的不断改进,他们现在能够支持更强的环境理解的大规模体验,既契合ARway平台,又能在现有的Magic leap生态系统不断扩展功能。
整合后,ARway将为机构、品牌和企业提供一个软件包,利用ARway的计算机视觉和扩展跟踪技术,通过ARway.ai 平台在Magic Leap 2设备创建和发布大规模的位置持续的AR体验。这项服务面对的是工业、制造业和零售业,并将为用户提供解放双手的沉浸式数字体验,以提高生产力。
此前Magic Leap宣布支持OpenXR,在此基础上,ARway可以有效地实现“一次编码,随处部署”的功能,这是该公司与所有能兼容OpenXR的AR眼镜和头戴设备的整合战略。
微信扫码关注该文公众号作者