NVIDIA全面升级Omniverse，扩展OpenUSD生态系统

2023-08-09 13:08

看日报是个好习惯看日报是个好习惯

脑机接口公司Neuralink获2.8亿美元融资

近日，脑机接口公司Neuralink发布推文称已经获得2.8亿美元D轮融资，本轮融资由知名风投公司Founders Fund领投。

Neuralink成立于2016年，马斯克是该企业的联合创始人之一。Neuralink旨在探索侵入式的脑机接口设备，并曾经在猕猴等动物身上进行了先关测试。今年5月，Neuralink对外宣布已获得美国食品和药物管理局（FDA）的批准，并即将开展首次人体临床试验。

Neuralink在推特上还透露，目前公司正在招聘，岗位涉及“恢复视力和行动能力的工程挑战”。

收入达470万美元，Vuzix公布2023年第二季度业绩

当地时间 8 月 8 日，据美通社消息，纳斯达克 AR 上市公司 Vuzix 公布了截至 2023 年 6 月 30 日的第二季度业绩报告。

Vuzix 总裁兼 CEO Paul Travers 表示：“第二季度，我们实现了创纪录的智能眼镜销量，推动总销量同比增长 56%，环比增长 12%，这主要是由于通过额外的销售人员资源实现了销售渠道的增长，以及客户对我们产品的采用率提高。智能眼镜季度销量连续创纪录，2023 年上半年收入同比增长 61%。”

“我们还在产品开发、技术进步和新业务合作方面继续取得强劲进展。在我们业务的 OEM 方面，我们继续看到了新客户的涌入，包括越来越多的与国防相关的报价请求、以消费者和企业为中心的客户，他们都对我们的波导和显示引擎解决方案感兴趣。”

下表比较了 Vuzix 分别截至 2023 年 6 月 30 日和 2022 年 6 月 30 日止三个月的未经审计汇总合并运营报表数据的简明要素：

财务业绩显示，截至 2023 年 6 月 30 日的三个月，总收入增长了 56%，达到 470 万美元，而 2022 年同期为 300 万美元。总收入的增长主要是由于产品销量增加，特别是 M400 智能眼镜销量的显著增加。截至 2023 年 6 月 30 日止三个月的工程服务收入为 30 万美元，而上一时期的工程服务收入为 10 万美元。

截至 2023 年 6 月 30 日的三个月，总体毛利润为 100 万美元，占收入的 21%，而 2022 年同期为 30 万美元，占收入的 9%。这一改善是由于产品销量显著增加，从而实现了更大的利润增长，吸收固定制造费用。

截至 2023 年 6 月 30 日止三个月的研发费用为 280 万美元，而 2022 年同期为 300 万美元，下降约 5%。减少的主要原因是与新产品相关的外部开发费用和顾问费用的减少。

截至 2023 年 6 月 30 日止三个月，销售和营销费用为 250 万美元，而 2022 年同期为 190 万美元，增长约 36%。这一增长主要是由于与上年同期相比，员工人数增加导致工资和福利费用增加。

截至 2023 年 6 月 30 日止三个月的一般及行政费用为 430 万美元，而 2022 年同期为 500 万美元，下降约 15%。下降的主要原因是非现金股票补偿费用减少。

截至 2023 年 6 月 30 日的三个月净亏损减少至 900 万美元，即每股 0.14 美分，而 2022 年同期净亏损为 1,000 万美元，即每股 0.16 美元。

2023 年第二季度经营活动使用的现金流量净额为 790 万美元，而 2022 年第二季度亏损 460 万美元，这一增长完全是由于应收账款增加了 350 万美元。截至 2023 年 6 月 30 日，公司保持现金和现金等价物为 4860 万美元，总体营运资金状况为 6150 万美元，没有长期债务。

苹果获Vision Pro虚拟触控板配件专利，可协助用户与3D对象交互

本周，美国专利商标局正式授予苹果公司一项专利，该专利最初于 2020 年 4 月提交，涉及苹果 Vision Pro 的配件设备。更具体地说，这是一种虚拟触控板配件，用户可以在虚拟世界或游戏中使用它来移动和/或与物体交互。

此外，系统还可以具有一个投影系统，将虚拟对象投射到物理环境中，例如，作为全息图或投射到物理表面上，这样，使用该系统的人就能感知到叠加在物理环境上的虚拟对象。

苹果公司首先指出，现在与虚拟对象进行交互的技术对于用户来说可能是繁琐和不直观的。苹果公司的发明涵盖了使用多个设备系统进行远程触摸检测的技术，包括放置在桌面等物理表面上的外围设备。利用这些技术，用户可以通过对物理表面进行触摸来与虚拟对象进行交互。

系统将使用图像传感器跟踪显示器相对于物理环境中一个或多个固定物体的位置和方向。在某些实施例中，系统使用对内（例如，面向用户）的图像传感器进行注视追踪和/或手部动作追踪，例如，可用于控制用户的虚拟化身。

此外，该系统还可以有一个投影系统，将虚拟物体投射到物理环境中，例如，作为全息图或投射到物理表面上，这样，使用该系统的人就可以感知到叠加在物理环境上的虚拟物体。

苹果专利图 1A-1B 描述了用于各种 CGR 技术的示例系统；图 2 展示了一个系统示例，该系统包括一个头戴式显示设备和一个用于实现远程触摸检测的外围设备。

图源：patentlyapple

更具体地说，苹果公司的专利图 2 展示了系统 #200，包括外围设备 #200A 和头戴式显示器 (HMD) 设备 #200B。

外围设备包括摄像头传感器 #210（例如图像传感器 #108）和运动传感器（例如方向传感器 #110）。此外，HMD 设备 #200B 本身也可以是系统 #100 的一个实施例。

苹果公司的系统 #200，包括外围设备 #200A 和 HMD 设备 #200B，能够在桌面或普通桌子表面 #206 上实现精准的远程触摸检测，以便与使用 HMD 设备显示的 CGR 环境中显示的 UI 元素进行交互（例如，控制、操作、激活、选择）。

在某些实施例中，系统 #200 能够配置为三角度系统（例如，外围设备 #200A 上的一个摄像头传感器和 HMD 上的两个摄像头传感器）。

在一些实施例中，系统 #200 包括外围设备 #200A （例如，没有摄像头传感器），它发射红外光，由 HMD 上的摄像头传感器检测。

在某些实施例中，系统不包括外围设备，而是依靠 HMD 设备使用深度感应技术执行远程触摸检测。

图源：patentlyapple

苹果专利图 3 展示了一个提示用户纠正错误状况的通知示例；图 4-5 展示了一个在 CGR 环境中进行远程触摸检测的示例。

此外，苹果专利图 3 说明了用户通过 HMD 的透明或半透明显示屏查看 CGR 环境的视角。在某些实施例中，HMD 的显示屏是不透明的，因此用户是通过视频查看物理环境。

图源：patentlyapple

苹果专利图 6 和图 7 展示了在 CGR 环境中进行远程触摸检测的其他示例。在图中可以看到用户如何使用虚拟触控板，通过一个简单的手势就能将照片横向移动到直立位置。

苹果公司的专利图 11-12 展示了另一个系统示例，该系统包括一个头戴式显示设备和一个外围设备，用于通过红外线发射器而不是摄像头来检测物体，从而实现远程触摸检测。

更具体地说，苹果公司指出，在某些实施例中，外围设备 #200A 包括红外线发射器 #220，它发射红外线以实现远程触摸检测。

虚拟触控板将支持传统上已知的触控板手势，如轻点、双击、拖动、轻弹、捏、展开、按压、旋转等。

想了解更多详细的专利信息，请查阅苹果公司的授权专利 11714540。

建造经营游戏《ISLANDERS VR Edition》将登陆Quest和SteamVR平台

建造经营游戏《ISLANDERS VR Edition》即将登陆Quest和SteamVR，发售日期暂未公布。该游戏的原版《ISLANDERS》由GrizzlyGames和Stage Clear Studios开发，于2019年在Steam和其他主机平台发布，在Steam平台保持“特别好评”的评价。

《ISLANDERS》的发行商Coatsink也曾开发和发行《Jurassic World Aftermath》、《Shadow Point》、《Onward》等VR版游戏。

图源：Quest

这是一款“关于在美丽的岛屿上建造城市的极简风格策略游戏”。在《ISLANDERS VR Edition》中，建造资源不需要任何成本，玩家只需在有限的空间放置建筑，可以根据建筑物的位置获得分数，当积累了足够的分数后，就可以进入下一个岛屿继续建造。

开发者强调：“《ISLANDERS VR Edition》的VR版并不能提供与其他更复杂的城市建造经营游戏一样的深度和后期游戏功能。”预计VR版将延续原版的大部分功能和概念，但会针对VR版进行修改，并在Quest上提供可选的手部追踪支持。

【SIGGRAPH 2023】NVIDIA 全面升级 Omniverse，扩展 OpenUSD 生态系统

NVIDIA 在 SIGGRAPH 2023 上宣布对其 Omniverse 平台进行全面升级，主要新功能包括对 OpenUSD 的支持、新应用程序和集成、加持生成式 AI 功能以及增强空间计算能力。

开源通用场景描述框架 OpenUSD 与生成式 AI 是此次演讲的重点，新版本通过与 Omniverse 的新集成和连接扩展 OpenUSD 生态系统，如 Adobe Firefly 生成式 AI 模型很快将作为 Omniverse 中的 API 提供，以改进设计工作流程。

Omniverse 用户现在可以创建基于 OpenUSD 的空间计算平台（例如AR Kit 和 RealityKit）兼容的内容、体验和应用程序。空间计算选项可以本地集成到所有基于 Omniverse 的 OpenUSD 应用程序中。

除此之外，此次更新升级还增加了对 Khronos Group 的 OpenXR 开放标准的支持，使 Omniverse 能够在 HTC、Magic Leap 以及 Varjo 等制造商的 AR/VR 设备上运行；并增加了与 Luma AI、Convai、Inworld AI 和其他平台的外部连接，以集成其数字内容（例如头像或NeRF），对流式传输大型地理空间数据集的支持。

Brilliant Labs推出适用于iOS的arGPT Monocle

当地时间周二，Brilliant Labs 宣布正式发布其 arGPT 智能眼镜平台。与 Apple 的 iOS 操作系统兼容，它将在智能眼镜和可穿戴设备上启用 ChatGPT 人工智能。

人机接口 (HCI) 的下一级解决方案旨在使用语音提示提供对全球知识库的免提访问。该公司的 Monocle AR 设备为佩戴者提供平视显示器 (HUD)，这对于那些寻求简化日常任务的人来说是一个重大推动力。

对于具有 ChatGPT 经验的人来说，Brilliant Labs 的解决方案将为工作场所和企业提供新颖的工作流程工具。公司员工可以通过 Monocle 设备上的增强现实 (AR) HUD 创建实时翻译、构建研究、摘要和其他关键功能。

Monocle 还将增强基于位置的 ChatGPT 响应，包括引入实时翻译，而无需用户输入。佩戴者还可以使用该平台进行事实检查、查找旅行的关键信息以及使用 AR 提词器功能。

其他功能包括嵌入式麦克风、高可见度 AR 显示器和 5 兆像素摄像头等。该设备还提供蓝牙连接、具有语言学习模型 (LLM) 的生成式 AI 功能以及用于创建内容的扩散模型。

Brilliant Labs 首席执行官兼联合创始人 Bobak Tavangar 在一份声明中表示，此类技术可以支持“对 ChatGPT 不断增长的需求”。目前，该平台拥有超过 3 亿用户，沉浸式设备的用例在不断增加。

他补充表示，随着我们越来越接近持久人工智能助手成为现实的未来，arGPT 将成为“AR 可穿戴设备的理想解决方案”。

Tavangar 曾就职于苹果公司，担任产品设计项目负责人，他开发了公司的供应链技术平台。Tavangar 与联合创始人 Raj Nakarja 和 Ben Heald 创建了该公司，旨在通过 GenAI AR 可穿戴设备推动 HCI 解决方案。它旨在开发的开源生态系统将为跨垂直行业的用户提供支持，以支持他们的工作流程。

苹果更新iPhone头显配件专利，包括新增摄像头、与Siri 协同工作等功能

随着苹果推出 Vision Pro，可以肯定的是，苹果公司头显团队下的各个工程小组正在开发多种未来的 HMD 设备，包括入门级 Vision 头显、未来的智能眼镜，根据 17 项专利记录，或许还有 iPhone 的头显配件。早在 2008 年，也就是初代 iPhone 上市不久之后，苹果就为iPhone 头显配件这一概念申请了专利。

本周，美国专利商标局公布了苹果公司关于这种单一概念设备的第 17 项专利，表明苹果公司正在不断调整这种类型的设备。

在目前这项已授权的专利中，苹果公司指出，根据本发明的另一个实施方案，提供了一种控制便携式电子设备的方法，该便携式电子设备具有能够呈现基于图像内容的屏幕，其中便携式电子设备能够以正常观看模式呈现基于图像的内容，该模式在便携式电子设备的正常使用期间基本填满屏幕。该方法还可包括在便携式电子设备的屏幕上切换到头戴式模式（即为 HMD 观看配置显示屏幕）。例如，根据默认设置，便携式电子设备可配置为近距离头戴式观看（直接或通过头戴式设备# 102 的指示）。

再比如，头戴式显示系统可以在画中画（PIP）模式下运行。在 PIP 模式下，PIP 图像框可以部分叠加在标准观看图像框之上。另一个例子是，头戴式显示系统可以在外部观看模式下运行，该模式允许用户观看外部世界。

图源：patentlyapple

下面的专利图可以追溯到苹果公司 2008 年的专利申请。专利图 7 显示了与便携式电子设备连接的头戴式设备的侧视图。在该专利图中，苹果展示的是一种“夹式”风格的 HMD；图 3A 展示的是一种“滑式”风格/外形尺寸，iPhone/媒体播放器能够被滑入眼镜配件的隔层中。在该图中，苹果公司展示了当佩戴眼镜配件时，可以使用遥控器（也许是 Apple TV 遥控器）来控制屏幕上显示的内容。

图源：patentlyapple

苹果公司的专利图 6A 和 6B 显示了两个示例性头戴式显示系统的俯视图。

在苹果公司本周二发布的这项专利的新更新中，他们列出了 20 项新的专利权利要求，清晰地呈现在已授权专利的底部。在这一轮更新中，苹果公司介绍了“触摸传感器”的使用，该传感器用于感应在眼镜镜腿上滑动的手指，可以控制音频音量，以及在设备前框上放置摄像头、与 Siri 协同工作、用于打开眼镜和返回主屏幕的按钮，以及眼镜的铰链等。

想了解更多专利细节并查看苹果公司新的 20 项专利权利要求，请查阅苹果公司11716412 号专利。

沃尔玛手机APP更新：可在空间中放置多个AR商品，并一键购买

美国连锁巨头沃尔玛一直在致力于发展AR技术，它去年曾为其手机APP推出了一个名为“View in Your Home”的AR功能，通过该功能玩家可以在真实空间中放置特定产品的3D图像，以更好地检查产品的体积和装饰等细节。

近日，沃尔玛进一步为该功能准备了以下更新（目前适用于iOS最新版本）：

用户可以一次性在空间中放置多个AR物品；
支持“View in Your Home”功能的产品超过了7000款，涵盖室内外家具、电子产品、照明设备等；
“Complete the Look”功能可为用户推荐与空间组合得当的产品；
“Similar Item”可为用户推荐更多替代品；
对于空间放置的AR产品用户可以实现一键购买。

图源：沃尔玛

苹果在中国香港及美国申请“RealityProOS”及“EyeSite”新商标

早在苹果宣布推出 Vision Pro 与 visionOS 之前，就有外媒发现苹果公司通过一家名为 “Immersive Health Solutions LLC ”的空壳公司申请了“RealityProOS ”商标。现在，苹果公司又在中国香港申请了新商标RealityProOS，这也证实了该公司是这一商标的幕后推手。此外，苹果公司还于本周在中国香港和美国申请了第二个商标EyeSite。

苹果商标：RealityProOS

苹果公司在第 09 类和第 42 类国际类别下提交了商标申请，涉及以下内容：

类别 09：摄影和光学仪器及器具；用于记录、传输或复制声音或图像的仪器；数据处理设备；向数据库传输数据和信息的数据通信设备；用于测量健身和运动数值的仪器；照相机；光学镜片；隐形眼镜；智能眼镜；眼镜；光学产品；光学仪器及器具；计算机芯片；集成电路；用于发送、接收和存储数字数据的移动网络电信设备；计算机；计算机硬件；计算机外围设备；交互式触摸屏；计算机接口；智能手机；智能手表；耳机；头戴式耳机；虚拟和增强现实头显、护目镜和眼镜；可穿戴计算机硬件；与计算机、计算机硬件、电信设备和仪器、智能手机、智能手表、耳机、头戴式耳机、媒体流设备、便携式媒体播放器、照相机、虚拟和增强现实头显、护目镜、眼镜和智能眼镜一起使用的可穿戴外设、接口、控制器和遥控器；计算机软件；用于访问、浏览和搜索可下载的音频和视频文件、可从数据库或互联网在线获取的信息和评论的软件；虚拟现实和增强现实软件；数字记录媒体；可下载的音频文件、图像文件、视频文件、音乐文件和多媒体内容。

第 42 类：与计算机硬件和计算机外围设备有关的设计和开发服务；计算机软件的设计、开发、维护和更新；计算机编程；创建和维护网站；设计和维护计算机数据库；电子数据存储；云计算服务；提供不可下载的软件；开发计算机系统、数据库和应用程序的咨询服务；计算机安全和数据安全咨询；数据加密服务；在线提供计算机硬件或软件信息；维护、修理和更新计算机软件和应用程序；与计算机硬件和软件问题有关的技术咨询和支持服务；通过互联网和其他电子通信网络提供获取数据的搜索引擎；与上述各项有关的信息、咨询和顾问服务。

图源：patentlyapple

考虑到“visionOS”是苹果 Vision Pro 操作系统的官方品牌，那么“realityproOS ”将被用于何处？该商标是否会是一个备用商标？该商标于 2023 年 5 月在美国特拉华州申请，而苹果公司的所有空壳公司都在特拉华州隐藏商标。

苹果商标：EYESIGHT

苹果公司在国际分类 09 下申请的商标涵盖以下内容：照相机；视频监视器；显示屏；头戴式显示器；可穿戴显示屏；计算机电子显示屏。

图源：patentlyapple

苹果公司还在美国申请了第 98110179 号商标，属于相同的第 09 类国际商标，其文字表述与在中国香港申请的商标相同。

值得注意的是，苹果公司申请的国际商标类别非常重要，因为商标注册只能保护其原始申请中确定的类别。在法律诉讼中，最初申请的类别可能决定诉讼案件的成败。

NHL 与 Sense Arena 合作推出虚拟现实训练平台

近期，NHL 宣布与虚拟现实冰球训练项目 Sense Arena 达成一项多年协议，推出其首个交互式 NHL VR 平台 NHL Sense Arena。

图源：nhl

新的虚拟现实训练平台计划于 2023 年秋季推出，将展示所有 32 个 NHL 球队的标志和制服；新的 VR 程序也将与 Meta Quest 2 头显兼容，并与标准曲棍球设备配对。

Sense Arena 创始人兼首席执行官鲍勃·特蒂瓦 (Bob Tetiva) 表示：“NHL 在所有体育运动中拥有一些最热情的球迷，我们很高兴能够将他们带到冰上，体验像 NHL 球员或守门员一样训练的感觉。”

生成式AI数字人平台Inworld AI获5000万美元融资

Inworld AI是一家为游戏和其他应用程序开发生成式AI数字人或虚拟角色的公司，该公司宣布完成由Lightspeed Venture Partners领投的5000万美元融资，斯坦福大学、Samsung Next以及微软的M12基金、Eric Schmidt的First Spark Ventures和LG Technology Ventures也参与了本轮融资。

图源：Inworld AI

Inworld AI的联合创始人兼首席执行官Ilya Gelfenbeyn此前创建了一家名为API.AI的AI创业公司，为安卓提供语音助手软件，并在2016年将其出售给谷歌（现在称为Google Dialogflow），2021年正式成立Inworld AI，目前该公司的估值为5亿美元。

除此之外，Inworld AI还获得了2022年迪士尼加速器的投资，并得到了Epic的支持，用于将其平台与Epic的虚幻引擎集成。

Inworld AI声称将使用“多种”机器学习模型来让虚拟角色“全方位模仿人类交流过程”。包括语音变化和语调、面部表情和肢体语言等非语言行为。虚拟世界中的NPC可以学习和适应、利用情商处理关系、拥有记忆和回忆、自主发起目标、执行行动并遵循自己的动机。

VR 初创企业 Immersed 或将通过 SPAC 交易上市

据海外消息人士传，AR/VR应用程序公司 Immersed 已达成合并协议，将与特殊目的收购公司 (SPAC) Maquia Capital Acquisition Corp 合并上市，公司的估值约为 1.5 亿美元。

图源：gameishard

为了促进合并，Immersed 将通过可转换票据筹集过桥融资，投资者包括英特尔公司首席执行官帕特·基辛格 (Pat Gelsinger)、前足球运动员蒂姆·蒂博 (Tim Tebow) 和 All Blue Capital。

合并完成后，除非赎回，否则 Immersed 将获得 SPAC 筹集的资金，该交易的公告预计最早将于周三公布。

交易完成后，Immersed 将在纳斯达克上市，股票代码为“AIMR”。

据了解，Immersed 由软件工程师 Renji Bijoy 于 2017 年创立，专注于支持远程工作的空间计算软件。该公司还在开发新的软件和硬件工具，包括为企业客户提供人工智能驱动的助手。

第一时间了解XR资讯

关注VR陀螺官网（vrtuoluo.cn）

VR陀螺的联系方式：

商务合作 | 投稿：

西瓜（微信号 18659030320）

六六（微信号 13138755620）

寻求免费曝光：

六六（微信号 13138755620）

投稿邮箱：[email protected]