【新智元导读】苹果正在玩个大的,让开发者用Siri做出AR应用,几句话变出虚拟场景!
没错,根据The Information报道,苹果正在开发软件,让用户用Siri为头显制作程序。苹果希望,即使是不懂代码的人,也能用Siri让头显创建一个完整的AR应用。
并且,这个应用还能放在App Store上,供其他用户下载。想象一下,你可以轻轻松松创建一个应用程序,让一个虚拟的动物在房间里的物体上方移动。这个过程中,你并不需要从头设计这个动物,对动画进行编程,然后计算它在有障碍物的3D空间中的移动。如果苹果成功了,这将是AR应用开发上的一个重大进步。目前,AR应用的开发这条路,并不那么好走。如果没有新鲜的内容,即使是再新的硬件,对用户的吸引力也有限。虽然这些工具部分针对的是软件开发者,但苹果的野心不止于此,它希望消费者也能使用它们。就好比苹果的Final Cut Pro视频编辑工具,专业人士可以用,消费者也可以用。这背后的技术,来自于苹果在2017年收购的一家名为Fabric Software的初创公司。由Fabric Software推出的Fabric Engine电子游戏引擎,让开发者不仅可以利用算法自动构建环境和模型,还可以用视觉编程系统改变物体、人物和环境的外观。Fabric的联合创始人之一Peter Zion,在收购后就留在了苹果,目前正在领导这个项目。现在,电影业已经广泛使用程序化生成人或植被,来节省构建计算机生成图像的时间和金钱。此外,「无人深空」(No Man’s Sky)等游戏,也是通过这种技术来快速制作新的行星、生物和飞船供用户探索。如果这么酷炫的技术成功在AR上实现了,苹果应该不愁头显的销量了。苹果为什么要整这么多花活呢?
显然,苹果推销AR设备时,面临着很大的困境,因为人们可以用AR做的事实在是太少了。另外,为了让用户的钱显得没白砸,苹果也在拼命充实AR上的内容。据内部人士透露,苹果的高管非常看重健康和保健方面的内容,建议AR里添加冥想和锻炼的应用。比如,在一个演示中,用户通过AR坐在一个禅宗花园里。在另一个演示中,用户在Dr. Seuss的绘本「Oh, the Places You’ll Go」中行走,幻想世界与现实世界奇妙地融为一体。显然,苹果现在正在遵循着计算机和智能手机的发展路线。让开发者和其他用户参与进AR应用的开发中,就能拓展AR设备的使用方式和场景,让它更加普及。而为了支撑这个野心,苹果已经推出了多个产品。
2017年,苹果发布了在移动设备上构建AR应用的软件ARKit。2021年,苹果发布的Object Capture可以根据拍摄的照片自动构建物体的3D模型。2022年,苹果发布的RoomPlan可以利用摄像头和激光雷达传感器来扫描并生成房间的虚拟平面图。此外,苹果自己也有一个团队也正在研究如何将现实世界的物体,真实地在头显中通过3D还原出来。看得出来,苹果一直都在鼓励通过iPhone和iPad进行AR相关的开发,但实际上开发者们对此却并没有什么热情。比如,研究公司Creative Strategies在2021年调查了500多名苹果的开发者之后发现,其中69%的人都没有用过ARKit。据The Information报道,一个内部代号为Z50的秘密团队正在开发苹果自己的AR内容。
这个几十人的团队,驻扎在加州卡尔弗城的一座无名建筑中。成员主要来自电子游戏行业,他们的任务是根据苹果自己的流媒体服务Apple TV+的内容,为头显制作AR版本。不过,相比起VR/AR领域时下最流行的游戏,苹果更注重教育和讲故事的体验。到目前为止,Z50团队已经公开发布了一个AR应用。这个基于科幻小说Apple TV+系列「For All Mankind」的应用,让粉丝们可以在AR中阅读信件、观看幻灯片,甚至还能操纵一台旧的Apple II电脑。与此同时,苹果在AR软件和内容的改善方面,也进行了积极的收购。其中,一部分是为了引进新的人才,而不是技术。2015年,苹果同时收购了总部位于慕尼黑为增强现实应用程序制作工具的Metaio,以及总部位于苏黎世专门从事面部动画和动作捕捉的Faceshift。2016年,苹果收购了DigitalRune,一家由Helmut和Martin Garstenauer两兄弟创立的瑞士公司,目标是让用户能够更容易地制作3D游戏(该收购此前未被报道)。2018年,苹果收购了另一家瑞士公司Flashwell,该公司利用机器学习让用户可以直接通过照片来搜索物品。而在2020年,苹果收购了两家位于南加州的初创公司:NextVR和Spaces,前者提供VR体育直播,后者提供VR视频会议。苹果忙着给自己的头显融合进AR和VR,它的竞争对手当然也没闲着。
小扎的Meta除了推出Quest VR头显,还提供了游戏创作应用Horizon Worlds,允许用户在VR中建立简单的3D环境,而不需要计算机代码。根据某些苹果前工程师的说法,苹果的内容创建工具可以跟Minecraft和Roblox类比,通过简单的界面,就可以轻松创建自己的3D世界。但是苹果希望这个工具也可以应用在AR上,所以它的开发,比Meta的VR工具更有难度。在VR中,只要创造一个完全虚拟的世界就好了;但是在AR中,虚拟物体是需要叠加在真实世界之上的。这就留下了重重陷阱。如果AR做得不好,用户一旦突然移动,幻觉可能就会被打破,或者看到虚拟世界和现实的物体发生碰撞。根据内部人士的说法,苹果一直专注于AR,对VR却没有太大兴趣,因为在苹果的高管看来,VR太孤立了。显然,这与Meta的做法不同。Meta一直大力发展VR游戏,作为Quest头显的一大特色。从2019年以来,Meta已经收购了9个VR游戏工作室。目前,苹果似乎计划将这个工具和头显同时发布,但这取决于软件开发的进度。https://www.theinformation.com/articles/apple-devising-software-to-help-anyone-build-ar-apps-to-drive-headset-sales?rc=epv9gihttps://www.theverge.com/2023/1/27/23574328/apple-ar-apps-siri-mixed-reality-headset