多案例解析，XR、AI技术如何创造新的体验设计

人民之家：悉尼歌剧院在悉尼博物馆举行 50 周年庆典

在这些新的叙事模式中，我们会因为成为意想不到的场面中的一份子而感到兴奋，而这就是一种沉浸式的叙事方法。

在过年的几年里，会产生这类叙事风格是有原因的。受到全球新冠疫情的影响，我们的工作方式、获取新闻的方式以及娱乐方式日益孤立，人们的生活发生了迅速的变化。人们渴望拥有共同的体验。因此，我们会发现叙事的风格在逐渐改变。在这些新的叙事模式中，我们共同感受到参与某种意外和新奇事物的刺激，发出惊叹和喜悦声。这是带有一些独特元素的沉浸式叙事。

在Art Processors, 我们认为自己是热衷于创造创新叙事体验的专家。我们不断寻找能在工作中使用的新工具和灵感。以下是一些最近激发我们灵感的叙事倾向。

极致叙事

极致叙事的风格正如其名字所表达的，这种叙事方法为参观者提供了许多潜藏的叙事"兔子洞"，他们永远无法消化完周围所有的故事。

这种方法改变了参观者所期待的一些整洁、独立叙述的体验预期，比如具有明确的开头、经过和结尾。正相反，在极致叙事中，参观者可以积极地创造属于自己的结果。通过他们的选择和沿途拾取的零散故事碎片来构建故事结局。他们通过自主选择和沿途获取的零散故事碎片来构建出故事结局。

有时，只有少数人会发现隐藏内容。有时，所有的内容都没有关联。一个兔子洞的尽头可能会是另一个的开始。

✪ Meow Wolf

Meow Wolf

对于参观者来说，他们永远没有一条明确的叙事路径可循。一切都被过饱和的色彩和织物、小玩意儿、图像和文字所占据。参观者很难全盘接收所有信息，关注到每一个小细节和每一个隐藏在人们视线中的“彩蛋”。正是这种目不暇接非常吸引人，参观者在混乱的场景中拥有掌控权，他们可以自主选择关注哪些细节，选择走哪条路。

✪ 不眠之夜

与Meow Wolf类似,《不眠之夜》作为一个互动式戏剧，也以一种出人意料的形式运用了极致叙事。在三个小时的时间里，观众游走在不同的楼层和房间，观看各种相互有关联的故事的发展。演员和观众之间几乎没有对话，也没有屏障。

观众在探索周围环境的同时，也可以通过翻找不同的道具或与演员直接互动，来拼凑出一个完整的故事。

《不眠之夜》

和Meow Wolf一样，观众没有办法体验场景的全部。观众必须自己决定进入哪些房间，跟随哪些演员，因此每次戏剧体验背后的故事都会有所不同。

它打破了戏剧的基本规则，观众应该保持安静、坐着，并与舞台上发生的事件保持距离。突破那无形的壁垒感觉有些禁忌，但同时也令人感到解放。

✪ 流行文化

电影《芭比》

泰勒·斯威夫特正在进行的“时代”巡回演唱会也通过运用隐藏彩蛋为我们提供了分层叙事的案例。演唱会发给观众的发光手镯会在演出中某些歌曲的特定时刻变色，其中蕴含了只有 "知情者 "才能理解的隐藏含义。使用者就像一个侦探，参与到故事中，拼凑相关信息，并自行创造意义。

发光手镯

极致叙事的可能性是无穷无尽的。一般来说，参观者喜欢选择，他们喜欢自己以某种方式塑造了周围体验的感觉。他们还喜欢惊喜。当你为他们提供看似无穷无尽的体验选择时，就更容易做到这一点。极致叙事可能会让人感到不知所措，但这也会让人兴奋不已。

混合现实

简而言之，混合现实（Mixed Reality）是将我们的物理世界和数字世界融合在一起。创意人员正在使用各种技术来实现这一点，包括增强现实（AR）、沉浸式视效、投影映射、全息技术等，将我们所知道的在世界中的“真实”转化为神奇的故事入口，解锁各种充满奇妙的互动。

✪ 揭秘克里希纳

而真正的亮点是参观者所佩戴的 HoloLens。这个设备可以激活整个展览中各种看似真实的物理元素。整个展览中最精彩的部分是一个真人大小的全息图像，展现的是在原来的柬埔寨石窟寺中发掘的一尊雕像。通过这项技术，参观者可以被传送到一个完全不同的地点。这样，参观者就能更深入地了解雕像的故事，而不必依赖文字繁多的展板。

✪ 坂本龙一之旅

另一个灵感来源是在 The Shed 举办的坂本龙一之旅。这是一场混合现实（MR）音乐会，已故作曲家坂本龙一的虚拟形象会参与其中。参观者佩戴的头戴式设备可以创造出作曲家就在房间中央用钢琴演奏音乐会的景象，同时还有与声音相匹配的虚拟艺术。音乐会可以坐着欣赏，也欢迎参观者四处走动，360 度欣赏演出。

这是一种强烈的情感体验。坂本龙一仿佛真的身在房间里，再次活过来，为你演奏他的歌曲。

✪ 与大屠杀幸存者交谈

在伊利诺伊州大屠杀博物馆和教育中心也可以获得类似的体验。在这里，参观者有机会与可能已不在人世的大屠杀幸存者交谈。参观者可以与大屠杀幸存者的全息图像互动，向他们提问，并根据之前录制的答案得到回应。这就像你真的在与这个人对话。

这种体验之所以震撼，是因为与坂本龙一之旅类似，全息影像与参观者的现实环境融为一体。这强调了他们正在进行实时对话的感觉。这是一场游客积极参与的对话，他们可以选择想问幸存者的问题。他们是故事的一部分，并拥有着主动性。

人工智能

这是一个不可忽视的存在。人工智能已经迅速改变许多学科参与创意过程的方式。它正在改变剧本创作、设计、动态图像、音频制作和音乐创作等多个领域。它还从根本上改变了机构可以为观众提供的体验类型。这种叙事方法可以用来创造新的图像、新的世界和新的声音，为场景增添令人惊喜和感动的感官体验。

✪ 达利的生活

萨尔瓦多-达利博物馆的 "达利生活"互动项目就是一个很好的例子。利用了大量的档案图像和电影素材，并翻阅了艺术家的所有访谈记录，博物馆的团队创建了一个达利本人的AI模型。

其结果是一种互动媒体体验，达利仿佛死而复生，通过大型视频屏幕直接与参观者进行互动。这个虚拟的达利无论动作还是言辞都与真正的达利无异。他对参观者的提示做出的回应并非随机，而是反映了他的真实想法。

我们很难不去思考这种人工智能应用可能带来的其他潜叙事可能性。参与者可以与其他历史人物进行交谈，比如艾森豪威尔总统、圣女贞德、早期穴居人，也可以见证那些有大量目击记录但没有影像资料的事件，比如十字军东征、法国大革命等。

这样做的效果类似于时空旅行，看到并与远去的历史人物交流，他们可以帮助我们更好地了解历史和人类的状况。

✪ 伦理考量

这是一个强大的叙事工具，可以让参观者更好地了解真实历史人物的生活。但是，游客不应该产生这些视频是真实的错觉。

达利博物馆的另一个基于AI的互动体验可以让参观者把自己的梦境转化为艺术。参观者需要一个对于梦境的书面描述。然后，博物馆利用人工智能技术 "DALL-E"，将以特定艺术家的风格呈现该梦境的艺术图像。

✪ AI带来的新机遇

纽约现代艺术博物馆（MOMA）与艺术家 Refik Anadol 合作，训练了一个AI模型来扫描博物馆的藏品，并找出不同作品之间的视觉和主题联系（这项任务如果由研究人员团队独立完成，可能需要会花费数月或数年的时间）。而AI模型通过浏览生成图像，重新构想了现代艺术的历史和并“幻想着可能发生过的事情"。

MOMA

这两个例子都说明，人工智能带来了前所未有的创意机会。其快速分析、转换大量数据，并将其可视化的能力为创意人员提供了“仿生手臂”（可以这样形容），使他们能够涉足新的领域并挖掘出更多叙事的可能性。在以前，由于缺乏时间或人力，以上这些都是难以实现的。人类的创造力依旧是驱动力（请注意 MOMA 仍然与艺术家合作进行AI项目）。但AI可以成为一种工具，使创作过程更快速、更精准、更多样化。

✪ AI与Art Processors

在Art Processors，我们也开始在项目的早期构思和规划中使用AI。我们使用Midjourney、DALL-E 和 Stable Diffusion来快速创建可视化效果图，以阐明客户的愿景。现在，我们的设计师可以创建渲染图，将早期的创意想法通过真实的物理元素和设计考虑因素投射到现实空间中。以前通常需要一周完成的工作，现在只需 30 分钟即可完成。

这种迅速在现实空间中实现创意想法的能力，为我们整个团队之间的沟通和头脑风暴潜力提供了更好的机会——我们现在可以比以前更快地生成和摒弃想法。这是一个创建视觉实验、草图和情绪板的强大工具，但同时我们必须明白，从这些工具中得到的东西并不能立即可以向客户呈现；在接近客户的要求之前，还需要添加大量专业的创意工作。

✪ 叙事方法和AI的未来

然而，在使用AI的过程中，有一些不可避免的严肃伦理问题需要考虑——我们如何将其作为一种工具来帮助激发人类的创造力，而不是简单地取代或模仿？它将如何改变我们对什么是现实的看法？什么是艺术？什么是有价值的？正如前文所提出的，机构如何以及为何使用人工智能的透明度仍将是关键所在。对我们如何使用这项技术的伦理影响进行持续的自我评估同样至关重要。

可以肯定的是，在未来几年里，我们将继续看到来自不同机构和场景做出的努力，这可能有助于更好地回答其中一些难题。

随着这些新兴工具和叙事方法的出现，叙事的前沿将持续扩张。创意的概念正在各行各业迅速发生变化。现在，这种潜力让人感到兴奋也不确定。就像踏进了一个秘密传送门，却不知道另一端会发生什么。

原文：

• Through the looking glass: emerging trends (& tech) in storytelling

作者：

• Art Processors

链接：

• https://blooloop.com/museum/opinion/storytelling-trends

编辑 赵奇元 董振

排版/ 校阅 董振

// NeXTSCENE 关注全球沉浸式体验行业，持续追踪前沿优质项目，关注解析相关政策，与国外沉浸式产业公司具有广泛合作。欢迎联系咨询