斯坦福大学的 Michael Rau 正在努力为数字时代重新构想戏剧。作为斯坦福大学人文与科学学院戏剧与表演研究(TAPS)项目的导演和创作助理教授,Rau长期以来一直探索戏剧如何反映现代生活的复杂性。现在,借助斯坦福大学人本人工智能研究所(HAI)的种子基金,他正在将这一使命推向新的前沿:将人工智能整合到现场表演中。
Rau的工作包括三种方法:
-
图像生成:一个由AI驱动的图像生成器接收现场表演的视频流,并根据提示改变演员的图像。AI调整后的画面同时投射到舞台上,与人类表演同步,创造出一种可以被视为梦境、替代故事或不同维度的图像流。
-
大型语言模型(LLM)现场剧本:观众的建议被输入到LLM中,生成基于建议的剧本。文本到语音算法将剧本的台词转化为声音。每个角色的台词被分开并传输给佩戴耳机的演员,演员根据AI编写的台词进行表演。这使得演员无需手持剧本或从监视器上读台词,而是可以在当下做出反应,通过耳机接收的台词进行表演。
-
姿势分析:这是一种为学者设计的分析工具,使用AI算法为每一帧录制的表演创建演员身体姿势的3D图像。与斯坦福大学图书馆跨学科数字研究中心的Peter Broadwell、Simon Wiles和Vijoy Abraham合作开发,其潜在应用包括帮助电影学者研究演员在电影中的编舞,或使政治学家能够分析政治家在演讲中使用的手势。
在这里,Rau描述了他的创新项目如何激发关于技术如何扩展故事讲述边界的讨论,同时保留戏剧的基本人性。
你是如何对戏剧与AI的交叉产生兴趣的?
我坚信好的戏剧反映我们现在的生活。我们今天的经历很大程度上是由技术介导的,但你很少在舞台上看到这种现实,因为观看某人使用技术并不有趣。我想以不同的方式制作戏剧——弄清楚人们如何使用技术,以及如何在舞台上有效地表现出来。我从2014年开始制作几场将技术融入戏剧表演的演出。2019年,关注新兴技术时,我对机器学习算法产生了兴趣。
AI如何增强戏剧?
我想找到一个交叉点,在那里人类仍然在创作艺术,而AI要么增强它,要么为表演增添一个有趣的新方面。我正在使用的技术使我们能够在观众在舞台上看到的编舞之上添加一个故事层,创造出自发的剧本,从而产生未经排练且非常激动人心的表演,并帮助学者使用完全不同的工具评估动作和姿势。在所有情况下,人类仍然是主要焦点。
许多人担心在艺术中使用AI只会是表面的和衍生的,没有意义或意图。这些技术是艺术还是仅仅是噱头?
我一直在努力解决这个问题。艺术的定义一直是主观的。这种艺术形式已经存在了几个世纪,几乎所有东西都以某种方式被尝试过,所以很难说什么是或不是噱头。我在应用AI的具体和狭窄的方式上非常有意,以免剥夺人类戏剧表演中有趣和富有表现力的部分。让我对AI艺术感到更舒服的是,我总是包含一个“人类在环”元素。
AI在戏剧中的好处是什么?
说实话,我们还不知道好处是什么。但鉴于斯坦福的研究使命,我认为我们探索这些技术更好,也许会出现一些意想不到和令人兴奋的东西。相反,忽视这项技术可能会以我认为无益的方式使这种艺术形式僵化。我希望AI能给我们提供更有趣的创作选项,让我们以不同的方式工作,并为正在进行的学术工作提供一层具体性和定量支持。
其潜在的缺点是什么?
首先,模型中存在重大知识产权和版权问题;这些问题必须得到公平和公正的解决。其次,我担心AI在创意领域的同质化效应,例如在内容策展中使用AI来狭隘地定制我们的娱乐体验。第三,我担心“以人为本”的创造力的丧失。创作艺术是你能做的最令人振奋的事情之一——如果我们将太多的责任交给机器学习系统,艺术家将会受苦。在我所做的工作中,我努力确保人类艺术创作仍然是工作的中心。
AI会改变戏剧的性质或作家、演员和导演之间的关系吗?
技术一直在改变戏剧。例如,我们已经从烛光转向煤气灯,再到电灯聚光灯。仅这一转变就导致了化妆、服装、布景和舞台布置的变化,许多人认为这会毁掉戏剧。我们现在正处于一个时刻,我们正在发现新技术,并弄清楚哪些方面是有用的,以及戏剧如何改变以适应它们。
我喜欢这种艺术形式的原因是两者都可以存在;你可以去伦敦的环球剧院,看看莎士比亚是如何最初表演的,你也可以去西区,看看我们舞台上部署的各种新技术。可以保留一种特定风格或表演方法,也可以尝试新的表演方式。
你对AI的哪个项目感到兴奋?
我正在与剧作家Michael Yates Crowley合作开发一个名为《Hamlet.AI》的剧本。剧情集中在一位剧作家和一位导演之间的冲突,他们对在舞台上使用AI的看法不同,进而展开了一场关于艺术未来的讨论和争斗。该作品将结合我现在正在使用的图像和文本生成系统,以及我们仍在开发的一些其他机器学习技术。这将是这项技术与我对生成性AI在艺术中复杂感受的完美结合。
本文 最初由斯坦福HAI发布 。