虽然多元宇宙在电影中看起来很像,但它并不是自己创造出来的。这需要一个团队的艺术家,作家,视觉效果专家,在这种情况下所有的一切都在一起, AWS客户跑道.Runway总部位于纽约,构建生成式人工智能工具,可以在浏览器中运行,生成、编辑、混音和重新想象媒体。奥斯卡颁奖典礼的喧嚣稍为平息后,我们与Runway联合创始人兼首席执行官Cristóbal Valenzuela讨论了电影和设计的未来。

AWS AI & ML奖学金计划为学生提供在就业市场上竞争的实践经验和技能。

告诉我们Runway的起源,以及你在研究和教学设计方面的背景是如何导致它的成立的。《天桥》是这种思考和探索的延伸吗?

我和我的两位联合创始人是在纽约大学艺术学院认识的。我们真的很想看看计算创造力和神经技术(机器学习模型中使用的一种方法,部分模仿了我们的学习方式)如何为电影制作人、艺术家和创意人员服务。因此,我们开始开发工具,并进行研究,让讲故事的人与这种新兴技术互动。今天,我们的研究一直在继续推进,我们有超过30个AI魔术工具,涵盖视频、图像、3D和文本,所有这些都是为了使内容创作民主化,让创意工具更容易获得。

Runway是做什么的?

Runway是一家全栈人工智能应用研究公司。我们为内容创作发明和构建人工智能模型,我们为用户开发工具来创建和编辑内容,贯穿创作过程的各个方面,从前期制作到后期制作。我们允许任何人,无论技术水平如何,都能够创建专业级别的内容。

对于我们这些没有机器学习背景的人,你能给我们一些生成式人工智能的基础知识,以及它是如何在你的世界中应用的吗?

在一般层面上,生成式AI和AI系统是用于理解数据或生成新数据点的复杂数学算法。但对于我们的用户来说,它们是简单的工具,使视频制作工作流程毫不费力。这就是为什么像我们这样的工具会流行起来的很大一部分原因,因为它们适合现有的工作流程,具有熟悉的外观和感觉。当然,在这些界面之下,有非常复杂的算法一起工作,产生你所看到的结果。

生成图像工作流|跑道学院

更广泛地说,生成式人工智能工具通过使用从现有数据中学习到的模式生成新数据来工作。这些算法可以合成以前不存在的新数据。为了生成新的东西——比如图像、视频或文本——你可以使用不同的输入机制。例如,自然语言已经成为控制图像生成算法的最简单方法之一,但其他输入系统,如视频,也是可能的。这就是我们的视频生成模型Gen-1的第一次迭代的工作方式。

人工智能是如何被用于制作“Everything Everywhere All in Once”的?你能解释一下什么是“多元宇宙”吗?

所有的一切都在一起电影公司有一个非常小的视觉特效艺术家团队,他们在紧迫的截止日期前工作。埃文·哈勒克(Evan Halleck)就是这个团队的一员,他使用Runway的人工智能工具来节省时间,并自动化繁琐的编辑工作。特别是在电影的岩石场景中,他使用了Runway的旋转镜工具来快速、干净地切割岩石,因为沙子和灰尘在镜头周围移动。这将几天的工作变成了几分钟的事情。

这是电影《Everything Everywhere All at Once》中岩石在沙滩上移动的特效剪辑。
图片由跑道
电影“Everything Everywhere All at Once”中的一段岩石移动片段创造了Runway,它构建了在云中运行的生成式人工智能工具,以生成、重新混合和重新想象各种媒体。
图片由跑道

AWS和云在创建过程中处于什么位置?

AWS对我们的业务至关重要。创建、训练和部署企业级AI模型需要强大的计算能力,我们与AWS的合作帮助我们交付了数百万人可以使用的产品。

在云服务的帮助下,PBS正在让更多的人比以往任何时候都更容易接触到各种媒体。

制作电影非常昂贵,尤其是视觉效果。Runway提供的工具与AWS云结合在一起会改变这种情况吗?

是的,当然。Runway等工具的强大功能与云技术相结合,使得电影制作人和其他创意人员在将创意变为现实的过程中节省了大量的时间和金钱。我们正在建设一个未来,在这个未来,我们将有可能制作完整的故事片和故事——从人物、配乐、b-roll、背景,以及介于两者之间的一切——仅通过文字和一小部分时间。

人工智能驱动的工具是设计的未来吗?如果是的话,它们是设计工具的连续统一体,还是一种全新的设计思维方式?

人工智能驱动的工具绝对是设计的未来,允许艺术家以新的和以前无法想象的方式表达自己。纵观历史,工具和技术的进步对设计产生了影响。如果我们回到19世纪中期,有一个很好的例子,那就是油漆管的发明,它让油漆有了更长的保质期,并且可以在户外反复打开和关闭。这最终导致了现代绘画的印象派运动——这与我们现在在内容创作上经历的大规模创造性转变没有什么不同。

生成式人工智能将如何推动电影世界向前发展?对于创作者和影迷来说,这是什么样子的呢?

随着生成式人工智能工具的采用不断增加,我们正在走向一个每个人都能制作以前只有少数人能创作的电影的世界。生成式人工智能的兴起正在节省数小时到数天的编辑工作,为用户腾出时间来专注于工作中更具创造性的方面。影迷们可以期待在未来看到完全生成的电影。

你刚刚赞助了一个人工智能电影节。规则是什么,结果又是什么?

Runway举办了有史以来第一次AI电影节在纽约的一个活动中,我们展示了十部来自创作者的短片。考虑的电影必须使用人工智能编辑技术和/或以人工智能生成的内容为特色。电影节还设有一个专家小组,更广泛地讨论电影制作的未来,其中包括获奖导演达伦·阿罗诺夫斯基。

我们能看看获胜者吗?

绝对的。这里是10部影片将奖项带回家

最后一个问题,对于所有的艺术家——以及我们所有人内心的艺术家——我们应该如何思考生成式人工智能和艺术之间的关系?

当涉及到为世界各地的创意人员赋权的内容创作时,我们正处于一个巨大转变的边缘。生成式人工智能(generative AI)等新技术允许讲述更多样化的故事,并为艺术家们在过去只能梦想的可能性打开了大门。这些工具正在引领下一代的艺术表达,这将是高度民主化和可访问的。

参观Runway的新娱乐及制作部看看他们是如何与下一代讲故事的人合作的。