家长们都很了解这种做法。睡觉时间到了,孩子们也要睡觉了,但今晚,他们不想只听你读书。他们想要想出一个带有音乐和视觉效果的故事。你的大脑开始筛选他们喜欢的角色和避免死胡同的合理情节。如果智能设备上的一个新功能能有所帮助呢?

亚马逊的Echo Show设备现在也有这样的功能。“用Alexa创造”利用对话和生成人工智能(AI)的先进技术,让年轻的讲故事者能够用叙事弧线、丰富多彩的图形和有趣的互补背景音乐构建独特的故事。然后,动画故事就会在Echo Show设备的屏幕上生动起来。

“使用Alexa创建”功能是什么?它是如何工作的?

用户体验设计师尼科·毕晓普(Nico Bishop)说:“在这种体验中,Alexa成为你孩子的共同创造者。”他的团队为“用Alexa创造”(Create with Alexa)打造客户体验。

一个亚马逊Echo Show,带有各种Create with Alexa屏幕。

孩子们可以说出简单的短语,“Alexa,编个故事”,按照一些提示,Alexa会根据孩子的喜好过度生成一个独特而原创的故事。对于每个场景,AI还会制作插图、背景音乐和音效。孩子对人物、背景和其他变量的选择决定了故事的发展方向——没有两个故事是完全相同的。

例如,一旦孩子告诉Alexa他们已经准备好创作了,他们就会选择一个主题,可能是“太空探索”、“水下”或“魔法森林”。然后他们选择并命名一个角色——比如,一个名叫Speedy的宇航员或一个名叫fuzzy的外星人——选择一个颜色主题,并选择诸如“愚蠢”、“快乐”或“神秘”之类的形容词。通过这几个输入,Alexa在幕后创作了一个5到10行故事,讲述了五个独特的场景,并配有声音和视觉效果。即使孩子将来选择同样的提示,故事也会每次都不一样。然后,他们可以将这个故事保存在他们的个人媒体库中,以便再次体验,并很快与他们所爱的人分享。

为家庭创造技术

孩子们一直都喜欢听故事,有了“Create with Alexa”,他们也可以积极地共同创作自己的故事。

亚马逊提出了“用Alexa创造”的想法,就像它提出大多数产品的想法一样;团队从客户开始,然后逆向工作。Alexa AI产品主管艾山·巴特纳加尔(Eshan Bhatnagar)表示:“我们一直认为Alexa是一个值得信赖的伙伴,能为家庭带来欢乐和乐趣。”“我们创造了这种体验来进一步实现这一愿景。”

Alexa人工智能产品主管艾山·巴特纳加尔的头头。

编故事已经成为巴特纳格尔和他6岁的儿子雷雅安什(Reyaansh)睡前常规的一部分。“他是我们早期最苛刻的测试员之一,”Bhatnagar说。“他帮助我们发现了漏洞,与此同时,他不耐烦地要求引入更多主题和角色——‘爸爸,我下一个想要恐龙’,我儿子告诉我。”

作为一名父亲,Bhatnagar知道有必要让年幼的孩子们有安全的体验。“从一开始,我们就使用精心策划的数据源来训练人工智能模型,”他说。“我们有多种保护措施,如内容过滤和策划提示,以确保这种体验既愉快又安全。”他说,隐私也是关键。与任何以孩子为导向的Alexa功能一样,“使用Alexa创建”在设备上启用前需要得到父母的可验证同意。

“我和儿子一起创造一个有趣的故事的时刻是无价的,”Bhatnagar说。“它们激励我不仅要改善‘用Alexa创造’的体验,更广泛地说,要利用生成式人工智能的力量来解锁未来的可能性。”

这种体验是由人工智能创新实现的

整个体验是通过对话和生成AI的创新来实现的,这些创新有助于构建叙事、风景和声音。经过书面故事训练的语言模型生成故事的文本。它被训练成通过仅从几个关键输入生成文本来构建一个有凝聚力的故事。

一个孩子坐在客厅的椅子上,看着屏幕上显示的亚马逊Echo with Create with Alexa。

场景生成模型通过选择人工智能或人类艺术家创建的背景图像来说明故事。它还从叙事中添加相关对象(如海盗、水母、海藻)到地点、方向手势(如挥手),并设置面部表情(如笑、哭)。

最后,Alexa的AI声音和音乐生成器产生相关的声音和互补的背景音乐。该模型从一个巨大的器乐部分库中提取,包括艺术家创造的和弦进展、和声和节奏。一个人工智能音乐编曲系统确保所有的片段都能组合在一起。

为了帮助建立和改善“用Alexa创造”的体验,研究人员从目标年龄组(4-8岁)的父母和孩子那里寻求反馈,他们提供了有洞察力的反馈。毕晓普说:“他们说的每一句话,我们都非常认真地对待。”“家长和他们的孩子有非常有趣和创新的想法,他们并不羞于分享这些想法。”

孩子们在阅读和听故事的同时学习阅读更容易。发现亚马逊和合作伙伴的工具,让阅读更有趣。

随着团队努力让“用Alexa创造”的体验成为现实,他们不断改进技术和体验。例如,Bishop说道:“一开始我们并不认为我们能够创造出与情境相关的音乐。但她表示,Alexa科学团队代表客户进行了发明,使每个故事都有基于故事主题元素的独特人工智能生成的背景音乐。了解更多科学在它后面。

讲故事的演变

毕晓普表示,这种人工智能辅助的故事创作只是技术的皮毛。她说:“孩子们希望能够说,‘我想看到一堵巧克力墙’,我们预计很快就能做到这一点。”她补充说,语音识别能力一直在提高,图像延迟、音效和音乐功能也在提高。

Bhatnagar表示,“与Alexa一起创造”始于创造力和人工智能的十字路口。他说:“我们设想的世界是这样的:任何人都可以用数字创作的形式把自己的想法变成现实,只需要说几句话。”“Alexa将与他们一起,作为他们的共同创造者协助他们。”

家庭可以从11月29日开始使用Alexa创建各种免费模板。“用Alexa创建”在美国各地受支持的Echo设备上都有英文版本