父母们都很清楚。该睡觉了,孩子们要睡觉了,但今晚,他们不想只听你朗读一本书。他们想要想出一个有音乐和视觉效果的故事。你的大脑开始筛选他们喜欢的角色和合理的情节,避免死胡同。如果智能设备上的一项新功能能有所帮助呢?

亚马逊的Echo Show设备现在就有这样的功能。“与Alexa一起创造”利用对话和生成式人工智能(AI)的先进技术,使年轻的说书人能够通过叙事弧线、丰富多彩的图形和有趣的互补背景音乐来构建独特的故事。然后,动画故事就会在你的Echo Show设备屏幕上栩栩如生。

什么是“创建与Alexa”功能,它是如何工作的?

“这是一种体验,Alexa成为你孩子的共同创造者,”用户体验设计师尼科·毕晓普(Nico Bishop)说,他的团队为“与Alexa一起创造”打造了客户体验。

An Amazon Echo Show with various Create with Alexa screens.

孩子们可以说一句简单的短语,“Alexa,编一个故事”,按照一些提示,Alexa就会根据孩子的喜好生成一个独特的原创故事。对于每个场景,AI还会制作插图、背景音乐和音效。孩子对角色、背景和其他变量的选择决定了故事的发展方向——没有两个故事是相同的。

例如,一旦孩子告诉Alexa他们准备好创作了,他们就会选择一个主题,可以是“太空探索”、“水下”或“魔法森林”。然后他们选择并命名一个角色——比如,一个名叫Speedy的宇航员或一个名叫fuzzy的外星人——选择一个颜色主题,并选择像“愚蠢”、“快乐”或“神秘”这样的形容词。有了这些输入,Alexa就会在幕后创作一个五到十行的故事,讲述五个独特的场景,这些场景都有完整的声音和视觉效果。即使孩子以后选择了同样的提示,故事也会每次都不一样。然后,他们可以将这个故事保存在他们的个人媒体库中,以便再次体验,并很快与他们所爱的人分享。

为家庭创造科技

孩子们一直喜欢听故事,有了“与Alexa一起创造”,他们也可以积极地共同创造自己的故事。

亚马逊提出“用Alexa创造”这个想法的方式与大多数产品的创意相同;团队从客户开始并向后工作。“我们一直把Alexa设想成一个值得信赖的伴侣,为家庭带来欢乐和乐趣,”Alexa人工智能产品主管Eshan Bhatnagar说。“我们创造这种体验是为了进一步实现这一愿景。”

A headsot of Eshan Bhatnagar, Head of Product, Alexa AI.

创作故事的行为已经成为巴特纳格尔和他6岁的儿子雷扬什(Reyaansh)睡前例行活动的一部分。“他是我们最早、也是要求最高的测试员之一,”巴特纳格尔说。“他帮我们发现了虫子,同时,他不耐烦地要求加入更多的主题和角色——‘爸爸,接下来我想要恐龙’,我儿子对我说。”

作为一名父亲,Bhatnagar知道确保孩子们的安全体验至关重要。“从一开始,我们就使用精心策划的数据源来训练人工智能模型,”他说。“我们有多种防护措施,如内容过滤和精心策划的提示,以确保这种体验既愉快又安全。”他说,隐私也是关键。与任何针对儿童的Alexa功能一样,“使用Alexa创建”在设备上启用之前需要父母的可验证同意。

“我和儿子一起创造有趣故事的时刻是无价的,”巴特纳加尔说。“它们不仅激励我改善‘与Alexa一起创造’的体验,而且更广泛地说,让生成式人工智能的力量解锁未来的可能性。”

这种体验是通过人工智能创新实现的

整个体验都是通过对话和生成AI的创新来实现的,这些创新有助于构建叙事、场景和声音。经过书面故事训练的语言模型生成故事的文本。它被训练成通过几个关键输入生成文本来构建一个有凝聚力的故事。

A child sits on a chair in a living room and looks at an Amazon Echo with Create with Alexa displayed on the screen.

场景生成模型通过选择人工智能或人类艺术家创造的背景图像来说明故事。它还会将叙述中的相关对象(如海盗、水母、海藻)添加到地点、方向手势(如挥手)和面部表情(如笑、哭)中。

最后,Alexa的人工智能声音和音乐生成器会产生相关的声音和补充的背景音乐。该模型借鉴了大量的乐器部分,包括艺术家创作的和弦进行,和声和节奏。一个人工智能的音乐编曲系统确保所有的片段配合在一起。

为了帮助建立和改善“用Alexa创造”的体验,研究人员从目标年龄组(4-8岁)的父母和孩子那里寻求反馈,他们提供了有洞察力的反馈。“他们说的每句话,我们都非常认真,”毕晓普说。“父母和他们的孩子有非常有趣和创新的想法,他们并不羞于分享。”

亚马逊儿童和育儿专家贝奇博士为家庭在假期中导航提供了有用的建议。

随着团队努力让“用Alexa创造”体验成为现实,他们继续改进技术和体验。例如,Bishop说道:“一开始我们并不认为我们能够创造出情境音乐。但是,她说Alexa科学团队代表客户发明,使每个故事都有基于故事主题元素的独特人工智能生成的背景音乐。了解更多关于它背后的科学。

讲故事的进化

根据Bishop的说法,这种人工智能辅助的故事创作只是技术所能做的皮毛。她说:“孩子们会希望能够说,‘我想看一面墙的巧克力’,我们预计很快就能做到这一点。”她补充说,随着图像延迟、声音效果和音乐功能的改进,语音识别能力一直在提高。

Bhatnagar表示,“与Alexa一起创造”始于创造力和人工智能的十字路口。他说:“我们设想这样一个世界,任何人都可以通过几句话就把自己的想法以数字创作的形式实现。”“Alexa将与他们在一起,作为他们的共同创造者帮助他们。”

家庭可以在11月29日开始使用Alexa创建各种免费模板。“用Alexa创建”在美国各地支持的Echo设备上都有英文版本