迪士尼的AI通过脚本生成故事板动画
从文本片段创建原始剪辑的AI并不像听起来那么新颖。例如去年,研究人员详述计算机系统利用一对神经网络,以生物神经元为模型的数学函数层,生成长度为32帧,尺寸为64×64像素的视频,描述如“在草地上打高尔夫球”等生成片段。近日,迪士尼研究和罗格斯的科学家们在Arxiv.org上发表了新论文,将这一想法更进一步,采用端到端的模式,可以创建一个粗略的故事板和视频,描绘电影剧本中的文字。当给定输入文本描述某些活动时,那么文本便可以通过动画模型生成动画而不需要注释数据或预训练步骤。“从自然语言文本自动生成动画可以在许多领域中均应用,例如,电影脚本编写,教学视频和公共安全。研究人员写道。 “在本文中,我们开发了一个能够处理复杂句子的文本到动画的系统。该系统的目的不是取代作家和艺术家,而是要使他们的工作更有效率,也更有趣。”(venturebeat)