电话推销员、打字员、翻译等重复劳动型作业在未来很可能被AI代替，这早不再是什么难以置信之事了。不过人们遍及还怀有梦想：需求构思和审美的作业，仍将处于保饭碗的安全区……但便是有那么多科学家，一点也不担忧“就业问题”，坚持拓宽人工智能的极限，应战人文艺术范畴。
所以他们让AI办画展做规划乃至写小说，忙得不亦乐乎，最近几位来自北航、清华的科学家又向电影范畴进军，研制出了可以编排视频的AI，Write-A-Video。研讨者宣称，有了它之后，写段文字直接拍成电影，不再是梦。
这愿景实在太招引我了，不由得就想一探终究，这到底是个什么玩意儿，又到底是怎样作业的。
先来看一个视频。
怎样样，作用仍是很不错的吧，文字与视频彻底同步。你能直接感觉到它成功抓取了语句中的要害词。
事实上，Write-A-Video能编排的短片的品种适当丰厚，输入的文字可所以网络文本、人物介绍、旁白以及童谣。然后，它会依据这段文本来挑选语句的要害词，这是进行视频编排的第一步。
接下来，依据要害词，Write-A-Video将从资料库中挑选出适宜的视频片段，这一进程首要分红两个进程：要害词匹配和视觉语义嵌入。
为了便利要害词匹配，资料库中的每个视频都被切割为快照。研讨团队采用了直方图的切割算法来使镜头切分愈加准确：假如帧与帧之间在HSV色域的直方图相差大于80%，而且追寻的SURF要害点80%以上不匹配，那么算法就会以这两帧为界，切分镜头。
HSV即色相（Hue）+饱和度（Saturation）+明度（Value），HSV色域是一种将RGB颜色空间中的点在倒圆锥体中的表明办法。
完结了要害词匹配之后，视觉语义嵌入技术会为匹配成功的镜头打分，排名最高的将成为候选镜头。这是经过一种VSE++办法来完结的：将跨模型内容编码到联合特征空间中，从而把文本和镜头联络起来，算法会从每十帧镜头中抽取一帧，核算它和文本之间的余弦类似度，终究取平均值，这样得到了镜头匹配程度的终究得分。
选好了视频，下一步便是将镜头组合起来。这一步，从实质上来说是Write-A-Video对视频的混合优化，而它也有自己的审美规范。
首要，画面要亮堂并生动。
其次，镜头不能晃动得太凶猛。
终究，要防止不连贯的跳接（jump cut）和相反的相机运动。
所以像是戈达尔可坚决是不可以去学的，反面教材便是《精疲力竭》。
Write-A-Video的作业功率是惊人的，它能将编排师的作业时刻缩短数十倍。即便是新手，经过这款东西，能在13分钟内完结专业编排师7个小时的作业，而且质量平起平坐。
可以幻想它可以解救不少编排师的头发。网剧隔天就要上线，其间的一个艺人刚在网络上爆出丑闻，怎样办怎样办，定心这回你不必熬夜了，交给Write-A-Video去搞定吧。
此外它还供给了友爱的修正页面。用户都可以经过修正文字内容，比方增加、删去、移动文本，直接看到界面上候选的视频的改变。文字可以直接被转成配音旁白，烘托视频气氛。
看到这儿，艺术爱好者估量现已不由得了，他们会跳起来说编排可不是马马虎虎攒几个视频就可以，艺术是创造你懂吗。
别急，咱们也没认为Write-A-Video现在已达到电影艺术家的水准了，从眼下看来，它能代替的，应该是视频编排员。就成片作用而言，Write-A-Video做出来的视频与案牍照应，镜头转接非常天然，实是新闻拍摄、纪录片的绝佳帮手，间隔艺术电影还有点远。
在实际国际中，人工智能技术早就现已老练运用于视频后期制造，极大地提高了出产功率。咱们了解的视频网站，如爱奇艺、腾讯、优酷，在视频编排、视频增加等方面都有老练的AI使用。比方，使用AI选出最优的要害帧或要害片段作为视频封面，主动生成赛事集锦、影视剧片花等。而像是抖音、快手等短视频渠道，在视频美化等方面也有许多老练技术。
不过话说回来，尽管有人一千个不愿意，仍是有AI导演要出道的。2018年，一个名叫Benjamin的AI，只是花费2天时刻，就自导自演完结了一部名为《Zone Out》的科幻短片。他的资料来源于一切公有范畴的电影，以及提早在绿幕前录制的艺人表情。
Zone Out片段
风趣的是，尽管Benjamin成功完结了此次科幻电影的制造，但换脸技术仍是呈现了一些瑕疵，比方女主角竟然长了小胡子……外加剧组没有时刻制造真人配音，所以，这部片子并没有突出重围获个奖啊啥的也并不意外。
真实值得一提的是，Benjamin现已接连三年参加伦敦科幻电影节（Sci-Fi London）的48小时电影应战了。此前的两届，它只担任写剧本，会给出少量的舞台指示。艺人们依据对剧本中的台词，自行演绎。而它参加的两部短片《Sunspring》和《It’s no Game》均获得了评委的喜爱，进入了竞赛的前十。
Sunspring片段
Benjamin是由导演Oscar Sharp和AI研讨员Ross Goodwin一起创造的电影AI。多年来，导演Sharp一向想制造一部由随机片段组成的电影，乃至经过投骰子来挑选文本，并写出了一个剧本。Goodwin则在为企业客户代写信件时，磨练了机器辅佐创造的技术，他一向在用马尔科夫链写诗。
简略解释一下这个奥秘的巨大上名词：马尔科夫链。假如在给定现在状况及一切曩昔状况情况下，一个随机进程的未来状况的条件概率散布仅依赖于当时状况，那么这个随机进程即具有马尔科夫性质。马尔科夫链指的是一组具有马尔科夫性质的离散随机变量的调集，常见比如便是简化的股票涨跌模型，它现在被较多地用于机器学习算法之中。
Benjamin则是根据LSTM（长短期回忆，Long short-term memory）递归神经网络来进行文本辨认。LSTM的利益是使用马尔科夫链截取更长的字母串，因而，可以更好的猜测长语句，乃至阶段。它还拿手发生原创的语句，而不是从资料库中东拼西凑。
Benjamin的真身（2016）
或许有人会问Benjamin到底是作者仍是个东西？Benjamin本来被命名为Jetson。但在2016年的初次上台就遭到热切重视，点击量过百万后，它在颁奖现场接受了采访。风趣的是，当人们问询Jetson下一步将做什么的时分，它说了形似包含艰深道理的的几句话，并没忘在终究道明自己真实的台甫。
这部分内容如下：
What's next for you，Jetson?
Herewe go. The staff is divided by the train of the burning machine building withsweat. No one will see your face. The children reach into the furnace, but thelight is still slipping to the floor. The world is still embarrassed.
The party is with your staff.
My name is Benjamin.
Oscar Sharp和Ross Goodwin在《Sunspring》推出之后，也收到了很多问询，来自那些忧虑自己因而而赋闲的人们。面临这些质疑，两位主创说，这让他们想起了照相机的创造，照相机并没有代替绘画，反而是给予绘画以自在。他们都认为自己所做的事也是赋予写作以自在。
References
http://dy.163.com/v2/article/detail/EO2LBDEO0511GV8V.html
http:///gaming/2016/06/an-ai-wrote-this-movie-and-its-strangely-moving/
https://arstechnica.com/gaming/2017/04/an-ai-wrote-all-of-david-hasselhoffs-lines-in-this-demented-short-film/
https:///story/ai-filmmaker-zone-out/
本文经授权转载自科学艺术研讨中心（ID：Art_And_Science），如需二次转载请联络原作者。
