生成德国小哥用AI拍大片!GPT-2写台词、StyleGAN做特效、Replica来配音

图片
新智元报道
来源:towardsdatascience
编辑:白峰、永上
【新智元导读】最近 , 国外一个技术极客Alex看了电影《阳光泉水》后深受启发 , 决定自己用AI来生成一部 。 他首先用GPT-2生成了一段荒诞不经的剧本 , 接着用StyleGAN2制作了一些人物和视觉特效 , 还找到了一个超实用的语音生成工具 , 一起来看下效果吧!
国外一位网友Vlad Alex十分喜欢电影(Sunspring)《阳光泉水》 , 着迷于其荒诞的对白 , 一番搜索发现 , 剧本的创作者是Benjamin(本杰明) 。 
图片
这还没完 , 这位Benjamin其实是一个运用LSTM制作的人工智能程序 , 由Ross Goodwin 研发 。 Goodwin不仅是一位AI领域的研究者 , 还是一位大诗人 。
之后曾获得英国电影协会提名的英国导演Oscar Sharp完成了影片的拍摄 , Thomas Middleditch是本片主角 。
这些由人工智能写作的剧情 , 即使充满了荒诞主义 , 并且由看似随机的短语组成 , 但在看剧的时候 , 我们的大脑还是在很用力的理解剧情 。
Vlad Alex知道了这些后 , 激动不已 , 觉得自己也能让AI来拍一部电影 , 结果真的成功了 。 
图片
如何制作自己的AI电影呢?
Vlad Alex考虑到自己是电影业余爱好者 , 没有专业的工作室 , 因此可以在不影响影片质量的前提下去掉一些可有可无的元素 , 只保留电影的必要元素:情节、演员和视觉效果、音乐 。
生成一份充满荒诞派情节的电影剧本
Alex使用由Openai推出的GPT-2语言模型 , 为自己生成了电影脚本 。
GPT-2语言模型的colab版本 , 可以从下面的网址进入:
https://colab.research.google.com/github/mrm8488/shared_colab_notebooks/blob/master/GPT2_with_JS_UI.ipynb
图片
在程序中需要输入相关提示语 , 比如电影有几个主人公 , 并且设定基本的场景 。
Alex为电影脚本设定了以下这些信息:
图片
接下来从GPT-2语言模型语言模型中提供的各式文本类型中 , 选择荒诞剧创作 , 这种创作风格介于贝克特 , 摩罗扎克和大卫·林奇之间 。
接下来GPT-2语言模型会输出荒诞剧风格的脚本创作结果:
图片
GPT-2语言模型是OpenAI在2019年发布的一种人工智能语言处理模型 。 今年5月底 , OpenAI发布了GPT-3语言模型 , 基于一系列基准测试和独立的自然语言处理系统 , 来实现语言翻译 , 以及生成新闻文章 , 甚至可以完成SAT考试中的问题回答 。
Alex使用的GPT-2语言模型 , 已经学习了40G的文本内容 , 由15亿个参数共同来生成写作内容 。 而最新发布的GPT-3语言模型则有高达1750亿个参数来完成语言处理 。
回看上面生成的文本 , 我们可以发现由GPT-2语言模型创作生成的文本 , 具有很强的超现实性 。 这些内容通常没有实际意义 , 但是符合一些文学语境 。
毕竟 , 这可是学习了40G人类文本的模型啊 。 
图片
StyleGAN2来一段人物视频特效
Alex是StyleGAN2的超级粉丝 , 使用StyleGAN2可以轻松地生成一个新面孔 , 甚至是转场动画 。 于是Alex用它生成了一些人脸和房间的图像 , 但是使面部表情和故事描述保持一致 , 着实费了他不少功夫 。
推荐阅读
- 汽车市场|德国法院为何认定特斯拉的无人驾驶是虚假宣传?主要有3个原因
- 美股研究社|马斯克回应德国判定称Autopilot基于航空术语而命名
- 行业互联网,埃隆·马斯克|伊隆 · 马斯克晒出特斯拉德国柏林超级工厂的设计图
- 科学,AI人工智能|核磁共振生成的BOLD5000人类视觉神经成像数据集
- 智能穿戴|德国工业设计的“真无线耳机”,13.1mm的大动圈,低音澎湃有力
- 苹果手机|2020德国红点奖——智能产品类获奖作品欣赏
- 行业互联网|德国科研人员将“数字孪生”技术用于城市规划
- 会计凭证|Excel这样操作,会计凭证、工资条、考勤表模板(自动生成).xls
- 无人科技|德国法院判决特斯拉广告“误导性宣传” 涉及辅助驾驶及FSD功能
- Science锋芒|意义重大!德国计划在2021年,建成该国首台量子计算机!
