DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛( 二 )


DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|自然化处理 , 去掉因光线产生的阴影
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|自然化处理 , 在不同场次中 , 运动员的着装会发生变化 , 需要进行统一
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|因为摄像机的关系 , 需要将画面不完整的部分补全 , 例如上图的小腿部分表现层处理完毕之后 , 需要加入控制层的逻辑 。 张浩天说 , 之后 , 你可以像玩游戏一样实时操控一方运动员 , 改变他的跑位及击球位置 。 Vid2Player中训练的运动员模型可以实现自动针对对方的弱势手、高难度接球、近网的位置截击等等技术动作 。
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|AI控制下运动员完成了一次漂亮的网前截击
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|有无行为模型对比图比如上图 , 当程序的行为模型介入之后 , 成功“扭曲现实” , 给出更加符合网球策略的击球方案 。 加入状态机的逻辑之后 , 网球赛中的每个回合都被分解 , 循环往复串行 。
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|红色点为球的落点 , 蓝色点为运动员击球后站位 , 这两者都由运动员模型进行决策在这些基础之上 , 可以做一些非常有意思的事情 , 比如可以编辑已有的网球比赛 。 下面这个例子是费德勒在2019年温网决赛痛失赛点的一个经典失误 , 利用Vid2Player可以改变费德勒击球的落点 , 这一小小的改变足以扭转历史 , 让费天王拿下2019温网冠军!
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|原始视频 , 球落到了白线之外
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|AI生成视频 , 球落到了白线之内你还可以改变对战双方的运动员 , 前提是该运动员处于视频集合当中 。 比如开头的费德勒同小威廉姆斯的同场竞技 , 甚至你还可以请费德勒自己同自己对局 。
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛
文章图片
图|费德勒VS费德勒张浩天还发给DeepTech一则视频 , 在其中他们限制了费德勒和纳达尔只能用正手打球 。 视频|费德勒VS纳达尔(仅正手)如果你愿意 , 甚至可以录制一些原始的素材 , 经由Vid2Player处理 , 生成同费德勒对战的视频 。 应用前景当DeepTech问及是否考虑未来将Vid2Player应用到游戏当中 , 张浩天回答道:“现在主流的游戏同我们采用完全不同的技术路线 , 一般情况下如果游戏厂商要做一款真人网球游戏 , 他们必须让运动员穿着采集器来建立3D模型 , 而Vid2Player目前是以纯二维的方式来解决问题 。 ”“我们更多地是从视频生成的角度 , 解决了生成真人网球视频的问题 。 理论上 , 这个解决方案也适用于乒乓球和羽毛球的单打比赛中 。 ”“目前Vid2Player所能做的其实比较有限 , 未来我们考虑让它能够兼容更多种的运动和模式 。 拿篮球运动来举例 , 届时我们希望它不再需要人类帮助定义状态机 , 而是让AI自己学会区分不同的状态 , 如传球、投篮、格挡等等 。 ”视频生成比图像生成要难得多 , 张浩天说 。 在图像生成领域 , 利用GAN已经能够生成很真实的图像 , 如人脸等 。
DeepTech深科技|想跟费德勒来场单打?AI可以帮你安排一切,温网停赛


推荐阅读