【中国纪检监察报】这款人工智能“橡皮擦”能把视频里的你抹掉了,效果丝滑( 二 )

  喷泉旁旋转舞蹈的少女在起跳后消失

  作者认为 , 目前最成功的视频补全方法是基于光流的技术 , 其能够合成色彩和光流 , 沿着光流的轨迹传递颜色 , 以提升视频的时间连贯性 , 从而减轻内存问题并实现高分辨率输出 。

  这项新研究也采用了基于光流的办法 。 作者表示 , 以往的光流补全方法往往无法保持运动边界的清晰度 , 而他们所开发的方法首先提取并补全运动物体的边缘 , 再以光流边缘为引导补全光流 。 由于并非所有视频中缺失的区域都能通过这种方法补全 , 研究人员引入了非局部光流 , 使得视频内容能够在运动边界上传播 。

  作者称 , 可视化和定量结果都表明 , 他们的方法与最新的算法相比具有更好的性能 。 他们同时指出 , 其方法的运行速度为0.12fps(Frames Per Second , 每秒传输帧数) , 与其他基于光流的方法相当 , 运行速度稍慢是一大弱点 。


推荐阅读