江苏龙网

  1. 首页 > 人文 > >

深兰科技 能够让渣画质，马赛克秒变高清|深兰科技，美国名校提出AI算法

在这个追求高清画质的时代 ， 我们对渣画质的容忍度越来越低 。 在知乎上搜索「低分辨率」、「渣画质」 ， 会看到一大片诸如「如何补救清晰度低的照片」、「如何拯救渣画质」之类的问题 。 那么 ， 将渣到马赛克级别的画面秒变高清 ， 是一种怎样的体验？近日 ， 杜克大学的研究人员就用AI算法成功研究出了让渣画质变清晰的方法 ， 相关报道一出 ， 就引发热烈讨论 ， 今天我们就和兰博一起来了解一下这个惊艳四座的AI算法吧 。
史无前例 ， 马赛克瞬间变清晰
世界名校杜克大学的研究人员提出了一种AI算法 ， 称之为PULSE(PhotoUpsamplingviaLatentSpaceExploration ， 通过潜在空间探索的照片上采样) 。 该算法可以将模糊、无法识别的人脸图像转换成计算机生成的图像 ， 其细节比之前任何时候都更加精细、逼真 。 通俗来讲 ， 就是根据输入的低分辨率图片 ， 系统会生成一系列高清图像 。
深兰科技 能够让渣画质，马赛克秒变高清|深兰科技，美国名校提出AI算法
文章图片
如果用以前的方法 ， 想要把一张模糊的「大头照」变清晰 ， 最多只能将这张照片缩放到原始分辨率的八倍 。 但是杜克大学的团队提出了一种新的方法 ， 仅在几秒钟内 ， 就可以把16x16像素的低分辨率(LowResolution ， 以下简称LR)小图 ， 放大64倍 ， 变成1024x1024像素的高分辨率(HighResolution ， 以下简称HR)图像 。 并且他们的AI工具会「想象」出一些原本不存在的特征 ， 即使是原本LR照片中无法看到的细节 ， 比如毛孔、细纹、睫毛、头发和胡茬等 ， 经过其算法处理后 ， 都能看得一清二楚 。 我们来看一个具体示例：
深兰科技 能够让渣画质，马赛克秒变高清|深兰科技，美国名校提出AI算法
文章图片
【深兰科技 能够让渣画质，马赛克秒变高清|深兰科技，美国名校提出AI算法】左图为原始低分辨率图像 ， 右图为系统创建的高清图像编辑
领导该团队的杜克大学计算机科学家辛西娅·鲁丁(CynthiaRudin)说：「以前从来没有像现在这样 ， 能用这么少的像素 ， 就创造出拥有大量细节的超分辨率图像 。 」在实际应用方向上 ， 论文的共同作者SachitMenon介绍称：「在这些实践研究中 ， 我们只是用面部作为概念验证 。 但从理论上讲 ， 该技术是通用的 ， 从医学、显微镜学到天文学和卫星图像 ， 都可以通过该技术改善画质 。 」小编也期待着此项AI技术可以在更多领域有所应用和发展 。
评估：优于其他方法 ， 得分接近真实照片
团队在著名的高分辨率人脸数据集CelebAHQ上评估了其算法 ， 用64×、32×和8×的比例因子进行了这些实验 。 研究人员要求40个人对通过PULSE和其他五种缩放方法生成的1440张图像进行1到5的评分 ， 而PULSE的效果最佳 ， 得分几乎与真实的高质量照片一样高 。
深兰科技 能够让渣画质，马赛克秒变高清|深兰科技，美国名校提出AI算法
文章图片
从上图可知 ， HR为实际的高清人像数据集 ， 得分仅比PULSE高0.14团队成员表示 ， PULSE可以从嘈杂、低质量的输入中 ， 创建逼真的图像 ， 即使原图连眼睛、嘴巴都无法辨认 。 这是其他方法都无法做到的 。
深兰科技 能够让渣画质，马赛克秒变高清|深兰科技，美国名校提出AI算法
文章图片
不过 ， 该系统暂时还不能用于识别身份 ， 研究人员表示：「它无法将安全摄像头拍摄的失焦、不能识别的照片 ， 变成真人的清晰图像 。 它仅会生成不存在但看上去很真实的新面孔 。 」
在具体应用场景上 ， 除了上文提到的 ， 该技术未来可能应用在医学、天文学之外 ， 在大众层面也可以得到广泛运用 。 普罗大众拥有了这项黑科技之后 ， 就可以把N年前的老照片变高清 。
温馨小贴士：
该系统的研究人员还在CVPR2020(计算机视觉和模式识别会议)上介绍了他们的方法 ， 想详细了解该系统内容的小伙伴们可以搜索下面的网址：
http://cvpr2020.thecvf.com/program/tutorials


推荐阅读


上一篇：中国山东网|庆“七一”菏泽市中医医院举办建党99周年党员大会

下一篇：光明网|雪域高原党旗飘 铮铮誓言映初心