原图|世界上真的有消除“马赛克”的神奇技术真相来了

AI说白了就是一种通过机器代替人力的技术,离我们最近并且常用到的应该是美图这类软件吧。众所周知,在美颜相机、美图秀秀等软件诞生之前,照片的美化需要专业美工设计师通过PS进行调整。现在与以往不同,很多美图App都加入了“一键AI修图”功能,省去了传统PS修图复杂的操作流程。




原图|世界上真的有消除“马赛克”的神奇技术真相来了
文章插图

【 原图|世界上真的有消除“马赛克”的神奇技术真相来了】随着5G时代的到来,推动了AI技术的进一步发展,近些年网上出现了“AI换脸”的技术,令人目瞪口呆。AI能够直接捕捉一个人的面部动作形态,再换算到另一个人的脸上,这样一来,即使在直播,也可以在视频中达到以假乱真的地步。




原图|世界上真的有消除“马赛克”的神奇技术真相来了
文章插图

这不是最厉害的,近日有网友利用AI技术开发了一款“一键去除马赛克”的软件,发布没多久,这款软件便迅速蹿红网络。如此神奇的技术,它到底是怎么实现的呢?




原图|世界上真的有消除“马赛克”的神奇技术真相来了
文章插图

反马赛克技术解析
在科普这种技术之前,我们先要搞清楚马赛克这个概念。早期的马赛克指的是古希腊的拼贴镶嵌工艺,现在指将影像特定区域的色阶细节劣化并造成色块打乱的效果,让人看不清具体的画面。
马赛克就像一把双刃剑,对于那些需要用到马赛克的影片来说,它通过模糊或遮挡敏感信息,不仅能够保护个人隐私,还可以去除某些暴力、恐怖等不适画面。而对于观影者来说,可能就不那么友好了,这就好比手机上的刘海屏一样,一部分内容被遮住的感觉实属难受。




原图|世界上真的有消除“马赛克”的神奇技术真相来了
文章插图

目前,比较火的反马赛克软件有两款,分别是JavPlayer和PULSE。
JavPlayer利用深度学习的视频超分变率算法,针对视频中的每一帧图进行采样,然后通过AI算法还原马赛克的像素点。可能会有小伙伴表示疑惑,那还原后的图像会不会是假的?
答案:不是。因为这款软件还原图像是通过大量CPU和GPU的AI运算,把马赛克模糊再锐化,然后插值补偿损失得到的源图像。不过,需要注意的是,JavPlayer只能修复薄码视频,这也就意味着马赛克格子比较大,丢失的像素相对较少,这样插值补偿出来图像误差也会较小。




原图|世界上真的有消除“马赛克”的神奇技术真相来了
文章插图

杜克大学去马赛克的方法有所不同,他们开发了一种名为PULSE的算法,虽然也是用的视频超分辨率算法,可以将低分辨率图像变高清,但它填补的不是像素,而是先生成高清大图,然后降低图片分辨率与原始图进行对比,从中找出匹配度最高的图像。
只需几秒钟,PULSE算法便可将一张16×16像素的低分辨率图像提升到1024×1024级别,效果确实很好。只不过还原后的图像与原图误差很大,比如下面这张打了马赛克的奥巴马,使用PULSE算法后却变成了一个白人。
简单点来讲,PULSE算法就是通过AI算法合成一张与原图匹配度最高的照片,而非在原图之上进行修复还原,这点还是与JavPlayer有很大区别的。




原图|世界上真的有消除“马赛克”的神奇技术真相来了
文章插图

反马赛克技术的多领域运用
当然,反马赛克技术不仅限于修复图片或视频,其他领域也得到了广泛的运用。