將「雷科技Lite」收藏為我的小程序，不再錯(cuò)過(guò)精彩內(nèi)容
馬賽克本身是無(wú)罪的，只是它將世界上無(wú)數(shù)美好的畫面給遮住了，所以人們才會(huì)對(duì)它抱有惡感。近段時(shí)間，網(wǎng)上流行的去馬賽克軟件，玩一玩可以，因?yàn)樗麄兌紵o(wú)法做到真正意義上的去碼。AI說(shuō)白了就是一種通過(guò)機(jī)器代替人力的技術(shù)，離我們最近并且常用到的應(yīng)該是美圖這類軟件吧。眾所周知，在美顏相機(jī)、美圖秀秀等軟件誕生之前，照片的美化需要專業(yè)美工設(shè)計(jì)師通過(guò)PS進(jìn)行調(diào)整。現(xiàn)在與以往不同，很多美圖App都加入了“一鍵AI修圖”功能，省去了傳統(tǒng)PS修圖復(fù)雜的操作流程。隨著5G時(shí)代的到來(lái)，推動(dòng)了AI技術(shù)的進(jìn)一步發(fā)展，近些年網(wǎng)上出現(xiàn)了“AI換臉”的技術(shù)，令人目瞪口呆。AI能夠直接捕捉一個(gè)人的面部動(dòng)作形態(tài)，再換算到另一個(gè)人的臉上，這樣一來(lái)，即使在直播，也可以在視頻中達(dá)到以假亂真的地步。這不是最厲害的，近日有網(wǎng)友利用AI技術(shù)開發(fā)了一款“一鍵去除馬賽克”的軟件，發(fā)布沒多久，這款軟件便迅速躥紅網(wǎng)絡(luò)。如此神奇的技術(shù)，它到底是怎么實(shí)現(xiàn)的呢？反馬賽克技術(shù)解析
在科普這種技術(shù)之前，我們先要搞清楚馬賽克這個(gè)概念。早期的馬賽克指的是古希臘的拼貼鑲嵌工藝，現(xiàn)在指將影像特定區(qū)域的色階細(xì)節(jié)劣化并造成色塊打亂的效果，讓人看不清具體的畫面。馬賽克就像一把雙刃劍，對(duì)于那些需要用到馬賽克的影片來(lái)說(shuō)，它通過(guò)模糊或遮擋敏感信息，不僅能夠保護(hù)個(gè)人隱私，還可以去除某些暴力、恐怖等不適畫面。而對(duì)于觀影者來(lái)說(shuō)，可能就不那么友好了，這就好比手機(jī)上的劉海屏一樣，一部分內(nèi)容被遮住的感覺實(shí)屬難受。目前，比較火的反馬賽克軟件有兩款，分別是JavPlayer和PULSE。JavPlayer利用深度學(xué)習(xí)的視頻超分變率算法，針對(duì)視頻中的每一幀圖進(jìn)行采樣，然后通過(guò)AI算法還原馬賽克的像素點(diǎn)。可能會(huì)有小伙伴表示疑惑，那還原后的圖像會(huì)不會(huì)是假的？答案：不是。因?yàn)檫@款軟件還原圖像是通過(guò)大量CPU和GPU的AI運(yùn)算，把馬賽克模糊再銳化，然后插值補(bǔ)償損失得到的源圖像。不過(guò)，需要注意的是，JavPlayer只能修復(fù)薄碼視頻，這也就意味著馬賽克格子比較大，丟失的像素相對(duì)較少，這樣插值補(bǔ)償出來(lái)圖像誤差也會(huì)較小。杜克大學(xué)去馬賽克的方法有所不同，他們開發(fā)了一種名為PULSE的算法，雖然也是用的視頻超分辨率算法，可以將低分辨率圖像變高清，但它填補(bǔ)的不是像素，而是先生成高清大圖，然后降低圖片分辨率與原始圖進(jìn)行對(duì)比，從中找出匹配度最高的圖像。
只需幾秒鐘，PULSE算法便可將一張16×16像素的低分辨率圖像提升到1024×1024級(jí)別，效果確實(shí)很好。只不過(guò)還原后的圖像與原圖誤差很大，比如下面這張打了馬賽克的奧巴馬，使用PULSE算法后卻變成了一個(gè)白人。簡(jiǎn)單點(diǎn)來(lái)講，PULSE算法就是通過(guò)AI算法合成一張與原圖匹配度最高的照片，而非在原圖之上進(jìn)行修復(fù)還原，這點(diǎn)還是與JavPlayer有很大區(qū)別的。反馬賽克技術(shù)的多領(lǐng)域運(yùn)用
當(dāng)然，反馬賽克技術(shù)不僅限于修復(fù)圖片或視頻，其他領(lǐng)域也得到了廣泛的運(yùn)用。
為了在光線追蹤技術(shù)中提升高質(zhì)量圖像的輸出速度，也需要對(duì)圖像做降噪處理，英偉達(dá)在這方面就做得很好。此前，英偉達(dá)與麻省理工學(xué)院，以及阿爾托大學(xué)的人工智能研究人員一起創(chuàng)建了名為Noise2Noise的項(xiàng)目。
該項(xiàng)目團(tuán)隊(duì)從mageNet數(shù)據(jù)庫(kù)中獲取500000張圖像，對(duì)它們做增噪處理。然后利用這些圖像做降噪處理，以此來(lái)訓(xùn)練AI的降噪能力。Noise2Noise在醫(yī)療領(lǐng)域非常適用，例如對(duì)核磁共振圖像掃描，它能夠用于圖像的降噪，方便醫(yī)生查看更清晰的圖像。另外，英偉達(dá)的DLSS 2.0技術(shù)與Noise2Noise類似，都可以利用AI對(duì)圖像進(jìn)行修復(fù)。加入了DLSS 2.0技術(shù)后，顯卡便可以將1080P的畫面模擬到4K顯示。除英偉達(dá)外，Adobe在反馬賽克技術(shù)上也頗有研究。
去年6月，Adobe正式宣布了PS反向還原技術(shù)，利用AI算法和機(jī)器學(xué)習(xí)，可判斷出圖片是否被修改過(guò)，確認(rèn)圖像變化后，該技術(shù)會(huì)將圖像還原到修改前的模樣。也就是說(shuō)，哪怕圖像打了馬賽克，也可以把它還原回來(lái)。
其實(shí)，去馬賽克就是一種圖像增強(qiáng)技術(shù)。這就好比vivo X50系列配備的超清修復(fù)功能，可以將老照片修復(fù)，同時(shí)在vivo相冊(cè)中實(shí)現(xiàn)文檔去影和照片去路人功能。
總結(jié)
就目前來(lái)看，市面上沒有任何一種可以完全有效去除馬賽克的技術(shù)。現(xiàn)階段的技術(shù)都是通過(guò)AI在數(shù)據(jù)庫(kù)中模擬比對(duì)相似的圖像，雖然有些技術(shù)是在原圖基礎(chǔ)之上進(jìn)行修復(fù)，但實(shí)質(zhì)上那并不是原圖，AI能做到的只是無(wú)限接近，修復(fù)后的圖像并不能與原圖劃等號(hào)。總的來(lái)說(shuō)，打了馬賽克的圖像，你可以將它理解為刪除了圖像的子像素。一旦子像素丟失，即便是AI也無(wú)法計(jì)算出它的原樣。因此，沒有哪款工具可以做到真正意義上的去馬賽克。不過(guò)，有一說(shuō)一，除了網(wǎng)友開發(fā)的反馬賽克工具外，其實(shí)很少有科技公司關(guān)心AI技術(shù)是否真的能夠去碼，它們的最終目的是讓低分辨率的圖像變高清，反馬賽克只不過(guò)是順帶完成的任務(wù)罷了。
本站僅提供存儲(chǔ)服務(wù)，所有內(nèi)容均由用戶發(fā)布，如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容，請(qǐng)
點(diǎn)擊舉報(bào)。
