距離五一小長假,還有不到20個小時!和我們一起迎接五一的,還有14部影片,號稱史上最擠五一檔!小編沒有說錯,“最擠”而不是“最強”。
五一電影預售票房已經出爐,由王晶導演,古天樂、梁家輝和吳鎮宇主演的《追虎擒龍》預售票房排名第四。有些失望,又似乎在意料之中。
爲何我們提起香港電影,總是帶着厚厚的濾鏡,但同時心情又十分複雜?
如果你看過香港經典影片,你就能體會。周潤發、成龍、李連杰的燃情動作,讓人笑到流淚的周星馳無厘頭喜劇,令你毛骨悚然、大開眼界的林正英,驚豔了時光的林青霞、王祖賢……
那麼五一,讓新電影的票房飛一會兒,在這之前,讓我們換個姿勢,重溫那些經典鏡頭,只需要打開華爲視頻APP,在電影分類中找到“高清修復”,無論是林青霞劉德華再戰巔峯,還是發哥成了囚犯硬扛監獄老大,你會發現同樣的劇情,人物,有了不一樣的觀感:畫面比以前更清晰了,噪點少了,好像看起來比以前更加流暢,沒有那種老電影專有的“卡滯感”了。
這是如何做到的?今天我們就來解密,這些高清電影,是如何修復的!觀影的同時漲姿勢。
電影修復要做什麼
電影AI修復(高成本多人力投入類似《泰坦尼克號》的修復不在此範疇),這就包括視頻修復和視頻增強。其中視頻修復就是要解決視頻因拍攝、壓縮、傳輸、存儲等產生的視頻畫質問題,如:劃痕、壓縮失真、噪點等;而視頻增強則是通過分辨率提升、幀率提高、動態範圍擴大、色域變廣讓視頻質量得到進一步提升。
電影修復的三大挑戰
目前電影AI修復面臨着三大挑戰:數據、算法、評價。
(1)數據挑戰:盲修復任務的泛化能力提升
電影的失真往往包含了上述多個問題,也就是混合失真,盲修復,就是在修復之前,並不清楚視頻中有哪些問題,用的是泛化的算法,面臨難題是:如何提升泛化算法的自適應性來應對多種修復場景。
混合失真
強度不一失真
(2)算法挑戰:如何同時讓圖像各個方面質量得到提升
視頻增強就是讓視頻的圖像像素更高、光線更清晰、色彩更飽滿、顏色過度更順滑、運動畫面顯示更流暢。這就要求多任務之間的優化需要聯合增強。
(3)評價挑戰:針對生成圖像的質量評價
如下圖,圖1經過一定處理以後,通過傳統評價算法(如PSNR,SSIM,VMAF等)得出的結論是原始圖片是圖2,主觀卻認爲是圖3。說明傳統評價算法與主觀評價算法不一致。
硬廣來了:電影修復哪家強,且看華爲雲視頻雲旗下媒體AI服務。
華爲雲視頻雲如何修復電影
華爲雲視頻雲對《黃飛鴻》修復前後對比
-
混合失真修復
華爲雲視頻雲對可能存在的失真問題,先預判,然後輸入AI算法中,再構建多任務混合失真修復模型,最後進行修復,詳細說來有三方面:
-
空域增強:視頻超分
超分就是指通過媒體處理技術將分辨率低的圖片變爲分辨率更高的圖片。
對大部分電影、電視劇,受衆往往更關注人臉及字幕,這兩者是重要的增強區域。華爲雲視頻雲基於語義的自適應超分算法,兼顧了網絡輕量化、穩定性、綜合效果。
-
時域增強:插幀(FRC)
時域增強讓影片畫面與畫面之間的銜接更順滑與流暢。華爲雲視頻雲通過改進網絡,結合傳統方法,如參考時空域上相鄰的運動向量對光流進行修正。
-
對比度與飽和度增強
現有基於深度學習的對比度和飽和度增強算法,由於數據的不足,難以達到好的效果。華爲雲視頻雲通過尋找圖像在亮度和色彩空間的統計規律,作爲網絡先驗輸入,能明顯提升畫面的對比度與飽和度。
媒體AI服務是華爲雲原生視頻衆多服務中的一個“小兵”。基於雲原生的理念和技術,華爲雲重構了音視頻媒體網絡, 提供了雲原生視頻服務,首先它是全雲化的,所有視頻能力,從生產製作到分發,都是跑在雲上的。支持全行業,如廣電媒體,互聯網視頻,通信協作,行業視頻應用等。提供全流程服務,包括了從視頻生產,處理,分發和消費整個過程。帶來的是生產效率的提升,分發模式的變革,持續的體驗創新,以及安全穩定可靠的服務。