人工智能為電影修復帶來了什么 每日報道
近日啟動的“經典香港電影修復計劃”,計劃將100部香港老電影修復至4K版本。
電影修復流程繁雜瑣碎。過去,一位經驗豐富的修復師需要1個月的時間,才可以修復完成一部影片,而這次修復百部香港老片將使用深度學習等人工智能技術,這將極大地提升電影修復效率,同時進一步優化影片的畫質,為觀眾帶來超高清的觀影沉浸感。
(資料圖片僅供參考)
傳統的修復方法更多關注光影、色彩、美學等,而人工智能修復,可以從清晰度、流暢度等方面提升老片的畫面質量。那么,人工智能是如何介入電影修復的?
由于拍攝設備、存儲方式等方面的限制,老電影往往帶有嚴重的膠片噪聲且分辨率較低。此外,由于拍攝年代和拍攝方式等的不同,老電影的畫面質量也參差不齊,很多畫面模糊不清。
提升影片的清晰度,須修復模糊的畫面。去模糊的難點在于,模糊的類型多種多樣。在拍攝、儲存、拷貝翻印、膠片數字化以及壓制導出的過程中,都可能產生模糊損傷,這導致模糊問題成因復雜,修復人員通常難以獲得精準的“模糊核”。
利用人工智能技術,可以從低質數據中抽取不同程度的模糊視頻,利用相關統計方法進行真實的“模糊核”估計,并通過主觀驗證進一步篩選“模糊核”的類型。同時,在自建的高清影視數據集上,生成“模糊—清晰”匹配數據對來訓練機器學習從低質到高清的潛在的映射關系。這樣就能快速分辨出不同影片、不同畫面模糊的原因,進而提升修復效率。
在老電影修復中,電影中的人像需要重點關注和優化。利用人工智能技術,使用基于生成式的人像修復模塊,在保持人像真實特征的前提下,可以進行高清五官重建。對低分辨率、多次壓縮損傷以及拍攝環境(如暗場景和拍攝過程抖動)等造成的模糊、失焦、噪聲、馬賽克等畫質損傷,都能有效解決。
在這次100部經典港片的修復中,人工智能還為我們提供了老舊人像修復和人像超清化等不同的人像解決方案。對于低質量的人像,我們優化了人像模型在時域上的清晰度和穩定性,對不同大小的人臉(近景/中景/遠景)、不同姿態角度的人臉(側臉/俯視/仰視)、不同遮擋程度的人臉都有較好的修復增強效果。對于一些中高質量的人像,我們使用人像超清模塊,優化五官清晰度,最大限度還原睫毛、眉毛、發絲和膚質等臉部細節,修復結果更有質感。
很多老電影由于膠片保存不當出現褪色情況,畫面存在色偏。為解決這一問題,需要對其進行色彩校正,還原符合電影美學風格的色彩。借助人工智能技術,修復人員可以設計出符合電影美學標準的色彩校正方案。具體做法是,對影片內容進行場景分割,使用深度學習方案逐幀學習其色彩校正矩陣;針對幀間一致性問題,則按場景計算出色彩校正矩陣的均值;對同一場景,使用同一套色彩校正矩陣進行處理,從而得到穩定的校正結果。
利用人工智能技術還能提升老電影的流暢度。比如,一些武打片中,有很多人物快速運動的場景。當畫面幀與幀間運動較大,超過一定范圍時,光流就會估計不準確,容易產生拖影。利用智能插幀算法,通過對前后幀的內容進行光流估計,并根據光流信息將前后幀像素都轉換到中間幀,然后進行整合,生成中間幀,提升視頻幀率,這樣就可以減少觀眾觀看時的卡頓感。
一些老電影的膠片,由于保存不當,容易出現臟點、污漬和霉斑,呈現在畫面上就是大塊不規則形狀的陰影,既破壞了畫面的完整性,也會影響觀眾的觀影體驗。對于這些瑕疵,可以首先用去噪點和去劃痕等算法批量處理,同時輔以人工二次校驗,對誤傷畫面的部分進行優化,這既提高了修復處理的速度,同時也保證了修復的精準性。
此外,受限于拍攝時的設備和技術,早期的香港武打片會有不少穿幫鏡頭,如畫面出現威亞線。以往這種情況,只能依賴手工逐幀消除,而人工智能算法可以自動識別到威亞的位置并進行擦除。
值得一提的是,在這次100部港片修復項目中,我們首次使用了AIGC(生成式人工智能)視覺大模型。在更廣闊的數據規模、更龐大的模型參數、更豐富的算力的加持下,大模型顯示出遠超以往算法的生成能力,生成內容的紋理細節更逼真、效果更自然。
針對老片修復的具體場景,我們還對AIGC視覺大模型進行了生成質量、視頻任務和推理效率方面的算法優化,有效提升了修復質量。相信隨著大模型技術的持續發展,人工智能將在老電影修復以及經典文化傳承方面發揮更大作用。
(作者:趙世杰,系火山引擎多媒體實驗室研究員)
- 人工智能為電影修復帶來了什么 每日報道
- 中國經濟新動能持續集聚成長(銳財經)
- 千余學子收到誠摯“邀請函”
- 從“制造”邁向“智造”——新鄉縣以科技創新助力特色產業發展
- 七夕徹底涼了!“舔狗經濟”崩盤,男性們為何都躺平了?
- 張小五的春天片尾曲廣告(張小五的春天片尾曲)
- 今日夢三國手游司馬懿(夢三國司馬昭娛樂出裝玩法 求大神指點)
- 韓美聯演“全面戰爭” 朝鮮發出核警告
- 廣東奧馬電器股份有限公司地址(廣東奧馬電器股份有限公司)
- abs傳感器間歇性故障,曲軸傳感器間歇性故障
- iPhone 15 新配色曝光,iPhone 15 Pro Max 或延遲發貨
- 當村BA的風吹到滎陽高山
- 將不合格鐵路工程按合格驗收,中鐵二院(成都)咨詢監理公司被罰
- 財報深響|樂歌股份半年凈利4.43億,資產出售貢獻八成,線上銷售收入增長停滯
- 珠海一樓盤5折售賣?珠海住建局:不屬實
- 通達oa系統 oa系統 通達oa
- 陽光電源:董事長提議以5億元-10億元回購公司股份
- 總價約354萬起 陸家嘴錦繡瀾灣認購正當時
- 多彩墻繪助振興:清遠太和鎮來了一群鄉村繪畫師
- 夸張!摩托羅拉折疊機二季度出貨量同比增長2135%
- 遼寧大連市普蘭店區發生4.6級地震 當地市民稱有震感
- 如此城市|對話劉香成:當人們的肩膀與表情都開始放松
- ?西平縣二郎鎮開展2023年秋季開學季“掃黃打非”集中整治行動-每日速遞
- 汝南縣梁祝鎮:經濟普查人人盡力 發展經濟家家受益 世界報道
- 影力波 | 一鏡到底的“法庭舌戰戲”很過癮,律政片《最后的真相》能有新突破嗎
- 德州儀器推出新款高精準度的霍爾效應傳感器和集成式分流器,進一步簡化電流檢測
- 股市早8點丨證監會也被A股套牢了
- 北京市發布雷電黃色預警 局地短時雨強較大
- 漲停復盤:A股為啥又跌?這一板塊逆勢漲停潮
- 聲通科技完成數億元融資
- 人工智能為電影修復帶來了什么 每日報道
- 中國經濟新動能持續集聚成長(銳財經)
- 千余學子收到誠摯“邀請函”
- 從“制造”邁向“智造”——新鄉縣以科技創
- 七夕徹底涼了!“舔狗經濟”崩盤,男性們為
- 張小五的春天片尾曲廣告(張小五的春天片尾
- 今日夢三國手游司馬懿(夢三國司馬昭娛樂出
- 韓美聯演“全面戰爭” 朝鮮發出核警告
- 廣東奧馬電器股份有限公司地址(廣東奧馬電
- abs傳感器間歇性故障,曲軸傳感器間歇性故障
- iPhone 15 新配色曝光,iPhone 15 Pro
- 當村BA的風吹到滎陽高山
- 將不合格鐵路工程按合格驗收,中鐵二院(成
- 財報深響|樂歌股份半年凈利4.43億,資產出
- 珠海一樓盤5折售賣?珠海住建局:不屬實
- 通達oa系統 oa系統 通達oa
- 陽光電源:董事長提議以5億元-10億元回購公
- 總價約354萬起 陸家嘴錦繡瀾灣認購正當時
- 多彩墻繪助振興:清遠太和鎮來了一群鄉村繪
- 夸張!摩托羅拉折疊機二季度出貨量同比增長
- 遼寧大連市普蘭店區發生4.6級地震 當地市
- 如此城市|對話劉香成:當人們的肩膀與表情
- ?西平縣二郎鎮開展2023年秋季開學季“掃黃
- 汝南縣梁祝鎮:經濟普查人人盡力 發展經濟
- 影力波 | 一鏡到底的“法庭舌戰戲”很過
- 德州儀器推出新款高精準度的霍爾效應傳感器
- 股市早8點丨證監會也被A股套牢了
- 北京市發布雷電黃色預警 局地短時雨強較大
- 漲停復盤:A股為啥又跌?這一板塊逆勢漲停
- 聲通科技完成數億元融資