新技術再續(xù)舊時光,火山引擎首次采用視覺大模型修復經典老港片
8月16日,抖音、中國電影資料館、火山引擎在北京舉辦“再續(xù)時光-經典香港電影修復發(fā)布會”,宣布將對100部香港經典老電影進行4K修復,還原老港片的絕代風華?;鹕揭鏋樵撚媱澨峁┘夹g支持,與中國電影資料館一起對電影進行“AI+人工”修復。首批完成的4K精修影片包括《武狀元蘇乞兒》《A計劃》《蜀山·新蜀山劍俠》。
火山引擎首次將視覺大模型應用于老片修復場景,借助其強大的生成能力和豐富的先驗知識,實現(xiàn)修復效果在清晰度、色彩、流暢度和瑕疵消除等方面的全方位提升。
(資料圖片)
大模型首次用于影視修復
公開資料顯示,電影修復工藝繁雜瑣碎,一位經驗豐富的修復師需要1個月的時間,才可以修復完成一部影片。近些年,通過深度學習等AI技術,大幅提升老片修復的質量和效率成為可能。
“老片修復這件事情,其實我們每天都在做?!被鹕揭嬉曨l云技術架構總監(jiān)王悅說,老片中常見的清晰度低、流暢度低、色彩失真、有瑕疵等畫質問題,在抖音的海量投稿里也廣泛存在。通過服務抖音,火山引擎在老片修復方面已經形成了一套較為完整的智能處理技術方案,曾攜手西瓜視頻和抖音,完成100部國產經典動畫和Beyond經典演唱會的4K修復。
新興的大模型技術也被首次運用到老片修復中。王悅介紹,一方面,大模型生成能力強,修復效果優(yōu)于之前的算法,畫面細節(jié)更自然;另一方面,大模型具有非常強的信息結構化能力,在學習了海量數據對后,可以在其中提煉出大量的知識并“存儲”在模型參數之中,其生成空間更豐富,能夠應對更多的修復場景。
“打個比方,在‘看’過海量狗狗的照片后,大模型能學習并記住狗的樣子,可以更生動形象地‘畫’出一只狗。”王悅說。
但大模型強大的生成能力也是一把雙刃劍,其表現(xiàn)在一些場景下并不穩(wěn)定,容易生成偽影或者虛假紋理等;以Stable Diffusion為代表的視覺大模型本身大多是基于圖片或者單幀的算法,在視頻這種多幀序列的場景下也存在效果和穩(wěn)定性的問題。
針對老舊電影修復的特殊場景,火山引擎多媒體實驗室對視覺大模型做了三個層面的算法優(yōu)化:在圖像生成方面,通過控制模型的邊界條件、強化高質量生成空間等手段,顯著提升大模型的圖像輸出質量;在視頻場景里,通過采用設計時域的自編碼器、光流特征對齊、時域條件約束等技術手段,讓大模型在修復的過程中可以使用前后幀的信息,更好地處理視頻任務;同時,火山引擎還攜手Intel在算法和工程上進行了多項優(yōu)化,能顯著提升大模型在4K場景下的處理效率并兼顧算力成本。
《武狀元蘇乞兒》修復前后對比
算法助力經典文化傳承
據王悅介紹,對火山引擎多媒體實驗室的工程師來說,老港片修復最大的挑戰(zhàn)不是算法技術,而是如何保留影片原有的藝術風格。
“在很多影片的修復中,中國電影資料館都想方設法邀請當年的主創(chuàng)走入修復實驗室”,中國電影資料館副館長張小光表示,此次4K修復《武狀元蘇乞兒》,就得到了導演陳嘉上的藝術指導。
在這一過程中,火山引擎和中國電影資料館進行了多輪溝通和討論,經過不斷的測試和反復的調優(yōu),才達到算法服務于藝術的理想效果。以色偏和色彩的處理為例,此前的AI算法能夠完成和優(yōu)化一系列客觀上色彩的問題,但對于部分藝術色彩上的還原容易產生偏差,火山引擎此次摸索了一種AI加速藝術修復的方案,能通過學習人工修復片段的數據獲得更理想的色彩方案效果,從而加速修復進程。
“我們在不斷思考,怎么讓過去的老片煥發(fā)新生?!蓖鯋偙硎荆袄么竽P退惴ㄟM一步提升老片的修復質量,無論是從技術實踐還是從文化傳承的角度來看,都是一次有意義的嘗試?!?/p>
抖音副總裁陳都燁介紹,未來一年,《喋血雙雄》《阿郎的故事》等100部香港電影的4K修復版,也將陸續(xù)在抖音、西瓜視頻上線。
這100部香港電影制作時間集中在上世紀70年代到90年代,涵蓋陳嘉上、徐克、成龍、關錦鵬、周星馳等多位導演作品。中國電影資料館的電影策展人沙丹表示,這個時段正是香港電影的黃金時代。彼時內地正逐漸走向開放,香港電影成為很多內地青年了解世界的窗口。
受限于早期拍攝的設備技術以及膠片存放使用過程中造成的損傷,記憶中的老港片雖然情節(jié)鮮活,畫面卻模糊、昏暗、不清晰。對于習慣了高清視頻的觀眾來說,重溫經典的觀影體驗并不友好。
“我們希望通過技術手段讓現(xiàn)在的年輕人也能喜歡上過去的經典,老的觀眾可以重溫曾經的回憶,形成幾代人的共同記憶?!蓖鯋傉f。(作者:陳晨)
關鍵詞:
相關閱讀
-
新技術再續(xù)舊時光,火山引擎首次采用視覺...
8月16日,抖音、中國電影資料館、火山引擎在北京舉辦“再續(xù)時光-經... -
這樣的技術交流真實用——湘鄂兩地共話...
“曬搖增香、固色定香、失水保香,這是湖南五彩香茶的制作工藝……... -
山西陽泉首屆劉慈欣故鄉(xiāng)科幻文化活動周啟動
8月15日,以“相約陽泉·讓科幻照亮未來”為主題,山西陽泉首屆劉慈... -
《太空行動》境巧戰(zhàn)隊是什么 境巧戰(zhàn)隊介紹
太空行動境巧戰(zhàn)隊是什么?游戲中又有新的自創(chuàng)身份了,這次是境巧戰(zhàn)隊, -
騰訊二季度營收1492億,凈利潤262億同比增41%
騰訊二季度營收1492億,凈利潤262億同比增41%,騰訊 -
三峽大壩在哪個省哪個市(三峽大壩被炸...
導讀1、會的。2、但是首先國際法上不允許國際性的公共設施被打擊。3、 -
余額寶本金會虧損嗎?
余額寶是建立在支付寶平臺上的一款貨幣基金,作為國內用戶使用最為廣泛 -
首個全國生態(tài)日,國家林草局聯(lián)合騰訊科...
2023年8月15日是我國首個“全國生態(tài)日”。當日,國家林業(yè)和草原局聯(lián)... -
光大證券(601788.SH):2022年年度權益分...
格隆匯8月15日丨光大證券(601788 SH)公布,公司2022年年度權益分派擬每 -
「大衛(wèi)控糖」探尋真正的0糖寶藏飲料,無...
00:30在追求健康的飲食選擇中,尋找真正的0糖寶藏飲料成為了一個重要任 -
亳州倆“拉車門”盜竊團伙落網
不砸車、不撬窗,在夜間挨個拉車門“碰運氣”,如同“拆盲盒”一般... -
“就業(yè)在北京——仲夏之約·萬達夜市”...
“就業(yè)在北京——仲夏之約·萬達夜市”大型招聘啟動,七區(qū)同步加大... -
只因生活瑣事,女子被殺害后分尸,3名嫌...
太殘忍了!太過分了!必須嚴懲!近日,江蘇常州。白某(女,26歲),因生 -
產業(yè)興 鄉(xiāng)村美 百姓樂——自治州全面...
產業(yè)興鄉(xiāng)村美百姓樂——自治州全面推進鄉(xiāng)村振興工作亮點掃描中國昌... -
今日份妙峰恢復重建戰(zhàn)報請查收
連日來,妙峰山鎮(zhèn)組織黨員干部群眾迅速行動,積極作為,恢復重建工作正 -
贛州農村商業(yè)銀行原黨委書記、董事長陳...
8月16日,據廉潔江西微信公眾號消息,江西省農村信用社聯(lián)合社贛州轄區(qū) -
天壇生物:所屬公司研制的注射用重組人...
天壇生物公告,近日,所屬成都蓉生藥業(yè)有限責任公司研制的“注射用... -
寶可夢旅途68話雜志劇透小茂登場成一球...
小豪和小茂的成為了全新的勁敵,而兩人對決的結果將會如何收場呢,與小 -
奧特之母乳汁越揉越大 乳汁類別影片
1、分的。2、初乳和母乳初乳是寶寶剛出生是不久就會有的,是透明的,量 -
仲夏新啟而來 新傳媒寶藏藝人挖掘
作為新加坡最大的藝人經紀公司,新人儲備豐富,各具特色的藝人面對公司未