絕代芳華！AI復原90年前梅蘭芳：眉目傳情，栩栩如生
當近百年前的黑白影像披上了色彩，它的歷史意義會不會多一層呢？
近日，一段昆曲片段被AI修復還原。
原片來自1930年梅蘭芳赴美演出昆曲《刺虎》。博主正是曾修復100年前老北京原聲錄像的up博主 @大谷Spitzer。這次，他再次用AI完成了上色、補幀、降噪等步驟，復原了90年前梅蘭芳先生的風采！
網友們看后紛紛點贊：太絕了！美慘了！
珍貴影像上色修復，「親眼」又見梅蘭芳
影片開場，好萊塢華裔女演員楊秀（Soo Yong）介紹道，「梅蘭芳先生扮演女性角色，但他并不是字面意思上的女性模仿者，他沒有試圖模仿現(xiàn)實生活中的女性，而是通過臺詞與動作，試圖塑造一個理想化的女性形象?！?/p>
在她的話音中，色彩來了！
隨后，梅蘭芳先生的片段映入眼簾。
他唱著「將軍乃蓋世英雄，皇朝棟梁……」，一顰一笑、一字一腔都是美、都是戲。
當時36歲的梅蘭芳赴美國表演，這是他在早年的演出生涯中唯一在舞臺上的影片資料，也是中國京劇第一次登陸美國。
色彩瑰麗的畫面讓我們如同親臨現(xiàn)場，回到了1930年代，親眼目睹了梅蘭芳先生的風采。
由于年代久遠，這段影像資料最終只流傳下來一分多鐘的有聲影像，存于南卡羅萊納大學的膠片影像庫。
有死忠粉表示：這段原視頻看過一百多次，這次終于看到復原的了！
也有人對博主@大谷Spitzer表達了謝意：
那么，這次大谷是如何做的呢？
多款開源工具，RIFE+國人項目GPEN重回1930
大谷介紹道，「延續(xù)上一期的技術流程，我使用了RIFE，Deep-Exemplar-based-Video-Colorization等一系列人工智能項目。結合手繪，完成了這個選段的修復?！?/p>
其中RIFE是一個實時視頻插幀方案，能實現(xiàn)老舊影像對高幀率的需求。
另外，在此大谷還經常使用的另一個補幀項目是DAIN。
第二個他提到的項目是：
Deep-Exemplar-based-Video-Colorization。
這來自一種結合了圖像檢索與圖像著色的模型。該模型首先會從大量參照圖像中檢索和灰度圖相似的圖像，然后再將該參照圖像的配色方案遷移到灰度圖中，實現(xiàn)了非常好的著色效果。
「這次聲音也用到AI技術去噪，會比原版音色更加清晰。同時還嘗試了下新出的開源AI項目GPEN來進行了臉部高清增強?！?/p>
GPEN（GAN prior embedded network，GAN先驗嵌入網絡）是2021年的新晉開源項目，由國人打造，對亞洲人像還原效果更為出色。
結果表明，其效果明顯優(yōu)于最先進的嚴重損壞的人臉圖像復原（Blind face restoration）方法。
就這樣，一系列操作下來，絕絕子的梅蘭芳先生戲曲表演，就完成了！
「90后全棧藝術家」大谷，用AI帶你穿越時空
大谷1991年生于北京（30歲），獲得了紐約視覺藝術學院電腦藝術碩士學位。作為一個藝術家，音樂家，程序員和獨立的游戲設計師，生產力真是爆炸。
來感受一下他的作品，包括Steam游戲、原創(chuàng)游戲音樂、sketch手繪、動漫等等各種位面。
你可能聽多了全棧工程師，那全棧藝術家了解一下？游戲、漫畫、3D、VR、音樂樣樣精通，當然在開源基礎上跑幾個AI模型，也是手到擒來。
大谷除了利用這些開源的AI模型，還結合了高超的后期技巧，百年前的老北京生活、上海時裝秀才能栩栩如生地出現(xiàn)在人們面前。
下一次，你期待誰被復原呢？
