朱元璋到底長什么樣?其實(shí)這個問題一直都有爭議。很多人認(rèn)為,故宮收藏的官方畫像似乎更有說服力,因?yàn)檫@兩幅畫的相貌相似程度和隨年齡的演變不容易造假。 雖然畫像可以大體還原古人的長相,但總不及照片來得寫實(shí)、清晰。最近,國內(nèi)外似乎掀起了一場用 AI 還原古人的潮流,先是有 設(shè)計師用 GAN 和 PS 復(fù)原了他眼中的古羅馬皇帝群像,后有 B 站 up 主「大谷」用 AI 還原中國皇帝朱元璋,還是能動的那種:
評論區(qū)有人說:「想看秦始皇,以后轉(zhuǎn)賬的時候好對比一下?!?/section> 前面說到課本,還記得你當(dāng)年涂過的杜甫嗎?作為課本涂鴉界最受歡迎的人物,杜甫也在新一期的視頻中出鏡了,而且還唱上了奧特曼主題曲《奇跡再現(xiàn)》,有望成為 B 站新一輪鬼畜素材。
大谷在視頻中簡單介紹了這些成果和他所用的方法(友情提示:不關(guān)彈幕可能看不到作品)?;蛟S,我們離哈利波特的魔法世界真的不遠(yuǎn)了。修復(fù)技術(shù)細(xì)節(jié) 大谷在視頻中介紹稱,影片的 AI 工作流來自海外博主 Denis Shiryaev 的教程,Denis 曾在 AI Stuff 系列中修復(fù)了很多西方經(jīng)典油畫人物,我們可以將其稱為「神經(jīng)網(wǎng)絡(luò)的藝術(shù)」。 比如神秘的蒙娜麗莎:
墨西哥傳奇女畫家弗里達(dá)《戴荊棘和蜂鳥項(xiàng)鏈的自畫像》:
還有《戴珍珠耳環(huán)的少女》:
《維納斯的誕生》:
完整視頻如下:
Denis Shiryaev 的 youtube 主頁:https://www./user/shirman88 Denis 在這一視頻中所使用的修復(fù)技術(shù)有五種,分別是 Face-Image-Motion-Model、StyleGAN2-Face-Modificator、DAIN、ESRGAN 和 Artbreeder。 Face-Image-Motion-Model 項(xiàng)目地址:https://github.com/tg-bomze/Face-Image-Motion-Model 該模型基于「First Order Motion」這一核心模型,方法來源于 NeurIPS 2019 論文《First Order Motion Model for Image Animation》。機(jī)器之心此前介紹過的視頻會議換臉軟件「Avatarify」,也是基于這一技術(shù)實(shí)現(xiàn)人臉處理的。
論文鏈接:https://papers./paper/8935-first-order-motion-model-for-image-animation.pdf 「First Order Motion」框架由兩個主要模塊組成:「運(yùn)動估計模塊」和「圖像生成模塊」。運(yùn)動估計模塊的目的在于預(yù)測密集的運(yùn)動場,此處假設(shè)存在一個抽象的參考坐標(biāo),并預(yù)估存在「from reference to source」和「from reference to driving」兩種轉(zhuǎn)換。因此可以獨(dú)立處理源幀和驅(qū)動幀。做這樣的處理是因?yàn)槟P驮跍y試時會接收從不同視頻中采樣的源圖像幀和驅(qū)動幀的組,從視覺上來說可能會很不同。
「First Order Motion」方法概述圖。 StyleGAN2-Face-Modificator