哈利波特世界里,能讓報紙上的照片動起來的魔法,現在麻瓜們已經掌握得越來越熟練了。
看,16歲的圖靈正穿越時空朝你眨眼、微笑,神態十分自然。
原本在老照片中沉默的美人,當年眼波流轉、巧笑倩兮的模樣,也重新清晰呈現。
而這樣的全家福,是否喚醒了一段有關過往的回憶?
這就是這個周末國外社交媒體上最火的AI應用,呈現在人們眼前的“魔法”。
連李開復本人都忍不住玩了一把……
無需掌握什么技術,只要在MyHeritage這個網站上上傳一張老照片,10-20秒之后,AI就會自動幫你賦予照片“生命”。
甚至是雕塑也一樣OK。
如此自然的效果,讓不少網友感嘆:這非常哈利波特。
任何足夠先進的技術都無法與魔法區分開來。
神奇的是,這是一個在線家譜網站…
所以,這個當紅炸子雞MyHeritage是什么來頭,咋就突然掀起熱潮了?
當你點進這個網站,你會發現它的本職其實是一個在線家譜平臺……
真的能幫你方便整理家譜的那一種……你可以在其中填寫每一個家庭成員的信息、上傳照片。
其背后的公司2003年創辦于以色列。截至2020年,該網站已支持42種語言,在全球擁有超過5000萬用戶,并已為用戶構建了約5200萬個家譜……
雖然創始人Gilad Japhet是在一個家庭農場里搞出了這么一家公司,但扒一扒他們過往的發展歷程,會發現MyHeritage還真是前沿技術弄潮兒。
比如2006年,MyHeritage就推出了人臉識別功能,這個功能可以幫用戶從照片數據庫中識別人臉特征,將個體聯系在一起。
2016年,MyHeritage還推出了一項基因檢測服務,號稱能幫你發現你的種族起源,并尋找到新的親戚……目前售價59美元。
據《國家地理雜志》報道,2018年,MyHeritage提供了5000份這樣的DNA檢測工具包,幫助在美墨邊境散失的移民家庭團聚。
而公開資料顯示,到2019年為止,MyHeritage成為了全球第三大DNA檢測公司。
嗯,從制作家譜,到DNA檢測,再到用AI“復活”老照片,這個技術發展路徑還真挺合理呢!(手動狗頭)
不僅變高清,還能動起來
咳咳,梳(ba)理(gua)完了,我們還是照例說回到技術本身。
雖然MyHeritage沒有詳細說明這一火爆應用背后的技術細節,但大致上,讓老照片動起來的效果,需要兩步來完成。
先是用超分辨率,讓照片變得更高清:
然后再用動作遷移,將另一個視頻中的人物動作,“遷移”給照片中的人物。
首先,是超分辨率技術,也就是通過降噪、增加分辨率等方法,來增加照片的清晰度。
這里,就需要GAN來發揮作用了,對這種模型進行訓練后,再采用其中的生成器,來對低頻圖像進行重建。
整體而言,GAN能夠解決MSE損失函數缺少高頻信息的問題,從而補全圖像中有關高頻細節的內容。
利用這種方法重建的圖像,能構造出非常細節的人臉圖像,甚至連馬賽克人臉都能還原。
不過,這種方法也有一些問題,那就是在還原圖像的過程中,模型會更注重圖像風格的相似、而非像素的相似(即感知相似)。
所以即使人物逼真,在細節上也可能會出現像這樣與原圖不一致的情況:
△深度生成算法ILO
當然,將圖片變得清晰后,還需要利用動作遷移,讓照片動起來。
這項技術能實時提取一段視頻中的任務關鍵點,并將這些關鍵點和照片中的人臉關鍵點對應起來。
利用一項名為“骨架”(skeleton)的技術,模型將視頻人物的關鍵點提取出來,并給照片中的人物也標記上對應的關鍵點。
△動作遷移算法TransMoMo
然后,再一幀幀將視頻人物的動作“遷移”到圖片中去。
通過這種方法,哪怕只有一張照片,也能讓里面的人物跟著“開口說話”:
確實接近于“魔法”了。
有人感動,也有人擔心
除了對“魔法”效果的驚嘆,這樣的技術,也實實在在帶來了感動。
在reddit熱度高達2.9k的火爆討論之中,就有網友寫下了自己的真實感受:
我試了試我父親的老照片,效果令我哽咽。他在我幾個月大時就去世了,這是我第一次看見他動起來,眨眼、微笑……
也有網友提出,這要是搭配上AR放到博物館里,讓照片里的人親自給你講述他們的人生故事,那真的簡直了。
不過,也有不少網友表示,擔心這樣的技術被濫用,比如拍攝某些小電影……
而雖然MyHeritage強調他們不會向任何第三方提供用戶上傳的照片,并且未被完全注冊的照片會被自動刪除,但網友仍然對數據泄露表示擔憂。
畢竟MyHeritage本來也有過翻車歷史……
2018年6月,MyHeritage被發現一個安全漏洞,泄露了超過9200萬名用戶的數據。
這些數據,包括用戶的Email地址和密碼。
雖然MyHeritage聲稱,用戶家譜、DNA圖譜和信用卡等信息存儲在另一個系統,未被泄露,且在漏洞發現當天就對用戶進行了雙重身份驗證。
但2019年12月,這些泄露的信息卻出現在了各種非法網站上,正被出售(而且出售的信息不止Email地址和密碼)。
原文標題:現在最好玩的AI竟然來自一個家譜公司???
文章出處:【微信公眾號:中山市物聯網協會】歡迎添加關注!文章轉載請注明出處。
責任編輯:haq
-
存儲
+關注
關注
13文章
4298瀏覽量
85802 -
AI
+關注
關注
87文章
30746瀏覽量
268896
原文標題:現在最好玩的AI竟然來自一個家譜公司???
文章出處:【微信號:ZS-IOT,微信公眾號:中山市物聯網協會】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論