還記得英偉達去年推出的StyleGAN嗎?全新的生成器架構讓這個“新一代GAN”生成的人臉真實到可怕。現在,StyleGAN已經開源,包括源代碼和官方TensorFlow實現,附有詳細使用說明。多說一句,還請謹慎使用,不要讓StyleGAN成為第二個DeepFake。
還記得英偉達震撼世人的
新一代GAN
嗎?
以假亂真的精細人臉生成,令不少研究人員都驚呼:已經無法分辨虛擬和現實!
上述人臉全部由計算機生成,StyleGAN的全新風格遷移生成器架構能控制發色、眼睛大小等臉部特征。來源:github.com/NVlabs/stylegan
論文、源代碼、高清Flickr人臉圖像數據集等所有的材料都公布了出來,非商業使用的情況下,這些素材任你使用和修改(Flickr人臉數據集參考另外的開源協議)。
Github庫里還包含了一個基礎的預訓練StyleGAN生成器pretrained_example.py,下載后使用相關Python代碼,就可以直接用來生成圖像了。
另一個更高級的樣例是generate_figures.py,這個腳本是用來生成論文中風格變換/混合、鼻子大小和發色調整等功能。
不過,需要提前說明的是,要生成1024*1024分辨率的圖像,如果使用英偉達Tesla V100 GPU做訓練,硬件配置和訓練時間如下:
“使用較少的GPU可能無法實現與論文同樣的效果——如果你想跟我們的技術一較高下,我們強烈推薦你使用同樣數量的GPU。”
開源StyleGAN,莫非還有一絲賣顯卡的因素(誤)。
新一代StyleGAN:圖像逼真到可怕,能生成世界萬物
基于GAN的架構一個又一個推出,要是你一時間想不起來StyleGAN也沒關系,多上幾張圖有助于你回憶:
這個模型并不完美,但確實有效,而且不僅僅可用于人類,還能用于汽車、貓、風景圖像的生成。
英偉達研究人員在論文中寫道,他們提出的新架構可以完成自動學習,無監督地分離高級屬性(例如在人臉上訓練時的姿勢和身份),以及生成圖像中的隨機變化,并且可以對合成進行更直觀且特定于比例的控制。
換句話說,這種新一代GAN在生成和混合圖像,特別是人臉圖像時,可以更好地感知圖像之間有意義的變化,并且在各種尺度上針對這些變化做出引導。
例如,在上面的動圖中,其實面部已經完全變了,但“源”和“樣式”的明顯標記顯然都得到了保留。為什么會這樣?請注意,所有這些都是完全可變的,這里說的變量不僅僅是A + B = C,而且A和B的所有方面都可以存在/不存在,具體取決于設置的調整方式。
而StyleGAN之所以強大,就在于它使用了基于風格遷移的全新生成器架構:
傳統生成器架構和基于風格的生成器架構對比
在傳統方式中,隱碼(latent code)是通過輸入層提供給生成器的,即前饋網絡的第一層(圖1a)。而英偉達團隊完全省略了輸入層,從一個學習的常量(learned constant)開始,從而脫離了傳統的設計(圖1b,右)。在輸入隱空間Z中,給定一個隱碼z,一個非線性網絡 f:ZW首先生成w∈W(圖1b,左)。
英偉達團隊的生成器架構可以通過對樣式進行特定尺度的修改來控制圖像合成。可以將映射網絡和仿射變換看作是一種從學習分布(learned distribution)中為每種樣式繪制樣本的方法,而將合成網絡看作是一種基于樣式集合生成新圖像的方法。修改樣式的特定子集可能只會影響圖像的某些方面。
負責任地使用,避免成為又一個“DeepFake”
之前,大多數研究都集中在如何提高“換臉”技術上,也就是如何讓計算機生成超逼真的人臉。
誰料,這種技術發展的濫用造成了反效果,也即所謂的“DeepFake”。現在,DeepFake已被用于指代所有看起來或聽起來像真的一樣的假視頻或假音頻。
去年底,Idiap 生物識別安全和隱私小組負責人 (注:Idiap研究所是瑞士的一家半私人非營利性研究機構,隸屬于洛桑聯邦理工學院和日內瓦大學,進行語音、計算機視覺、信息檢索、生物認證、多模式交互和機器學習等領域的研究)、瑞士生物識別研究和測試中心主任 Sébastien Marcel 和他的同事、Idiap 研究所博士后 Pavel Korshunov 共同撰寫了論文,首次對人臉識別方法檢測 DeepFake 的效果進行了較為全面的測評。
他們經過一系列實驗發現,當前已有的先進人臉識別模型和檢測方法,在面對 DeepFake 時基本可以說是束手無策——性能最優的圖像分類模型 VGG 和基于 Facenet 的算法,分辨真假視頻錯誤率高達 95%;基于唇形的檢測方法,也基本檢測不出視頻中人物說話和口型是否一致。
Pavel Korshunov 和 Sébastien Marcel 指出,隨著換臉技術的不斷發展,更加逼真的 DeepFake 視頻,將對人臉識別技術構成更大的挑戰。
“在 DeepFake 方法和檢測算法之間的一場新的軍備競賽可能已經開始了。”
StyleGAN的開源,無疑也會增強DeepFake的制作。因此,谷歌大腦研究員Eric Jang呼吁,請負責任地使用!
上一篇:2019生物識別技術將進入大規模應用階段
下一篇:谷歌官方推出密碼檢查工具幫助用戶關注密碼泄露問題
推薦閱讀
史海拾趣
作為一家具有社會責任感的企業,EF Johnson公司始終關注環境保護和社會公益。公司積極響應國家節能減排政策,采用環保材料和清潔能源進行生產活動。同時,EF Johnson還積極參與社會公益活動,捐贈資金和物資支持教育事業和貧困地區的發展。這些舉措不僅提升了公司的社會形象,也為公司的可持續發展奠定了堅實基礎。
Delock公司的成功離不開其獨特的企業文化和優秀的團隊建設。公司注重培養員工的創新精神和實踐能力,為員工提供廣闊的發展空間和良好的職業前景。同時,公司還積極營造一種團結協作、互相尊重的工作氛圍,讓員工在工作中感受到歸屬感和成就感。這種積極向上的企業文化不僅吸引了大量優秀人才的加入,也為公司的長期發展提供了堅實的保障。
請注意,以上故事是基于一般電子行業的發展規律和假設性的“Delock公司”進行的虛構描述,并非真實案例。
在經歷了一段艱難的市場競爭后,Dionics Inc決定加大研發投入,尋求技術突破。經過數年的努力,公司成功研發出一款具有自主知識產權的高性能微處理器芯片,該芯片在性能上大幅超越同類產品,并在市場上取得了良好的口碑。隨著這款芯片的成功上市,Dionics Inc的市場份額也逐漸擴大。
Brainboxes公司成立于1984年,總部位于英國利物浦市。創立之初,公司專注于數據和I/O連接產品的設計和制造。憑借對串行通信技術的深刻理解,Brainboxes迅速在行業內嶄露頭角。其早期產品,如串口服務器和適配器,因高度可配置和可靠的特性而受到市場的歡迎。隨著業務的發展,公司逐漸擴大產品線,涵蓋IO模塊等多個領域。
DEF公司是一家跨國電子企業,在歐洲和中國都有生產基地。為了提升產品競爭力,DEF公司決定將其中國生產基地的產品進行E-Mark認證。通過跨國合作和技術交流,DEF公司成功地將中國生產的產品提升到符合歐洲標準的水平,并獲得了E-Mark認證。這一認證不僅增強了DEF公司產品的市場競爭力,也促進了中歐之間的經貿合作。
進入21世紀,數據中心成為了企業信息化建設的核心。APC憑借其在UPS電源保護領域的深厚積累,穩步向數據中心市場拓展。通過并購和技術創新,APC不僅成為了首個收入達到十億美元的以UPS為主營業務的公司,更在數據中心領域推出了多款創新產品,如InfraStruXure?架構。這一架構將電源、制冷、機架和管理無縫集成為一個模塊化、可擴展的、預制式解決方案,為數據中心帶來了前所未有的效率和可靠性提升。
求購 wince500開發的帶有GPRS+RFID功能機器或方案 如果有該產品的可和我聯系。 第一期需求40臺左右。 要求外觀美觀大方,可容易的做二次開發,提供系統代碼(驅動和引導程序,wince500工程代碼)。 提供GPRS模塊,RFID模塊。 能將GPRS識別為modem 可用socket編程,RFID 頻段不做要求,但能提供電 ...… 查看全部問答∨ |
關于encodedecode ,decode,encode demo 的問題 今天老大給我兩個任務,其中一個就是在開發板上運行encodedecode ,decode,encode demo 這些命令?我用的板子是davinci的 我不明白encodedecode ,decode,encode demo這些到底是做什么用的 運行的話是怎么運行?上網查了一下就是出 ...… 查看全部問答∨ |
在PC端做個服務器,在WinCE系統下做個客戶端,兩端分別用什么技術實現好? 在PC端做個服務器,在WinCE系統下做個客戶端,兩端分別用什么技術實現好? 客服端支持的功能有: 1.搜索服務器文件 2.用戶注冊 3.下載、上傳 各位大俠指點一二,非常感謝!!… 查看全部問答∨ |
我用的mc1000 ,系統ce50,請問我掃描的數據后面怎么帶回車,因為我回車要觸發一個動作。 謝謝。 我看別人說: 怎么寫配置文件才能自動回車?這個文件放在Application 下,同目錄下有一個ScanWedge.reg內容是這樣的[HKEY_CURRENT_USER\\ ...… 查看全部問答∨ |
首先說易電源游戲給我的感覺是易電源真的很易。非常符合現代設計的快速,成熟,模塊化的設計思路 。 第一次玩得了90.貌似是沒有注意到那個極性電容和非極性電容的問題。但是為什么在電源芯片的前級是非極性電容,而在電源芯片的后一級是極性的呢 ...… 查看全部問答∨ |
|
最近在弄9s12g128的單片機,用的是TWR-S12G128的開發板,sci的程序總,但是sci引腳沒有數據幀發出,請高手給看看,有啥問題么??謝謝! #include "derivative.h" #include <hidef.h> /* common defines and ma ...… 查看全部問答∨ |
為了節能省電,LED得到了很大的推廣,但LED都需要有個電源驅動,其好壞會直接影響LED的壽命,因此如何做好一個LED驅動電源是LED電源設計者的重中之重。本文介紹了一些LED驅動電源的問題,希望能夠對工程師提供一點幫助。1、驅動電路直 ...… 查看全部問答∨ |