在最近收購的Weta Digital、SpeedTree,、SyncSketch,、PiXYZ和RestAR等公司背后,Unity看到了這些公司非凡的人才和創(chuàng)造出的強大工具,,這些公司的核心技術(shù)讓藝術(shù)家和創(chuàng)作者們能夠以更容易,,更快速,更低成本實現(xiàn)他們的創(chuàng)作,。
今天,,Unity宣布正式收購Ziva Dynamics,這標志著Unity已經(jīng)準備好進入數(shù)字人領域,。
作為人類,,我們對人類行為的反應是相當自然的。我們的整個大腦都致力于快速處理臉部表情的表現(xiàn),。因此創(chuàng)造出真正能夠滿足我們想象中高質(zhì)量且表情自然的數(shù)字人類將會是一項復雜而痛苦的工作,,這需要相關領域?qū)I(yè)的知識和超強的毅力。
Ziva Dynamics目前正在解決這一難題,。Ziva團隊對復雜的解剖模擬和實時藝術(shù)創(chuàng)作工具有著深厚的專業(yè)知識和理解,。他們的技術(shù)為逼真的實時角色和可擴展,、可訪問的工作流鋪平了道路。
Ziva Dynamics
艾瑪是由Ziva Dynamics與Unity共同開發(fā)的虛擬數(shù)字人,。由先進的機器學習提供動力,并在Unity中實時運行,。她的模型是使用ZRT訓練器通過超過30tb的獨特4D數(shù)據(jù)訓練而成的,,這使她能夠表現(xiàn)出超過72,000個訓練過的表情,。這是一種將逼真動畫和情感表演所融合的深度技術(shù),;讓角色即使在要求苛刻的實時環(huán)境中也能大放異彩。相信很快,,所有藝術(shù)家和創(chuàng)作者都可以通過Unity來使用這項技術(shù),。
實時傳遞這種具有高保真度的圖像是具有突破性的。正如艾瑪向我們描述的那樣,,這是尖端技術(shù)的結(jié)果,,通過使用機器學習、深度學習和生物力學的領先實踐創(chuàng)造出獨一無二的虛擬數(shù)字人,。它從根本上改變了人們塑造人物的方式,。Ziva的技術(shù)能夠為消費類硬件上各種大小的實時運動的物體提供創(chuàng)作空間。如人,、生物,、衣服、逼真或風格化的景物,、高保真或任何保真度的物體等等,。
Ziva Digital demo
將Ziva的技術(shù)帶入到Unity之中
作為實時動畫和游戲的領先變形和模擬工具,Ziva已經(jīng)成為創(chuàng)造高質(zhì)量生物作品的新標準,。目前已經(jīng)有數(shù)百家電影和游戲工作室如:Ninja Theory的《森華傳奇:地獄之刃2》,,以及《權(quán)力的游戲》和《哥斯拉大戰(zhàn)金剛》等電影和電視劇作品中都用到了Ziva的技術(shù)。
通過收購Ziva,,Unity使Ziva的先進技術(shù)得到進一步普及,,讓所有藝術(shù)家都能輕松快速地創(chuàng)作出前所未有的數(shù)字角色。此外,,通過此次收購,,Unity還可以借助機器學習的力量,通過云將Weta工具帶入實時3D的進程,。而Ziva已經(jīng)解決了將復雜的電影質(zhì)感模擬帶入到RT3D的挑戰(zhàn),。
Ziva VFX
作為Ziva Dynamics公司的旗艦軟件,Ziva VFX被用于數(shù)字復制耦合軟組織的物理和物質(zhì)性,,如肌肉,、脂肪和皮膚等,,使藝術(shù)家能夠創(chuàng)建出最逼真的CGI角色。這項強大的技術(shù)建立在工程學和生物力學的最前沿實踐之上,,Ziva已經(jīng)成功地將這些復雜的過程提煉為對用戶友好的藝術(shù)家工具,。其特點是易用性、堅固的工作流和衍生資產(chǎn)的創(chuàng)建,。有了完全動態(tài)的解剖結(jié)構(gòu),,這些虛擬動物和人類可以像在現(xiàn)實生活中一樣移動、伸展和彎曲,,這幫助創(chuàng)作者們在角色工作流程中節(jié)省了數(shù)周的時間,。Ziva的用戶包括學生、獨立工作室,、小型工作室和大型VFX工作室等,。
Ziva的模擬數(shù)據(jù)可以用來訓練各種生物和角色。而這些角色能夠在使用ZivaRT的實時環(huán)境中進行表演,。ZivaRT旨在精確重建游戲引擎中非線性變形的行為,。其為實時變形提供了真正無與倫比的質(zhì)量,即使在消費級硬件(GPU或CPU)上也是如此,。ZivaRT已經(jīng)在為一些3A游戲公司提供動力,。
Ziva強大的機器學習技術(shù)還支持基于云的創(chuàng)作,可以簡化角色創(chuàng)作并節(jié)省創(chuàng)作者的時間和成本,。
通過收購Ziva,,Unity現(xiàn)在可以接觸到更多業(yè)內(nèi)最優(yōu)秀的人才。Ziva的執(zhí)行團隊由科學和技術(shù)學院獎獲得者以及VFX,、物理,、變形、機器學習等領域的專家組成,。和這些行業(yè)頂尖的領導者一起工作也將讓Unity有了長遠的進步空間,。
Ziva是由奧斯卡獎得主詹姆斯·雅各布斯(首席執(zhí)行官)、南加州大學維特比工程學院教授和麻省理工學院TR35獲得者Jernej Barbic(首席技術(shù)官)以及加拿大商人Chris Godsall共同創(chuàng)立的,。Ziva的團隊還包括創(chuàng)意副總裁西蒙·克拉特巴克(Simon Clutterbuck),,他曾是Weta生物部門的負責人,在Weta期間因與詹姆斯·雅各布斯合作研究基于物理的角色模擬框架獲得了科學與工程學院獎,。而像克勞福德·多蘭,、埃塞克斯·愛德華茲、拉維·阿格拉瓦爾等行業(yè)專家將把他們深厚的專業(yè)知識帶到Unity,,幫助Unity將這些工具變得更加大眾化,。