繼收購(gòu)Weta Digital之后，Unity日前宣布收購(gòu)Ziva Dynamics以普及實(shí)時(shí)角色創(chuàng)建。后者由前 Weta Digital 數(shù)字角色總監(jiān)James Jacobs創(chuàng)立。
Ziva是一家專注于復(fù)雜解剖模擬、角色創(chuàng)建和實(shí)時(shí)藝術(shù)工具方面的軟件公司。Ziva Dynamics的技術(shù)被認(rèn)為改變了角色創(chuàng)建的過(guò)程，目前已被用于電影、電視、游戲、零售和互動(dòng)環(huán)境等的多個(gè)領(lǐng)域，不少藝術(shù)家、全球品牌和工作室和都在利用 Ziva 的技術(shù)制作世界級(jí)角色。
就在去年11月，Unity宣布收購(gòu)《指環(huán)王》《阿凡達(dá)》視效團(tuán)隊(duì)Weta Digital。
交易完成后，Unity 表示 Ziva 將借助機(jī)器學(xué)習(xí)的力量，通過(guò)云促進(jìn)將 Weta Digital 的工具帶入實(shí)時(shí) 3D 的過(guò)程。Unity 還打算使用 Ziva 的技術(shù)創(chuàng)建輕易可得的可信數(shù)字角色，并聲稱該公司的機(jī)器學(xué)習(xí)技術(shù)將支持基于云的創(chuàng)建，最終將簡(jiǎn)化生產(chǎn)并降低成本。
前維塔數(shù)字角色總監(jiān)
創(chuàng)立的Ziva Dynamics公司
Ziva Dynamics 是一家專注于角色創(chuàng)建和人體模擬的軟件公司，于2015 年由奧斯卡獎(jiǎng)得主 James Jacobs（首席執(zhí)行官）、南加州大學(xué)維特比工程學(xué)院教授和麻省理工學(xué)院 TR35 獲得者Jernej Barbic（首席技術(shù)官）和加拿大商人 Chris Godsall 共同創(chuàng)立。
此前Ziva Dynamics總共經(jīng)歷4 輪融資，共籌集了 1040 萬(wàn)美元的資金。其中Toyota Ventures 和 Millennium Technology Value Partners 是最近的投資者。
Ziva 的團(tuán)隊(duì)還包括 Creative 副總裁 Simon Clutterbuck，他曾是 Weta 生物部門(mén)的負(fù)責(zé)人，另外還有行業(yè)專家Crawford Doran、Essex Edwards、Ravi Agrawal 等。
去年11月Ziva Dynamics 推出封閉測(cè)試版 ZRT Face Trainer，是基于云的機(jī)器學(xué)習(xí)訓(xùn)練的服務(wù)，用于游戲和實(shí)時(shí)工作，Ziva Dynamics 尚未公布定價(jià)或公開(kāi)發(fā)布日期。
ZRT Face Trainer的第一個(gè)應(yīng)用示例使用了Unreal 5 虛幻引擎，該技術(shù)演示可以實(shí)時(shí)捕捉分辨率為 4K的面部動(dòng)畫(huà)，幀數(shù)穩(wěn)定到 60 幀。這些面部動(dòng)畫(huà)并不僅限于Unreal 5 虛幻引擎，可以應(yīng)用到其他的引擎中，這次合作Ziva僅是用Epic 的引擎來(lái)展示實(shí)時(shí)面部動(dòng)畫(huà)的捕捉效果。
在該測(cè)試版中，ZRT Face Trainer系統(tǒng)可供選定的用戶進(jìn)行免費(fèi)測(cè)試，一小時(shí)內(nèi)可以將任何面部網(wǎng)格轉(zhuǎn)換為高性能實(shí)時(shí)木偶人臉，在一小時(shí)內(nèi)表現(xiàn)超過(guò) 72,000 個(gè)面部形狀。
該軟件允許游戲開(kāi)發(fā)人員和動(dòng)畫(huà)師插入他們自己的面部網(wǎng)格并將轉(zhuǎn)化的實(shí)時(shí)木偶化為動(dòng)態(tài)表情。經(jīng)過(guò)訓(xùn)練，開(kāi)發(fā)人員可以使用 15TB 的 4D 掃描數(shù)據(jù)庫(kù)來(lái)模仿人類演員的表情范圍。
據(jù)產(chǎn)品網(wǎng)站介紹，面部木偶適用于游戲和實(shí)時(shí)應(yīng)用程序，運(yùn)行時(shí)僅有30MB，在單 CPU 線程上以 3ms/幀的速度運(yùn)行。
Ziva VFX是Ziva Dynamics的角色模擬軟件，通過(guò)將復(fù)雜的過(guò)程提煉成藝術(shù)家可以使用的工具，通過(guò)完全動(dòng)態(tài)的解剖模擬，讓虛擬人和動(dòng)物可以像在現(xiàn)實(shí)生活中一樣移動(dòng)、伸展和彎曲，并且以數(shù)字方式復(fù)制和耦合軟組織（如肌肉、脂肪和皮膚）的物理性和物質(zhì)性，創(chuàng)建逼真的 CGI 角色。角色包括虛擬人角色，還有跨物種的虛擬生物，但大多數(shù)都是真實(shí)比例的人頭。
Ziva VFX工具賦予3D 角色更多應(yīng)用在電影、游戲和互動(dòng)體驗(yàn)的方式。Ziva的技術(shù)已經(jīng)用于電影、電視、零售體驗(yàn)和互動(dòng)環(huán)境的角色制作，例如電影《權(quán)力的游戲》以及《哥斯拉大戰(zhàn)金剛》，也被用在游戲中，例如 Ninja Theory 的 Senua"s Saga: Hellblade II和漫威蜘蛛俠：邁爾斯·莫拉萊斯（Marvel"s Spider-Man: Miles Morales）等。
在與Ninja Theory的合作中，Ziva在 Senua 的 Saga Hellblade II 游戲展示中創(chuàng)造了 40 英尺的巨魔形象。在后者PlayStation 5 版本中，該游戲使用 Ziva Dynamics 的工具來(lái)描繪漫威英雄特技期間肌肉的變形。
而漫威蜘蛛俠：邁爾斯·莫拉萊斯的制作方Insomniac Games 的首席角色技術(shù)總監(jiān) Josh DiCarlo解釋道：“你在服裝表面看到的每一個(gè)變形都是肌肉和布料模擬的結(jié)果。我們使用了以往只用在電影的技術(shù)，從內(nèi)到外完全模擬了整個(gè)角色?！?/p>
Ziva 的技術(shù)從根本上改變了角色創(chuàng)建過(guò)程，同時(shí)提供了更好的控制、速度和能力。這是利用機(jī)器學(xué)習(xí)、深度學(xué)習(xí)和生物力學(xué)的領(lǐng)先實(shí)踐的尖端技術(shù)的結(jié)果。它從根本上改變了人們制作角色的方式。
兩大游戲引擎
持續(xù)加碼數(shù)字人技術(shù)
正如Emma在視頻中所說(shuō)：“Unity 和 Ziva 有著共同的愿景，即讓所有藝術(shù)家，無(wú)論技術(shù)水平如何，都有機(jī)會(huì)接觸并規(guī)模化制作逼真的角色。這些角色不僅限于像我這樣的虛擬人，還適用于任何種類的生物、怪物或者是難以想象的、逼真的或風(fēng)格化的動(dòng)物?！?/p>
兩者將發(fā)揮各自的優(yōu)勢(shì)，Zeva在角色模擬和機(jī)器學(xué)習(xí)方面占據(jù)領(lǐng)先地位,而Unity對(duì)實(shí)時(shí)技術(shù)有深入了解，兩者將締造輕松而強(qiáng)大的合作伙伴關(guān)系。
隨著全球市場(chǎng)對(duì)元宇宙的關(guān)注度提升，實(shí)時(shí)3D內(nèi)容制作的需求增長(zhǎng)。因提供低門(mén)檻、易上手的跨平臺(tái)開(kāi)發(fā)引擎而聞名的Unity，也正將技術(shù)和工具向游戲以外的領(lǐng)域滲透。
當(dāng)前階段，數(shù)字人作為元宇宙產(chǎn)品化體現(xiàn)，正在逐步走向大眾視野。擁有實(shí)時(shí)3D內(nèi)容制作能力的Unity與數(shù)字人技術(shù)要點(diǎn)相契合，可以天然的參與到數(shù)字人領(lǐng)域。
2020年，Unity已通過(guò)《異教徒》短片首次對(duì)外公開(kāi)展示其實(shí)時(shí)數(shù)字人技術(shù)。在去年的Unity技術(shù)開(kāi)放日上，Unity向開(kāi)發(fā)者展示最新的數(shù)字人項(xiàng)目。
Unity數(shù)字人生產(chǎn)全量流程包括4D真人掃描、高精度面部建模、定義風(fēng)格化模型、微表情處理、實(shí)時(shí)表情驅(qū)動(dòng)等。并將持續(xù)迭代該流程，實(shí)現(xiàn)降低開(kāi)發(fā)數(shù)字人的門(mén)檻，讓更多開(kāi)發(fā)者都能以較低成本參與其中的目的。
在提供數(shù)字人底層技術(shù)支持的基礎(chǔ)上，Unity希望達(dá)到的效果。舉例來(lái)說(shuō)，是用戶可以按照Unity提供的技術(shù)標(biāo)準(zhǔn)和生產(chǎn)流程后，就可以一步步搭建起一個(gè)數(shù)字人形象。
過(guò)去一年，Unity陸續(xù)收購(gòu)了人工智能3D掃描公司RestAR、3D數(shù)據(jù)處理軟件Pixyz、同步實(shí)時(shí)協(xié)作工具SyncSketch、植被建模和環(huán)境創(chuàng)作產(chǎn)品SpeedTree的開(kāi)發(fā)商IDV，及《指環(huán)王》《阿凡達(dá)》視效團(tuán)隊(duì)Weta Digital。
通過(guò)這一系列收購(gòu)，Unity的底層技術(shù)和工具產(chǎn)品得以提升。此次收購(gòu)Ziva Dynamics，將進(jìn)一步推動(dòng)Unity工具在數(shù)字人類和生物領(lǐng)域的發(fā)展。
Unity表示，在收購(gòu)Ziva后，Unity將開(kāi)放并普及Ziva的工具，讓任何水平的藝術(shù)家都能輕松、快速地創(chuàng)造出虛擬人物。
除了Unity，Epic也在將虛幻引擎技術(shù)應(yīng)用于數(shù)字人領(lǐng)域。虛幻引擎在去年發(fā)布了次世代數(shù)字人類創(chuàng)作工具 Human Creator，該工具能夠在保證質(zhì)量、保真度和逼真感的前提下，將以往需要數(shù)周乃至數(shù)月的實(shí)時(shí)數(shù)字人創(chuàng)作過(guò)程縮短至1小時(shí)以內(nèi)。
在這些底層技術(shù)的推動(dòng)下，數(shù)字人在未來(lái)有望應(yīng)用于更多的場(chǎng)景。
EW-Entertainment
近期主題·相關(guān)內(nèi)容
責(zé)任編輯：
