角色創作和動畫是兩門截然不同的學科,需要訓練有素的藝術家具備專業背景知識。這些領域對于來自不同技能背景的無關背景的藝術家來說是困難和令人沮喪的,角色創建者和 iClone 是專門為解決這個問題而創建的。
Character Creator 定位良好,可以通過強大的管道為主流工具(如 ZBrush 、 Substance 和 Blender )創建逼真且風格化的角色。結合使用 LOD (細節級別)導出 FBX 的功能、數字人體著色器和豐富的運動資源集合, iClone 作為動畫編輯器而不需要陡峭的學習曲線。
2020 年 NVIDIA Omniverse 的發布是一個引起我們注意的重大事件。 Omniverse 代表下一代 3D 虛擬協作和實時仿真平臺,將人員和應用程序連接起來,實現廣泛協作。 Reallusion 軟件套件與大量高質量角色資產和動作庫相結合,可以在這個生態系統中發揮關鍵作用,而 Omniverse 提供了路徑跟蹤渲染和 AI 技術,實現了強大的協同作用。
從哪里開始?
要建立連接器,您可以參考NVIDIA 發射器應用程序上下載的 Connect 樣本代碼。
圖 1 。使用示例代碼構建您自己的 Omniverse 連接器
上 Omniverse Youtube 頻道 ,有一個很棒的初學者教程: 從 Connect 示例創建 Omniverse USD 應用程序 .
場景和角色動畫
iClone 和 Character Creator 的 3D 場景由具有基本變換(包括平移、旋轉和縮放值)的節點組成。角色、網格、燈光和攝影機都附著在這些節點下。
角色骨架的骨骼也由這些節點表示。僅表示變換的節點導出為 USD 變換,表示身體和面部骨骼的節點導出為 USD 骨骼關節。在轉換為 USD 格式之前,會將其他骨骼和蒙皮添加到附著到骨骼的附件節點。
圖 2 。變換( Xforms )和關節的場景圖
USD Xform 縮放以與 iClone 完全不同的方式工作。在 iClone 中,可以使節點繼承或忽略父節點比例,而在 Omniverse 中,節點比例始終從其父節點繼承。在這種情況下,在導出到 Omniverse 之前,必須刪除骨骼節點比例繼承并重置其值,以便比例值匹配。
iClone 的大部分面部表情都是由變形動畫組成的,這些動畫以 USD 混合形狀導出。與存儲在局部空間位置的 FBX 混合變形不同, USD 混合變形存儲位置偏移。
由于 iClone 還存儲位置偏移(與強度乘數結合使用),因此它與 Omniverse 完全兼容,可以直接轉換為 USD 格式。需要注意的是, Omniverse 需要一個帶有混合形狀的支柱的骨架根部,可能需要額外的處理。
物質轉化
以下部分包含 iClone 的 USD 導出程序的 MDL 代碼摘錄。
在 USD 文件中,使用info:mdl:sourceAsset和info:mdl:sourceAsset:subIdentifier作為輸入函數來指定 MDL 。 NVIDIA 和 PIXAR 引入了新的subIndentifier屬性。稍后調用input:以輸入紋理和材質參數。OmniPBR.mdl附帶的OmniPBR.mdl和 Omniverse 被用作起點。
OmniPBR 。 mdl 從一開始就被選中,因為它在 NVIDIA RTX 實時模式和路徑跟蹤模式下都運行良好。另一方面, OmniSurface 和 OmniHair 是用于 RTX 路徑跟蹤模式的照片逼真 MDL 。然后將現有的 PBR 、蒙皮、頭部和 SSS 著色器從 HLSL 重寫為 MDL 。
游泳池里的流水 是另一個很好的例子:
float2 inputs:texture_translate.timeSamples = { 0: (0, 0), 4000: (4, 8), }
除了前面提到的內置 MDL 之外, GitHub 上還有一個 base.mdl ,其中包含一些可立即部署的可重用函數。
光轉換
點光源和聚光燈使用UsdLuxSphereLight調整錐角。筒燈和矩形燈分別使用UsdLuxCylinderLight和UsdLuxRectLight。燈光 IES 輪廓文件也是一個造型屬性。 r 中的光強度與單位表面積的發光強度相似。半徑為( USD 米)的球面光的 USD 強度可通過以下公式近似計算:
USD intensity = candela * 1000 * / (4PI r*r)
當半徑以厘米為單位時,使用以下公式:
USD intensity = candela * 1000 / (4PI(0.01r)*(0.01r))
半徑是 Omniverse 渲染器中的重要屬性。我們建議最小半徑為 2 cm 。
下一步是什么
單向實時同步連接器的原型正在開發中。因為 iClone 的撤銷/重做系統類似于 memento pattern ,所以可以使用一個表來跟蹤具有通用 ID 的活動對象。此表在執行撤消和重做功能后更新。
關于作者
Weien Chen 是 Reallusion 圖形團隊的高級軟件工程師。他參與了 iClone 7 / Character Creator 3 及其 Omniverse 連接器的運輸。他還從事 Reallusion PopVideo 增強、 VXGI 和 PopcornFX 集成以及 Reallusion skin 、 SSS 和頭發著色器開發。
審核編輯:郭婷
-
NVIDIA
+關注
關注
14文章
5039瀏覽量
103309
發布評論請先 登錄
相關推薦
評論