案例簡介

在本案例中，元形水滴通過與 NVIDIA 合作，利用先進的 GPU 加速技術，顯著提升了 3D 數字人技術的性能與體驗。

本案例主要應用到NVIDIA 的ACE NIMs微服務。

以前沿技術賦能文旅文創

杭州元形水滴智能科技有限公司專注于通過 AR（增強現實）、VR（虛擬現實）、XR（擴展現實）以及 AIGC（人工智能生成內容）等前沿技術，賦能文旅和文創等商業場景。公司目標客戶涵蓋企業展廳、智慧文旅、文創及元宇宙互動等領域，旨在連接物理與數字空間，架起現實世界與虛擬世界之間的橋梁，創造無縫且豐富的互動體驗。

元形水滴 3D 數字人技術面臨的挑戰

在 3D 數字人技術的開發與應用過程中，元形水滴面臨諸多挑戰。首先，數字人需具備高效的語音識別與合成能力，以實現自然流暢的交互體驗。然而，傳統語音識別與合成技術在處理復雜語境及多樣化語音時，常出現準確率低、響應速度慢的問題。其次，數字人的唇形生成技術需與語音精準同步，確保視覺與聽覺的高度協調，這對技術的精確度和實時性提出了極高要求。此外，數字人技術的開發對計算資源的需求巨大，而傳統 CPU 的計算能力難以滿足實時處理的需求。因此，如何在保障技術質量的同時提升計算效率，成為元形水滴仍待攻克的難題。

NVIDIA 助力元形水滴突破數字人技術瓶頸

為了解決上述挑戰，杭州元形水滴智能科技有限公司選擇了 NVIDIA 的 ACE NIMs 微服務。通過 Riva 框架，元形水滴實現了高效的 ASR 和 TTS 功能，語音識別的準確率提升了 80%，語音合成的自然度也得到了顯著改善。Riva 的 GPU 加速能力使得語音處理的速度提高了 10 倍，能夠實時響應用戶的語音指令。

在唇形生成方面，元形水滴利用 Audio2Face-3D 技術，成功實現了數字人唇形與語音的精準同步。該技術能夠根據語音內容實時生成相應的唇形動畫，提升了數字人交互的真實感和沉浸感。

通過這些技術的應用，元形水滴不僅提升了數字人技術的整體性能，還大幅縮短了開發周期，使得數字人解決方案能夠更快地投入市場。

NVIDIA 技術賦能元形水滴智能業務發展

NVIDIA 的產品和技術對杭州元形水滴的業務發展產生了深遠的影響。通過使用 ACE NIMs 服務，元形水滴的數字人技術在語音識別、合成和唇形生成等方面取得了顯著進展，極大地提升了用戶體驗和市場競爭力。

在 NVIDIA 初創加速計劃的支持下，元形水滴智能還獲得了深度學習學院的免費課程，提升了團隊的技術水平。此外，初創加速計劃提供的云服務資源也為元形水滴的技術研發提供了強有力的支持，使其能夠在競爭激烈的市場中脫穎而出，最終獲得天使投資人的信賴。

“3D 數字人技術是元宇宙等場景未來人機交互的重要趨勢，NVIDIA 的技術為我們提供了強大的支持，使我們能夠在這一領域不斷創新。”元形水滴智能的聯合創始人 & CEO 沈傳立表示。

NVIDIA 初創加速計劃

NVIDIA 初創加速計劃 (NVIDIA Inception)為免費會員制，旨在培養顛覆行業格局的優秀創業公司。該計劃聯合國內外知名的風投機構、創業孵化器、創業加速器、行業合作伙伴以及科技創業媒體等，打造創業加速生態系統。能夠提供產品折扣、技術支持、市場宣傳、融資對接、業務推薦等一系列服務，加速創業公司的發展。