引領業界的AI開發商利用 NVIDIA 技術套件,為遊戲、醫療保健、金融服務和零售等各種應用建立逼真寫實的虛擬化身和動態角色
NVIDIA 3月18日宣布,於各行業居領導地位的人工智慧(AI)應用開發商正運用 NVIDIA 數位人技術,為商業應用和動態遊戲的人物角色建立創建出維妙維肖的數位化身。這些創作成果將在本週於美國加州聖荷西舉行的全球AI領域盛會 GTC大會上展出,可以在 HippocraticAI、Inworld AI、UneeQ 等公司所展示的技術中看到。
開發者可以運用於製作語音和動畫的 NVIDIA Avatar Cloud Engine(ACE)、用於語言的 NVIDIA NeMo™,以及用於光線追蹤渲染的 NVIDIA RTX™ 等建構模組,創作出有能力在AI支援下,以自然語言進行互動的數位人,讓對話更加真實和引人入勝。
NVIDIA 開發者與效能技術部門副總裁 John Spitzer 表示:「NVIDIA 為開發者提供了一套用於創作數位人的世界級AI技術。這些技術可以支援創作複雜的動畫和對話語音,讓數位互動內容更有真實感。」
世界級的數位人技術
數位人技術套件包括在AI支援下用於語言、語音、動畫和圖形的技術:
- NVIDIA ACE – 這項技術可以幫助開發者運用由 NVIDIA Audio2Face™ 提供支援的臉部動畫,以及由 NVIDIA Riva 自動語音辨識(ASR)和文字轉語音(TTS)技術支援的語音,讓數位人栩栩如生。ACE 微服務在使用上非常靈活,能夠按照本地端 GPU 的能力在雲端和 PC 上運行模型,以幫助確保用戶獲得最佳體驗。
- NVIDIA NeMo – 此一端到端的平台可以幫助開發者提供企業已就緒的生成式AI模型,包括精確的資料管理、先進的自訂功能、檢索增強生成和加速效能。
- NVIDIA RTX – 集合了 RTX 全域照明(RTXGI)和 DLSS 3.5 等渲染技術,可以在遊戲和應用程式中做到即時路徑追蹤。
數位人與虛擬助理的建構模組
NVIDIA 與 Hippocratic AI、Inworld AI 和 UneeQ 等多個產業的領導開發商合作打造了一系列新的展示內容,以展示其數位人製作技術的新功能。
HippocraticAI 開發出一個以安全為重點,在大型語言模型(LLM)的支援下針對特定任務的醫療保健代理。該代理可以打電話聯絡患者、追蹤照護協調工作、提供術前指導、執行出院後管理等。NVIDIA 與 HippocraticAI 在 GTC 大會合作擴大其解決方案的規模,使用 NVIDIA ACE 微服務、NVIDIA Audio2Face、NVIDIA Animation graph 及 NVIDIA Omniverse™ Streamer Client 來展示運用生成式AI開發醫療保健代理數位化身的潛力。
Hippocratic AI 聯合創辦人暨執行長 Munjal Shah 表示:「我們的數位助理為全球患者提供有用、即時和準確的資訊。NVIDIA ACE 技術透過尖端的視覺效果和逼真的動畫開發出栩栩如生的數位助理,有助於與患者建立更好的關係。」
自主數位人平台 UneeQ 專門用於為客戶服務和互動式應用程式建立AI虛擬化身。它的數位人在網路上代表品牌即時與客戶溝通交流,讓他們對購買充滿信心。UneeQ 平台採用 NVIDIA Audio2Face 微服務並搭配 Synanim ML,以建立維妙維肖的虛擬化身,提供更優質的客戶體驗和參與度。
UneeQ 創辦人暨執行長 Danny Tomsett 表示:「UneeQ 將 NVIDIA 在製作動畫方面的人工智慧技術加上我們自己的 Synanim ML 合成動畫技術,能夠即時做到數位人機互動,而這種互動能夠對情感做出反應,並且提供在對話式AI技術支援下的動態體驗。」
創作出遊戲中活靈活現的NPC
NVIDIA ACE 這套技術用於創作出栩栩如生的遊戲人物角色。Inworld AI 與 NVIDIA 合作開發出的全新技術展示內容《Covert Protocol》,突破了遊戲中角色互動的界限。Inworld 的AI引擎整合了 NVIDIA Riva 和 NVIDIA Audio2Face,前者能夠做到精確的語音轉文字,後者能夠做出逼真的臉部表情。
Inworld 的AI引擎採用多模態方法來表現非玩家角色(NPC),將認知、感知和行為系統結合在一起,在製作精美的環境中藉由超厲害的 RTX 渲染角色,營造出身臨其境的敘事效果。
Inworld AI 執行長 Kylan Gibbs 表示:「NVIDIA ACE 微服務加上 Inworld Engine,讓開發者能夠創作出可以驅動用生動的方式來敘述遊戲情節的數位角色,為遊戲玩家的解密、推理和遊戲方式開闢了新的可能性。」
全球遊戲發行商正在評估 NVIDIA ACE 將如何改善遊戲體驗。
醫療保健、遊戲、金融服務、媒體和娛樂以及零售業等眾多開發商皆採納ACE
頂尖的遊戲和數位人領域開發者正在探索如何利用 ACE 和生成式AI技術,以改變遊戲和應用程式中玩家與 NPC 之間的互動。
採用 ACE 的開發商與平台有 Convai、Cyber Agent、Data Monsters、勤業眾信、HippocraticAI、IGOODI、Inworld AI、Media.Monks、米哈遊、網易遊戲、完美世界、Openstream、掌趣科技、Quantiphi、樂天證券、Slalom、SoftServe、騰訊、Top Health Tech、Ubisoft、UneeQ 及 Unions Avatars。
如需更多有關 NVIDIA ACE 的資訊,請至 https://developer.nvidia.com/ace。平台開發者可以將整套數位人技術或單一微服務項目納入其產品中。
開發者可以申請加入搶先試用計畫獲得開發中的AI模型,以展開 NVIDIA ACE 之旅。開發者可以立即在 ai.nvidia.com 上評估和取得一套方便易用的微服務 NVIDIA NIM,以探索可用的模型,加快部署適用於 Riva 和 Audio2Face 的生成式AI。