不管是熱愛科幻的玩家,還是關(guān)注身邊熱點的 “沖浪人”,相信對李星瀾這個名字都并不陌生。
2022 年,一個名為 “2112 外星信號降臨” 的話題刷爆了抖音熱榜。視頻中,車水馬龍的街道上隔空出現(xiàn)了傳送門,一位名為李星瀾的 AI 少女從未來的 2112 年穿越而來,并發(fā)出求救信號。一夜之間,“柳夜熙”、“李未可”、“A-SOUL 嘉然、貝拉”等全網(wǎng)當(dāng)紅的數(shù)字人紛紛響應(yīng),加入到行動中,指引更多人來到 2112 年,為了人類的新生對外星生物發(fā)起絕對反擊。這場跨圈式的游戲營銷活動,離奇得像一場人工智能復(fù)活的科幻片,將李星瀾帶入了公眾的視野。
李星瀾來自于朝夕光年江南工作室自主研發(fā)的科幻生存游戲《星球:重啟》。在游戲內(nèi),她是 22 世紀(jì)記錄世界信息和玩家數(shù)據(jù)的智能終端;在游戲外,活躍于多個主流社媒平臺,和人類分享著穿越后的日常生活。在地球環(huán)境中,她似乎沒有感到太多不適,和任何青春少女一樣享受著夏天的冰淇淋,也會偶爾出現(xiàn)在商業(yè)街區(qū),和大家共同慶祝新年。2022 年 12 月,在中國科幻界「諾貝爾」——第十三屆華語科幻星云獎的頒獎典禮上,《星球:重啟》問鼎最佳科幻游戲創(chuàng)意獎,李星瀾更是代表主創(chuàng)團(tuán)隊領(lǐng)獎,得到了 “中國科幻第一人” 劉慈欣的認(rèn)證與肯定。
GTC 2023 帶你探索
穿透虛實結(jié)界的數(shù)字 “生命”
李星瀾不是傳統(tǒng)意義上的 “虛擬人”,一方面是因為其外形更加 “像” 人;另一方面,也是更重要的,驅(qū)動她的內(nèi)核不再是 “中之人”,而是最新的 AI 技術(shù)。
朝夕光年江南工作室提出了一個 GPU 驅(qū)動的 AI 系統(tǒng),包括文本到語音模塊、音頻到全身動畫模塊、視頻分析模塊、渲染模塊和聊天機(jī)器人模塊,基于這些模塊可以構(gòu)建一個逼真的實時交互數(shù)字人。實時交互演示效果如下:
此視頻由朝夕光年江南工作室制作并提供。
這個 AI 系統(tǒng)通過NVIDIA Omniverse平臺,不僅可以實時高效地渲染李星瀾,還可以將李星瀾的全身動畫模塊連接至后端聊天機(jī)器人生成聊天文本內(nèi)容,即李星瀾從表情、動作到說話內(nèi)容,均通過定制開發(fā)的神經(jīng)網(wǎng)絡(luò)完成。此外,還使用了NVIDIA Omniverse ACE的 audio2motion 和 text2speech 模型,進(jìn)一步優(yōu)化其表情、動作和語言表達(dá)。
從效率上看,李星瀾的創(chuàng)作,還借助了 NVIDIA 的 GPU 計算資源和加速器,加速了制作過程中使用深度學(xué)習(xí)模型的訓(xùn)練周期,并縮短推理延遲,使李星瀾能夠以高度響應(yīng)的方式與人類粉絲互動。通過雙方的合作,朝夕光年江南工作室在幾個月時間內(nèi)便打造了李星瀾,與人工手動制作相比,效率大幅度提升,這或許會成為多行業(yè)構(gòu)建數(shù)字人、虛擬形象的新趨勢。
作為李星瀾制作的重要參與方,NVIDIA 在 AI、數(shù)字人方向此前已有足夠扎實的技術(shù)儲備。在近年多屆 GTC 大會上所展示的相關(guān)成果當(dāng)中,便有許多令人印象深刻的技術(shù)介紹與演示。
GTC 2023 春季大會將于 3 月 20 日-23 日在線上舉行,包括超過 650 場演講、專家座談會以及特別活動,涵蓋加速計算和開發(fā)工具、計算機(jī)視覺、對話式 AI/NLP、數(shù)據(jù)科學(xué)、深度學(xué)習(xí)、推薦系統(tǒng)/個性化、元宇宙等多個主題。
作為本屆大會的一大看點,GTC 專門面向國內(nèi) AI 從業(yè)人士于 3 月 22 日 1:00 PM推出了特別主題活動China AI Day,集中呈現(xiàn) 11 場來自字節(jié)跳動、百度、阿里巴巴、騰訊、快手、網(wǎng)易、NVIDIA 的技術(shù)專家所帶來的精彩演講,探討互聯(lián)網(wǎng)、數(shù)字孿生、元宇宙領(lǐng)域的前沿 AI 應(yīng)用。其中,就包括了朝夕光年江南工作室 AI 技術(shù)負(fù)責(zé)人四道帶來的李星瀾項目分享,以下為議題介紹:
//
李星瀾:一個基于實時智能交互系統(tǒng)
打造的 “真實” 數(shù)字生命
會議代碼:[SE51461]
演講時間:3 月 22 日 1:30 PM
智能 NPC 和數(shù)字人已經(jīng)在娛樂行業(yè)和社交媒體平臺被廣泛應(yīng)用,包括人工智能驅(qū)動的主持人、評論員和網(wǎng)紅等。但開發(fā)具有高視覺保真度的逼真智能 AI 通常需要大量時間,而且成本很高,很難擴(kuò)大規(guī)模。本場演講將介紹如何利用 NVIDIA Omniverse 和 NVIDIA GPU,以及如何借助計算機(jī)圖形學(xué)和人工智能功能來構(gòu)建李星瀾 Lydia 數(shù)字人項目。
演講嘉賓:
四道,朝夕光年江南工作室 AI 技術(shù)負(fù)責(zé)人
朝夕光年江南工作室 AI 技術(shù)負(fù)責(zé)人,浙江大學(xué)人工智能博士,主要研究數(shù)字人的實時驅(qū)動和多模態(tài)內(nèi)容生成技術(shù)。曾主導(dǎo) AI 音樂舞蹈、AI 捏臉、AI 視頻動捕和面捕、口型表情動作生成、智能 NPC 等技術(shù)的落地。
-
英偉達(dá)
+關(guān)注
關(guān)注
22文章
3815瀏覽量
91492
原文標(biāo)題:GTC23 | 數(shù)字人李星瀾邀您參會,搶先體驗未來 AI 世界
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論