如果說2021年是元宇宙“元年”,那么2022年則是虛擬數字人“元年”。虛擬數字人作為人類進入元宇宙的重要載體,讓人人擁有“虛擬分身”并進入沉浸互聯的元宇宙成為可能。從爆火至今,繁榮景象之下,虛擬人底層產業技術取得了哪些突破性進展?當現實世界與虛擬世界的融合不斷加深,虛擬數字人又對人類社會生產生活哪些領域帶來改變,又該如何應對虛擬人全面落地一系列挑戰?
(資料圖片)
近日,英偉達在線研討會——DIGITAL DAY2022解決方案日|虛擬數字人在行業內部低調召開,匯聚了來自英偉達、Epic Games、歐特克、Aitalk、Style3D等各個數字人應用領域的專家,共同探索數字人的關鍵核心技術,以及數字人目前在國內的應用及前景。
天娛數科控股子公司元境科技作為特邀合作伙伴參加了此次線上大會。元境科技CEO王智武結合天娛數科旗下首個文化出海的超寫實國風虛擬人“天妤”,從技術與實踐角度分享了主題演講《解析:虛擬人“天妤”技術進階之路》,“天妤”已完成行業首個超400萬面高精度模型的實時互動直播。
作為國內最早一批投身于虛擬數字人行業的技術從業者,王智武表示,在元宇宙概念加持與資本注入下,虛擬數字人關鍵核心技術在近一年經歷了快速迭代與發展。虛擬人從靜態圖片廣告1.0模式、動態視頻2.0模式,即將快速過度到虛擬人穿越直播3.0模式,并將引領直播帶貨等新場景、新機遇。他認為,虛擬人的最大價值是它是虛擬世界的交互方式,最大優勢是對空間與時間的穿越。
演講之初,王智武首先介紹了貫穿演講始終的主人公天妤。天妤,國內首個文化出海的國風虛擬人,她從壁畫穿越而來,以現代科技演繹中國文化,通過憑借扣人心弦的故事情節與天妤在鏡頭前的生動表現,使得天妤僅上線3個月就在全網收獲近400 萬粉絲,相關話題覆蓋超20億人次,躋身頭部虛擬人IP之列。能夠成為一個現象級虛擬人IP,離不開出色的內容表現力與背后技術加持。而天妤的形象生成與內容制作的3次迭代進化,也折射了行業內虛擬數字人發展制作的三個階段技術迭代與升級。
1.0階段:傳統方式,手工制作
在1.0階段,主要利用傳統建模手段進行虛擬人面部與頭部的3D建模制作,通過真人拍攝加上后期頭部CG渲染、PS合成替換,完成圖片、視頻后期合成與制作,雖然身體與服飾自然度較高,但形象建模、拍攝、手工制作周期直接影響了的內容制作更新效率。所以,這個方式也是虛擬人1.0靜態圖片廣告模式多采用技術。
同時,在1.0版本的細節也是存在著一些細節部分的不足,在面部的自然度與毛發的細節上無法通過現有技術再次進行細化,技術迭代斷層。因此,天妤在嘗試初期,傳統制作方式即被快速替換。
2.0階段:離線渲染,影視合成
在1.0的基礎上元境科技對制作路徑與形象生成內容方式進行了優化升級,2.0階段天妤完成了形象的全身建模與服飾的資產制作,徹底擺脫了大量繁雜的拍攝工作與演員無法達到的特效動作要求,通過純CG渲染的方式對人物面部表情、動作、光線效果等多離線渲染,豐富了天妤在不同場景下的內容制作與輸出。
純人工方式的動畫制作與影視后期合成制作流程,雖然滿足了超高精度虛擬人對內容的持續輸出與制作合成,但制作成本高昂。
同時通過傳統人工制作動畫的方式始終無法深度模仿人在說話、表達時的情感傳遞,大量的離線渲染與動畫制作大大提高了人力與時間成本,且人物的細節始終無法與真人的細節進行1:1的高度還原。
3.0階段:AI賦能
在1.0至2.0的過程當中,元境科技一直在對時間、成本、效果三個技術維度進行優化與解析,通過對虛擬數字人的全鏈路生產過程的深刻理解推出了3.0階段智能技術解決方案,以自研AI算法解決各環節因周期長、成本高、效果參差不齊的實際痛點。
動態光場掃描建模技術,利用Magic Ball 對被采集人進行360°的全方位重光照掃描,可一鍵實時生成數字虛擬形象,生成數字形象效果可達亞米級別,可見人物毛孔等超清細節,大大提高了天妤的面部、肢體、毛發等細節效果的跨越式提升,相比傳統建模周期相比效率提高了50%以上。
利用自研的智能綁定算法,實現一鍵高精度的面部與身體骨骼綁定,保障了天妤在驅動生成內容時,面部與肢體動作的自然與傳神。智能毛發解析渲染算法,可高品質對毛發進行細致化渲染,使其展現效果可1:1還原真人毛發質感,提升模型整體精細程度。
元境科技在完善AI智能生成虛擬形象技術的同時推出了首個虛擬人智能生成與驅動的Saas平臺-元享,在解決了高效生成數字虛擬形象的同時聚合了多類型化的驅動方式,滿足對虛擬人日常的視覺化內容生成與輸出:口播內容生成、線上互動直播、多IP實時互動、影視內容制作、游戲角色動畫生成等。利用自研Saas平臺中聚合自研算法與驅動能力,完成行業首個超400萬面高精度模型的實時互動直播的。
通過平臺內置的,面部表情實時驅動技術、光線智能追蹤與分布式智能云端渲染三項輔助智慧功能,真正實現了高精度模型在直播中的低延時與人場高度融合的完美結合。從而使虛擬人發揮真正價值與優勢,而不是只停留在“畫中人”、“劇中人”的模式。
在分享結束前,元境科技CEO王智武表示,在未來元享平臺將繼續深入結合市場痛點,以AI為技術支點,通過Meta-Surfing元享SaaS平臺驅動“低成本、短周期、高質量”的?虛擬數字人與虛擬內容生產,實現超寫實、沉浸式實時互動,為各行各業數字化轉型升級做出貢獻。(知藍)
關鍵詞:
醫生提醒高血脂患者:不想腦梗找上門 廚房內這3味調料盡量少吃 近年來,隨著人們生活條件的改善,各種富貴病開始找上門來,其中就包括高血脂。高血脂
天娛數科:元享平臺完成行業首個超400萬面高精度模型實時互動直播 引領虛擬人進入穿越直播3.0時代 如果說2021年是元宇宙“元年”,那么2022年則是虛擬數字人“元年”。虛擬數字人作為人
瑞虎8系PRO車型、星越L、途觀L誰是“內卷王”,對比后自見分曉! 近年來,SUV賽道的競爭愈演愈烈,自主品牌的崛起更是為這一賽道帶來亮色。當越來越多
綠色于行 再聚進博——松下攜低碳成果亮相第五屆進博會 第五屆中國國際進口博覽會將于11月5日到10日在上海舉辦,松下將攜節能減排成果亮相,
以興趣先行,中公教育給予學員優質學習體驗 教育系統要認真貫徹落實習近平總書記關于教育的重要論述、關于數字中國建設的重要指示
“全球最強混動技術”檸檬混動DHT,為長城汽車帶來了什么? 近年來,受到疫情等多方面因素影響,國內汽車產業都遭遇了零部件斷供的危機,一方面是
萬家基金旗下三只產品霸榜 表現最好的產品年內收益率達68.46% 三季度最后一個交易日以A股三大股指全線下跌結束,相關指數的年內跌幅也進一步擴大。