越來越像人的數字人

聚量光年 2024-04-02 13:38:27

虛擬數字人在衆多領域的應用愈發廣泛,那麽伴隨技術逐步成熟,數字人未來的形象與發展又會呈現何種趨勢呢?在這篇文章中,作者針對數字人進行了介紹與分析,大家不妨來了解一下,也許能幫助你更加明晰這一概念背後的景象。

隨著數字人的熱度持續攀升,各個行業應用的場景日益豐富,數字人也越發爲大衆所熟知。尤其是從 2022 年下半年至 2023 年,例如在北京冬奧會的開幕式表演、氣象播報以及手語解說中都能頻繁看到數字人的身影;數字人主播也在電視台中擔任主持工作。

各類晚會與明星互動表演的場合:2022 年江蘇衛視跨年晚會的舞台上,“虛擬鄧麗君”與周深一同完成了《大魚》、《小城故事》和《漫步人生路》這三首歌曲的合唱;2022 年 5 月 18 日,首位文博界虛擬宣推官文夭夭:身著唐代花钿妝,紮著雙髻丸子頭,身穿一襲淡雅長裙,腰間系著唐朝花鳥镂空香熏球。

本文將從數字人的形象類型、不同類型的制作周期與限制條件、普及程度與大衆認知程度、運用的優勢與劣勢以及未來的發展趨勢等維度,分享個人的見解。

首先來簡要說明一下什麽是數字人:

虛擬數字人是指存在于非物理世界中,借助計算機圖形學、圖形渲染、動作捕捉、深度學習、語音合成等計算機手段創造並使用,且具備多重人類特征(外貌特征、人類表演能力、人類交互能力等)的綜合産物。

在市場上,其也常被稱爲虛擬形象、虛擬人、數字人等,具有代表性的細分應用包括虛擬助手、虛擬客服、虛擬偶像/主播等。

一、數字人的類型

1. 行業內依據虛擬數字人的角色形象,通常分類如下

在目前的應用中,較爲常見的有 2D 真人、2D 卡通、3D 卡通、3D 寫實、3D 超寫實這 5 個類型。

2D 真人:通過真人在專業錄影棚錄制的視頻,再結合 AI 訓練而成;用戶還能通過圖片加上 AI 訓練,生成用戶的外觀特征。其表情神態、肢體動作等與真人效果極其相似——目前很多人可能在抖音、淘寶等直播電商平台上接觸過這類數字人。

2D 卡通:通過 2D 建模生成,具有很強的可塑性。比如世界第一虛擬偶像日本夢幻歌姬“初音未來”的形象、洛天依等。——在實際運用層面上,已經不是特別常見了。

3D 卡通/3D 寫實:經過高精度原畫設計、高寫實 3D 建模、高水平的虛擬人引擎導入、高精度動作捕捉,最後完成精細的修幀渲染才能完成。——隨著 GPU 以及算力的發展,目前越來越高進度的 3D 數字人被應用在 APP/小程序/機具終端上。

3D 超寫實:超寫實指的是人物外觀的仿真度極高,栩栩如生,這種虛擬人需要面部面數在 1 萬面以上,具有高精度且能經受 360 度無死角的拍攝。面部材質不僅與真實皮膚的質感極爲接近,還能根據相機的距離自動優化,皮膚、五官、頭發、肢體都極爲逼真。如 Ling、柳夜熙等——目前更多的是作爲獨立 IP,充當企業形象代言人的角色,可承接視頻宣傳、海報宣傳、跨界互動等工作。

2. 從制作周期、制作方式的維度來闡述不同類型數字人的情況

制作周期:

2D 真人:真人形象采集,加上文本/聲音 AI 驅動,制作周期爲 3-4 周。

2D 卡通:通過 2D 繪制,形象生成周期較短,制作周期爲 2-4 周。

3D 卡通人物/3D 寫實:運用 3D 繪制,制作周期爲 2-4 個月。

3D 超寫實:采用真人掃描/3D 建模,制作周期爲 3-6 個月。

制作周期:

• 2D 真人:依托真人形象采集,結合文本或聲音 AI 驅動,制作耗時 3-4 周。

• 2D 卡通:通過 2D 繪制,形象生成迅速,整體制作周期 2-4 周。

• 3D 卡通/3D 寫實:借助 3D 繪制,制作周期大約爲 2-4 個月。

• 3D 超寫實:運用真人掃描或 3D 建模,制作周期 3-6 個月。

制作流程:

2D 數字人:

2D 卡通數字人相對簡便:主要依賴手繪或者美術工作者來完成。

2D 視頻數字人:

• 錄制真人的視頻表演並采集相關數據,通常錄制 3-5 分鍾的視頻。

• 然後把視頻交付給 AI 進行訓練。

• 最終達成輸入文本或音頻文件,實現口唇驅動的效果。

3D 數字人制作流程:

1. 虛擬形象的設定與構思:首先要明確虛擬人的形象風格和類別;

2. 進行虛擬形象建模、建模形象綁定以及動作捕捉。基于虛擬形象的 IP 設計或真人偶像的原畫和三視圖、招牌動作與表情,展開面部及身體的 3D 建模,並選取關鍵點,將識別出的關鍵點映射到模型上完成綁定。關鍵點的數量與位置對最終成果有影響。利用動作捕捉設備或特定攝像頭加圖像識別,捕捉在形體、表情、眼神、手勢等方面的關鍵點變化。

3. 實時驅動渲染

由真人演員(在虛擬偶像中被稱爲中之人)按照制作需求展開相應表演,實時驅動虛擬數字人的表演。

4. 實時內容輸出與互動

最終將複活的實時數字人接入實時渲染引擎。

在未來相當長的時期內,元宇宙中的虛擬人將會成爲熱門議題。但不管怎樣,我們都要尊重人類、敬畏自然、重視科技、尊崇宇宙、珍視藝術,使這個必然到來的未來更加美好。

0 阅读:0

聚量光年

簡介:給用戶科普AI智能技術