推薦閱讀：
聚焦“數字主持人”|對話(huà)SMG虛擬新聞主播“申?雅”設計者與平臺方
聚焦“數字主持人”|對話(huà)浙江廣電數字主持人谷小雨的設計運營(yíng)方
(資料圖片僅供參考)
虛擬數字人已在廣電視聽(tīng)多領(lǐng)域嶄露頭角。扎實(shí)推進(jìn)媒體深度融合，新賽道下，“數字主持人”應用場(chǎng)景還有哪些可能？又會(huì )為行業(yè)帶來(lái)怎樣的變革？
聚焦數字化轉型以及媒體智能化發(fā)展，推出特別策劃，聚焦“數字主持人”。本文通過(guò)詳解河北廣播電視臺（集團）“冀小佳”的形象設計、動(dòng)作捕捉等，還原數字主持人的誕生全記錄。
河北廣播電視臺（集團）的電視制作中心于2022年4月開(kāi)始啟動(dòng)數字虛擬主播的研發(fā)任務(wù)，10月正式投入使用。
其間，河北廣電通過(guò)堅持自主研發(fā)，參考大量國內外其他平臺的節目形式及虛擬形象，完成了團隊由傳統電視包裝制作到數字人制作的業(yè)務(wù)轉型。
“卡通形象+寫(xiě)實(shí)形象”的摸索
設計初期，團隊確定了卡通和寫(xiě)實(shí)兩種風(fēng)格，卡通風(fēng)格主要以DAZ結合Zbrush和虛幻引擎來(lái)實(shí)現，寫(xiě)實(shí)風(fēng)格則借助于三維掃描技術(shù)及數字人創(chuàng )建器來(lái)實(shí)現。
團隊最先設計了“冀小佳”的卡通形象，服裝直接綁定身體，毛發(fā)為面片形式，設計人員為此出了大量的設計線(xiàn)稿和三視圖。
根據應用場(chǎng)景與角色定位，早期的主播形象整體風(fēng)格偏年輕化、卡通化。
寫(xiě)實(shí)形象主要采用三維掃描技術(shù)獲取面部模型，將模型在zbrush里做適當的雕刻處理，再進(jìn)數字人創(chuàng )建器生成角色，角色服裝采用MD進(jìn)行制作，毛發(fā)則使用xgen進(jìn)行制作。
通過(guò)一系列摸索與調整，團隊產(chǎn)出了三個(gè)虛擬形象。第一個(gè)是已經(jīng)投入使用的“冀小佳”，在10期《跟著(zhù)鳥(niǎo)兒游河北》《臺媒體推介會(huì )》《深圳文博會(huì )宣傳片》中出鏡播報。
第二個(gè)角色為臺新聞主播李耀陽(yáng)的數字形象，第三四為另外兩個(gè)備用虛擬主播。
團隊研究了基于A(yíng)rkit的52個(gè)面部表情數據庫，在實(shí)踐中了解每個(gè)表情參數幅度對于面捕結果的影響，實(shí)現了任意風(fēng)格角色面捕的可能性。
讓虛擬主播“動(dòng)”起來(lái)
形象資產(chǎn)有了，如何讓主播動(dòng)起來(lái)？團隊針對不同的應用場(chǎng)景確定了兩套制作流程：動(dòng)捕驅動(dòng)和傳統動(dòng)作庫驅動(dòng)。
動(dòng)捕方面，運用青瞳的光學(xué)動(dòng)捕設備結合無(wú)遠弗屆的慣性動(dòng)捕手套，面部表情則采用蘋(píng)果端的livelinkface。
結合新聞播報本身主播動(dòng)作較少的特性，團隊研發(fā)了動(dòng)作庫制作的流程，前期采集一系列新聞播報常用的動(dòng)作制作動(dòng)作數據庫，后續只需要把每期播報的稿子線(xiàn)上發(fā)給主播中之人即可。
通過(guò)iPhone二次采集視頻畫(huà)面中的表情，從數據庫里加上適當的動(dòng)作，同步好配音即完成節目的產(chǎn)出。利用這套線(xiàn)上制作流程，節省了協(xié)調團隊人員和調試設備的時(shí)間，更加機動(dòng)靈活。
在產(chǎn)出了一系列的數字主播之后，團隊也開(kāi)始著(zhù)力打造虛擬偶像，面向短視頻平臺，定位較主流媒體主播形象更加輕松活潑。
團隊引入了更加高效的臉部修改技術(shù)，利用虛幻引擎變形插件及相關(guān)藍圖，實(shí)現虛擬角色面部的實(shí)時(shí)調整，并且結合中之人面部運動(dòng)習慣時(shí)實(shí)訓練調試虛擬人五官的運動(dòng)幅度。
為數字人選服裝
傳統角色動(dòng)畫(huà)的服裝部分大多是三維軟件里做好動(dòng)畫(huà)后導出fbx進(jìn)MD，然后進(jìn)行離線(xiàn)模擬，MD輸出abc文件再回套給三維軟件中的角色，制作流程復雜低效而且布料模擬極易出現問(wèn)題。
針對服裝問(wèn)題，團隊制訂了兩套方案。
一是利用MD制作服裝，直接將服裝綁定到角色。優(yōu)點(diǎn)是不用模擬，產(chǎn)出效率高，不會(huì )出現穿幫等問(wèn)題，適合直播及對產(chǎn)出率要求高的欄目；缺點(diǎn)是缺乏布料的物理學(xué)特性，真實(shí)度打了折扣。
二是使用Epic官方推出的udraper插件，用MD制作好的服裝直接在虛幻引擎中用udraper賦予角色，布料可以時(shí)實(shí)模擬運動(dòng)。優(yōu)點(diǎn)是布料更加真實(shí)自然；缺點(diǎn)是當服裝的層數多時(shí)容易發(fā)生問(wèn)題，穿模、飛起等。
因此每個(gè)主播都有兩套服裝，一套綁定版，一套u(yù)draper版，這樣根據不同需求靈活切換。
數字人的制作除了以上技術(shù)上的要求之外，對于設計審美的要求同樣較高。
作為主流媒體的數字主播，僅僅是卡通形象顯然不夠嚴肅，團隊最終確定做一款寫(xiě)實(shí)中帶有一些卡通或者可愛(ài)氣質(zhì)的形象。通過(guò)不斷打磨，團隊在五官比例及位置上做了很多微妙調整，最終形成了一套角色設計理論。
技術(shù)與硬件的發(fā)展使數字形象制作的效率逐漸提升，數字形象有很多優(yōu)點(diǎn)，比如三維特效制作空間大、更加智能化、欄目制作產(chǎn)出時(shí)間地點(diǎn)更靈活。同時(shí)，其也存在一些不足，比如中之人不宜隨意更換，服裝替換成本較高，布料毛發(fā)等模擬技術(shù)不成熟等。
結合目前大火的ChatGpt，團隊正在研發(fā)數字角色的智能語(yǔ)音對話(huà)。具體流程是采用微軟的文字語(yǔ)音轉換技術(shù)，結合虛幻引擎及ChatGpt，將用戶(hù)語(yǔ)音轉換為文字輸入ChatGpt，再將ChatGpt返回的結果給到虛幻引擎，利用虛幻引擎的Metahuman SDK將文字語(yǔ)音轉換成角色表情動(dòng)畫(huà)，實(shí)現真正的AI人機對話(huà)。
未來(lái)，數字角色應用與價(jià)值絕不止于視頻產(chǎn)品的產(chǎn)出，而是要結合AR、VR、 物聯(lián)網(wǎng)、區塊鏈等技術(shù)，真正實(shí)現 “元宇宙”概念，虛擬形象及虛擬資產(chǎn)會(huì )產(chǎn)生實(shí)際價(jià)值并滲透到社會(huì )的方方面面。
責任編輯：房家輝
分享到：版權聲明：凡注明來(lái)源“流媒體網(wǎng)”的文章，版權均屬流媒體網(wǎng)所有，轉載需注明出處。非本站出處的文章為轉載，觀(guān)點(diǎn)供業(yè)內參考，不代表本站觀(guān)點(diǎn)。文中圖片均來(lái)源于網(wǎng)絡(luò )收集整理，僅供學(xué)習交流，版權歸原作者所有。如涉及侵權，請及時(shí)聯(lián)系我們刪除!關(guān)鍵詞：
