隨著(zhù)元宇宙概念的興起,如何不斷優(yōu)化數字人模擬真人情感和行為細節成為行業(yè)重點(diǎn)研究課題。近日,由馬上消費金融股份有限公司(下稱(chēng)“馬上消費”)主辦的2022屆“天馬杯”全國高??萍紕?chuàng )新大賽中的2D數字人驅動(dòng)、3D數字人驅動(dòng)兩大賽道將為提升元宇宙情感體驗提供了更多可能。
據悉,2D數字人驅動(dòng)賽道的賽題為“語(yǔ)音驅動(dòng)數字人口型生成”,為了讓數字人可能基于對文本語(yǔ)音的理解,有更真實(shí)的表情和口型表現力;3D數字人驅動(dòng)賽道聚焦“視頻驅動(dòng)人臉生成”,為了通過(guò)視覺(jué)面部捕捉技術(shù)實(shí)時(shí)驅動(dòng)數字人的面部,讓數字人能真實(shí)還原真人表情,旨在通過(guò)賽題研究逐步探索讓數字人表情更加豐富、細膩,口型與表達內容更加吻合的新路徑。
針對兩大賽題,馬上消費將分別提供真人錄制的音畫(huà)同步短視頻、真人錄制的人臉短視頻,以及相對應的參數供大賽參賽隊伍使用,然后再將參賽結果與原始視頻進(jìn)行對比,差距越小得分可能就越高,進(jìn)入決賽的可能性也就越大。
自元宇宙概念大熱后,隨之而來(lái)的是潮水般涌現的各種數字人,從時(shí)尚娛樂(lè )到文化商業(yè),數字人全面開(kāi)花,依托差異化特質(zhì)在各類(lèi)細分賽道中大顯身手。如以靜態(tài)渲染圖片為主的時(shí)尚類(lèi)數字人AYAYI,虛擬偶像初音未來(lái)、絆愛(ài)等歌舞類(lèi)數字人等。而元宇宙世界對表情和口型提出了更高的要求,十分需要虛擬人“動(dòng)起來(lái)”。
“天馬杯”大賽設置兩大賽道均聚焦視覺(jué)捕捉技術(shù),是以新興的計算機視覺(jué)技術(shù)為底層技術(shù),較光學(xué)捕捉、慣性捕捉而言更簡(jiǎn)單易用、成本更低,加之PBR渲染技術(shù)還可以支撐虛擬人實(shí)時(shí)互動(dòng)。作為人機交互的重要組成部分,表情和口型驅動(dòng)已廣泛用于游戲、電影、人機對話(huà)、虛擬主播;而面部、手勢、肢體動(dòng)作的視覺(jué)捕捉則可以大大降低普通人驅動(dòng)數字人的門(mén)檻。
一直以來(lái),馬上消費持續探索科技前沿,在推動(dòng)數字人產(chǎn)業(yè)發(fā)展方面具有先發(fā)優(yōu)勢。依托技術(shù)、人才、場(chǎng)景等優(yōu)勢,馬上消費打造了數字人創(chuàng )作平臺,通過(guò)輸入文本就可以快速自動(dòng)生成十分逼真的數字人說(shuō)話(huà)視頻;研發(fā)了實(shí)時(shí)交互數字人平臺,具有形象配置、數字人動(dòng)作、表情及話(huà)術(shù)配置、真人驅動(dòng)等功能,帶給用戶(hù)更暖心的服務(wù)體驗。
無(wú)論是從國家政策還是前沿技術(shù)發(fā)展趨勢來(lái)看,元宇宙和數字人賽道將成為眾多機構必爭之地,前景廣闊。這一重要時(shí)刻你也將有機會(huì )見(jiàn)證,還在等什么,趕緊加入“天馬杯”大賽吧。