随着元宇宙概念的大热,以及疫情叠加下人们对数字生活需求的增加,虚拟数字人的发展步入了快车道,出现了很多类似于华智冰、柳夜熙、翎Ling等超写实虚拟数字人。
而人与这些虚拟数字人大的区别是有感情、能够体会到喜怒哀乐,且能够把喜怒哀乐实时地通过语言、表情等来体现。而虚拟数字人不具备自然表达的能力,这使得虚拟数字人被吐槽一眼假、不够真实。
如果想为虚拟数字人引入接近“人”的喜怒哀乐,且具有实时的交互能力,不仅要进行配音、口形适配,还要考虑当前的语态、语境,进行面部表情分离,并重新渲染面部表情。
过去常通过面捕技术来驱动虚拟数字人面部与嘴型的变化,整个环节非常复杂,时间、人力、物力成本巨大。开发者和内容创作者亟需成本更低、开发更简便的工具来降低虚拟数字人的制作门槛和成本。