山东智能教育平台下载(山东智慧教育平台)
在这个激烈的行业竞争中,伏羲虚拟人的差异化竞争优势在哪?在产品负责人老杨看来,与同行相比,网易伏羲虚拟人的差异化主要集中在产品和业务场景两大层面。
首先是产品层面,伏羲虚拟人以3D虚拟人为主要类型,同时更关注虚拟人的算法效果表现力和实时渲染表现力,而不是追求极致的轻量化。例如,针对虚拟人的3D表情合成算法,要把声音、文字转化为虚拟人的动画,且衔接流畅、自然细腻,这并不容易。
因此,团队会尤其关注人类说话时情感状态、语速、音量等变化对口型、面部表情的影响,并观看了大量影视表演作品,去学习专业演员的表演习惯。通过对深度学习的钻研,最终团队研究的“表情动画参数生成技术”被成功应用于游戏剧情动画制作、虚拟助手等场景中。
在虚拟人表情表现力上,团队也持续思考如何进一步优化,例如用机器学习来判别合成表情的自然度。伏羲虚拟人的算法专家创新性提出了表情编码的研究,这项工作已连续两年获得了AI顶会CVPR2022、ICCV2021人脸表情国际大赛双料冠军,未来表情编码也会加入到虚拟人表情相关的算法中,打造更自然、生动的表情效果。
针对视效渲染效果,伏羲虚拟人团队认为,未来的虚拟人应用一定是实时渲染(可实时交互)、高渲染质量(高沉浸感)的,所以团队研发均基于实时渲染引擎进行,并深入到材质重建算法中,通过充分参考真实的发丝、布料材质参数,大大提升了虚拟人渲染效果的逼真度。
其次在业务场景层面,伏羲虚拟人核心关注自身熟悉的游戏和文娱领域,并在这些领域进行垂直探索。同时积极开放,与深耕其他行业领域的B端厂商开展深度合作,在其熟知的应用场景中,提供虚拟人技术赋能。
赋能虚拟直播厂商,打造Vtuber直播工具
04、元宇宙风口下,伏羲虚拟人面向未来的抢滩战术不可否认,近两年“元宇宙”概念的爆发更加刺激了虚拟数字人行业的发展,不少人都将虚拟数字人视作切入元宇宙赛道的新风口。不过,虚拟人作为一个跨多学科的交叉领域,要真正地面向未来元宇宙,走进人们的元宇宙生活,还需要在技术上实现一系列突破。
“现阶段,虚拟人是以不同形态出现在各个场景中,如线上视频、线下交互等,不同场景所注重的效果不同。”烈风解释,例如目前视频类内容更注重整体的剧情编导设计、视效质量,交互性应用更注重交互的实时高效。面对元宇宙的风口,未来也会有更多元、效果要求更融合的虚拟化人内容需求。
接下来,伏羲虚拟人团队将更专注于实时互动虚拟内容上,进一步提升在实时交互效果品质、拓展业务生态。其中,针对用户打造虚拟世界中的分身的场景,团队将持续研发基于Mesh结构的高自由度捏人、高质量&低延时的音色转换等技术,让C端用户能够从外观形象、声音音色层面,创建更高自由度、更好表现力的虚拟身份。
网易伏羲开发的智能捏脸系统,用户上传一张照片就能打造虚拟分身
在业务模式上,为了加快生态拓展合作,支持企业已有3D数字资产、或是支持UGC资产导入,伏羲虚拟人团队还将推出自动绑定、自动重定向等能力,并公开伏羲虚拟人美术标准,提高各类不同虚拟形象的对接效率。
从应用角度看,虚拟人落地场景覆盖toB、toC、toG等广泛领域,但不管面向哪个赛道,整个市场核心竞争的始终是串联整个技术工具流程制作链路的工业化和成熟度,这是实现产品快速交付和可靠性的重要保障。
未来网易伏羲将以2B业务模式为核心,持续关注虚拟人标准化技术方案的开发,“我们希望积极拓展行业生态伙伴,开展深度合作,共创虚拟人应用落地,合作共赢。”老杨说。