央视网新晋虚拟小编“背景”大揭秘

正文

请到「今天看啥」查看全文

由此可见，百度在数字虚拟人领域早已积累了丰富的技术和落地经验。

虚拟 AI 助理“度晓晓”歌舞展示

但此次百度推出的数字虚拟小编与以往的虚拟人大有不同。

“三个人像的资产属性不同，驱动方式也会略有不同。”百度智能云相关技术人员解释，百度世界大会上的终端虚拟人是通过真人视频生成的 2D 技术，“度晓晓”虚拟助理则是一个 3D 卡通形象，而这次推出的 虚拟小编采用的是 3D 高精技术，不管是口型预测还是人像驱动技术，相比前两类虚拟人难度更高、技术壁垒更大。

简单地说，数字虚拟小编拥有 高精度写实、模型轻量灵活、驱动方式丰富多样 三大技术优势。

1. 高精度写实：4D 扫描技术+高精度拟真 3D 人像技术

在前期数据采集阶段，百度智能云采用了 4D 扫描技术，能够采集大量高精度训练数据，并通过机器学习进行人像驱动绑定和反复迭代调优。

与此同时，基于百度智能云的影视级的高精拟真 3D 人像制作绑定技术，模型的面部面数至少有1万面，面部材质不仅十分接近真实皮肤的质感，还可以根据相机的距离进行自动优化调节。

此外，模型的全身多边形面数也至少达到10万面，头发面数至少有3万面，面部表情形变基（blendshapes/morph targets）个数至少有240个，身体骨骼节点数至少有100个。

这些技术大大地丰富了虚拟人的细节表现，让表情和身体动作更加地写实和生动。

2. 模型轻量灵活：轻量级 AI 模型，逐字口型准确率超98.5%

虚拟小编采用了一个轻量级的深度神经网络模型，能够实现端到端的表情实时控制，其逐字口型准确率大于98.5%。

此外，虚拟小编还可支持数十种预置微笑、眉眼动作和预置身体动作，并且能根据需要定制增加新的预置动作。

值得一提的是，该模型还具有驱动渲染性能优异、连线延迟低、互动效果良好三大特点。

请到「今天看啥」查看全文