虚拟动力:为虚拟人“绑定”真实的灵魂

2023-09-12 17:14:36   来源:新浪VR

  作为本次新浪VR大巡礼所覆盖厂商的广州虚拟动力网络科技有限公司,致力于成为全国领先的,3D、AI虚拟人领域技术产品提供商及解决方案提供商。虚拟动力2016年成立于广州,专注于3D虚拟人全生态应用的产品技术开发与服务,自主研发全身动作捕捉、面部表情捕捉、人脸扫描、单目动捕、光惯动捕、AI交互等技术底座。

  迄今已上线多款虚拟人应用软件,提供从硬件设备供应、数字人扫描复刻及建模服务、超写实数字人直播平台、数字人短视频实时渲染平台、数字人AI智能交互平台、定制化技术API开发等不同产品线,为元宇宙应用场景提供全维度技术服务

  如何让虚拟人“活”在元宇宙

  据《数字人产业发展趋势报告(2023)》预测,中国AI数字人市场规模到2026年将达102.4亿元,呈现高速增长态势。数字人产业受爆点事件推动而被广泛认知,技术、用户需求、生态建设和标准建立是其底层支撑。随着交互智能技术的发展,数字人正从技术创新走向产业应用,越来越多的智能虚拟主播开始出现在金融、传媒等领域,有效地提高工作效率与质量。

  元宇宙元年后,虚拟人、虚拟直播获得了前所未有的市场关注度,各大平台纷纷涌现不同领域、不同形象的虚拟人人活跃于短视频或直播当中。

  虚拟人制作流程包含了ZBursh雕刻人物模型、maya拓补和展UV,在SP/PS中映射、绘制贴图、Xgen制作毛发,让虚拟人形象更具美型。为了让虚拟人完美融入应用场景,避免虚拟人与场景产生违和感,会在maya中材质解算、灯光调染、模型绑定、表情制作。

  在UE引擎材质调试、骨骼动力学布料、毛发模拟,然后把虚拟人打包入实时虚拟直播软件,品牌就可以直接结合动捕设备实时驱动虚拟人了。

  为了让虚拟人可以行动自如动作灵活的展现在观众们的眼前,主要运用到的还是动作捕捉设备来驱动的实时虚拟人物角色,通过把动作捕捉、表情捕捉、对应的算法同步传输、特技效果等多项专项技术相结合,实时识别互动内容,从而快速做出相应反应。

  动作捕捉技术:光学式和惯性式

  目前市面上主要分为光学动捕设备与惯性动作捕捉设备,这二者有何区别?

  光学动捕设备需要穿紧身衣,衣服上挂满小球,小球可以把光发射到摄像机里,以此来记录运动数据,一个标记点通过2台以上摄像机拍摄测量出标记点地三维空间位置,精度取决于摄像头参数、数量、可捕捉面积,这类型的动捕设备精度高,但使用需要长时间搭建动捕棚,占地面积大,好一点的光学动捕设备需要几十万到百万级。

  另一种常见的动作捕捉设备是惯性动作捕捉设备。这种设备主要是通过在真人演员身上穿戴陀螺仪来记录数据,可以测量转向、运动加速度和位置变化。由于不需要搭建摄像机进行动作捕捉,惯性动捕设备更加便捷和灵活。例如,广州虚拟动力的惯性动作捕捉设备vdsuit full,全身共有27个感应节点,这些节点覆盖了真人身体的重要节点。通过传感器捕捉到关节点的多种变换,然后通过广州虚拟动力自主研发的算法,将这些数据实时分析并转化为人体动作数据。

  相对于光学动捕设备来说,惯性动作捕捉设备穿戴时间短、使用便利,占地面积小,可以适应众多环境,具有较高的性价比。此外,惯性动作捕捉设备vdsuit full还具有精细捕捉手指关节部分的功能,这一点区别于大多数光学动捕设备只能捕捉身体动作需要另外购买手套系统的情况。因此,对于需要日常捕捉使用的人来说,惯性动作捕捉设备相对更加便利和适合常态化使用。

  广州虚拟动力动捕设备vdsuit full,自带动作捕捉系统vdmocap以及C++、UE、Unity、metahuman、Blender、iClone等引擎或三维软件插件。动捕设备vdsuit full基于惯性动作捕捉技术,具有毫米级定位精度,实时获取三维运动轨迹、位置、姿态等数据,可满足使用者多种应用场景。

  动捕技术的一大优势在于它连接了真人和虚拟世界,借助动捕设备,用户可重建和增强虚拟世界的体验感。它能让用户的虚拟分身在元宇宙中和其他人保持自然的交流。根据实时捕捉人物表演的能力,用户可以借助虚拟形象进行实时互动,增强虚拟交互体验,其输出的数字人内容精细度更高、表现力更强、运动动作更加自然。

  我们的观点

  虚拟数字人是构建元宇宙的基础设施,动作捕捉则为虚拟人“绑定”了灵魂,作为其中的一个重要环节,虚拟人的场景化应用有望为数字经济发展注入新动能。尽管实践与理论都已经有了相当的进步,但不少从业者依旧认为,当下的虚拟人仍面临着技术、成本等痛点,行业爆发还要多久,没有谁可以准确预测。或许,等到虚拟数字人精细好看,并且动作灵动、有智慧、有情感,能与人互动,而不只是停留在宣传片里的时候,虚拟数字人才能真正走进用户的生活,迎来爆发。

大巡礼
新浪声明:新浪网登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述

微博

HOT RECOMMEND

关于新浪VR | 论坛社区

Copyright © 1996-2015 SINA Corporation, All Rights Reserved 京ICP证000007  京网文【2017】10231-1157号

北京幻世新科网络科技有限公司 版权所有