(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211199216.6 (22)申请日 2022.09.29 (71)申请人 努比亚技术有限公司 地址 518000 广东省深圳市南 山区桃源街 道福光社区留仙大道3370号南山智园 崇文园区2号楼1801 (72)发明人 陈锐聪　 (74)专利代理 机构 深圳协成知识产权代理事务 所(普通合伙) 44458 专利代理师 伍永森 (51)Int.Cl. G06T 13/40(2011.01) G06T 13/20(2011.01) G06V 40/10(2022.01) G06V 40/16(2022.01)G06V 40/20(2022.01) (54)发明名称 一种虚拟人物交互处理方法、 设备及计算机 可读存储介质 (57)摘要 本发明公开了一种虚拟人物交互处理方法、 设备及计算机 可读存储介质， 其中， 该方法包括： 在获取到包含 人脸的图像数据时， 获取所述图像 数据包含的所述人脸的特征点 以及所述特征点 的运动数据； 根据所述特征点的坐标数据和所述 运动数据与所述人脸对应的表情特征以及与所 述表情特征对应的权重值； 通过预设的虚拟引擎 在预设的交互数据库中获取与所述权重值对应 的虚拟人物以及与所述虚拟人物对应的交互参 数； 通过所述虚拟引擎按所述交互参数中的动作 数据控制所述虚拟人物执行与所述表情特征对 应的动作。 实现了一种人性化的虚拟人物交互处 理方案， 使得用户与虚拟人物之间能够进行实 时、 真实且有效地交互， 极大地增强了用户与虚 拟人物之间的交 互体验。 权利要求书2页 说明书10页 附图7页 CN 115471590 A 2022.12.13 CN 115471590 A 1.一种虚拟人物交 互处理方法， 其特 征在于， 所述方法包括： 在获取到包含人脸的图像数据时， 获取所述图像数据包含的所述人脸的特征点以及所 述特征点的运动数据； 根据所述特征点的坐标数据和所述运动数据与所述人脸对应的表情特征以及与所述 表情特征对应的权 重值； 通过预设的虚拟引擎在预设的交互数据库中获取与所述权重值对应的虚拟人物以及 与所述虚拟人物对应的交 互参数； 通过所述虚拟引擎按所述交互参数中的动作数据控制所述虚拟人物执行与所述表情 特征对应的动作， 和/或通过所述交互参数中的语音数据控制所述虚拟人物反馈与所述表 情特征对应的语音。 2.根据权利要求1所述的虚拟人物 交互处理方法， 其特征在于， 所述在获取到包含人脸 的图像数据时， 获取所述图像数据包含的所述人脸的特征点以及所述特征点的运动数据， 包括： 根据所述特 征点在所述人脸的各个面部区域的分布状态对所述 运动数据进行解析； 获取各个所述 面部区域的所述特 征点的初始位置数据。 3.根据权利要求2所述的虚拟人物 交互处理方法， 其特征在于， 所述在获取到包含人脸 的图像数据时， 获取所述图像数据包含的所述人脸的特征点以及所述特征点的运动数据， 还包括： 监测所述运动数据的更新数据， 并根据所述更新数据获取各个所述面部区域的所述特 征点的更新 位置数据； 根据所述初始位置数据和所述更新位置数据确定更新的所述特征点以及更新的所述 特征点的更新 运动数据。 4.根据权利要求3所述的虚拟人物 交互处理方法， 其特征在于， 所述根据 所述特征点的 坐标数据和所述运动数据与所述人脸对应的表情特征以及与所述表情特征对应的权重值， 包括： 根据更新的所述特征点所处的所述面部区域以及所述更新运动数据确定所述人脸的 表情类型； 在确定所述更新运动数据的位移数据和/或角度数据超过所述表情类型的预设阈值 时， 获取所述人脸具 备与所述表情类型对应的所述表情特 征。 5.根据权利要求4所述的虚拟人物 交互处理方法， 其特征在于， 所述根据 所述特征点的 坐标数据和所述运动数据与所述人脸对应的表情特征以及与所述表情特征对应的权重值， 还包括： 获取与所述表情类型对应的表情参数； 根据所述表情参数、 所述 位移数据和/或所述角度数据确定所述权 重值。 6.根据权利要求5所述的虚拟人物 交互处理方法， 其特征在于， 所述通过预设的虚拟引 擎在预设的交互数据库中获取与所述权重值对应的虚拟人物以及与所述虚拟人物对应的 交互参数， 包括： 创建包含所述虚拟人物、 与所述虚拟人物对应的模型骨骼点、 与所述模型骨骼点对应 的交互参数、 以及与所述交 互参数对应的所述权 重值的所述交 互数据库；权　利　要　求　书 1/2 页 2 CN 115471590 A 2在所述交互数据库中获取与 所述权重值对应的所述虚拟人物、 以及用于控制所述模型 骨骼点执 行相关运动的所述交 互参数。 7.根据权利要求6所述的虚拟人物 交互处理方法， 其特征在于， 所述通过所述虚拟引擎 按所述交互参数中的动作数据控制所述虚拟人物执行与所述表情特征对应的动作， 和/或 通过所述交互参数中的语音数据控制所述虚拟人物反馈与所述表情特征对应的语音， 包 括： 在执行所述动作和/或反馈所述语音的过程中， 监测所述人脸的更新的所述权重值以 及所述人脸对应的语音数据； 根据更新的所述权重值和/或语音数据与执行的所述动作和/或反馈的所述语音的相 互关系， 更新所述交 互数据库。 8.根据权利要求7所述的虚拟人物 交互处理方法， 其特征在于， 所述通过所述虚拟引擎 按所述交互参数中的动作数据控制所述虚拟人物执行与所述表情特征对应的动作， 和/或 通过所述交互参数中的语音数据控制所述虚拟人物反馈与所述表情特征对应的语音， 还包 括： 根据更新的所述权 重值和/或语音数据调整所述虚拟人物和/或所述交 互参数； 根据调整后的所述虚拟人物和/或调整后的所述交互参数更新执行的所述动作和/或 反馈的所述语音。 9.一种虚拟人物 交互处理设备， 其特征在于， 所述设备包括存储器、 处理器及存储在所 述存储器上并可在所述处理器上运行的计算机程序， 所述计算机程序被所述处理器执行时 实现如权利要求1至8中任一项所述的虚拟人物交 互处理方法的步骤。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储有虚拟人 物交互处理程序， 所述虚拟人物交互处理程序被处理器执行时实现如权利要求 1至8中任一 项所述的虚拟人物交 互处理方法的步骤。权　利　要　求　书 2/2 页 3 CN 115471590 A 3