说明:收录25万 73个行业的国家标准 支持批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210541723.7 (22)申请日 2022.05.17 (71)申请人 网易 (杭州) 网络有限公司 地址 310056 浙江省杭州市滨江区长河街 道网商路59 9号4幢7层 (72)发明人 孙依娜 戴威 高峰  (74)专利代理 机构 北京风雅颂专利代理有限公 司 11403 专利代理师 李弘 (51)Int.Cl. G06T 7/00(2017.01) G06T 7/73(2017.01) (54)发明名称 动作迁移模型的评价方法、 装置、 电子设备 及存储介质 (57)摘要 本申请提供了一种动作迁移模型的评价方 法、 装置、 电子设备及存储介质, 该方法包括将获 取的动作视频输入到待评价的动作迁移模型中, 得到目标视频; 获取所述动作视频中多个第一骨 骼点对应的第一组位置信息, 以及所述目标视频 中多个第二骨骼点对应的第二组位置信息, 其 中, 所述第二骨骼点为所述目标视频中与所述第 一骨骼点对应的骨骼点; 基于所述第一组位置信 息与所述第二组位置信息对所述动作迁移模型 的动作迁移效果进行评价, 从而可以客观准确的 对动作迁移模型的动作迁移效果进行评价。 权利要求书2页 说明书10页 附图3页 CN 115035042 A 2022.09.09 CN 115035042 A 1.一种动作迁移模型的评价方法, 其特 征在于, 包括: 获取动作视频, 并将所述动作视频输入到待评价的动作迁移模型中, 得到目标视频; 获取所述动作视频中多个第 一骨骼点对应的第 一组位置信 息, 以及所述目标视频中多 个第二骨骼点对应的第二组位置信息, 其中, 所述第二骨骼点为所述 目标视频中与所述第 一骨骼点对应的骨骼点; 基于所述第一组位置信息与所述第二组位置信息对所述动作迁移模型的动作迁移效 果进行评价。 2.根据权利要求1所述的方法, 其特征在于, 基于所述第 一组位置信 息与所述第 二组位 置信息对所述动作迁移模型的动作迁移效果进行评价, 包括: 基于所述第一组位置信息及所述第二组位置信息确定每个所述第一骨骼点与其对应 的所述第二骨骼点的位移差; 基于所述 位移差对所述动作迁移模型的动作迁移效果进行评价。 3.根据权利要求1所述的方法, 其特征在于, 所述基于所述第 一组位置信 息与所述第二 组位置信息对所述动作迁移模型的动作迁移效果进行评价之前, 所述方法还 包括: 对所述第一组位置信息和/或所述第二组位置信息分别进行归一 化处理。 4.根据权利要求2所述的方法, 其特征在于, 所述基于所述位移差对所述动作迁移模型 的动作迁移效果进行评价, 包括: 确定目标骨骼点中所述位移差小于预设距离的骨骼点的第 一数量, 并基于所述第 一数 量与所述目标骨骼点的总数量对所述动作迁移模型的动作迁移效果进行评价; 其中, 所述目标骨骼点 为第一骨骼点或第二骨骼点。 5.根据权利要求2所述的方法, 其特征在于, 基于所述位移差对所述动作迁移模型的动 作迁移效果进行评价, 包括: 确定每个所述第 一骨骼点及其对应的所述第 二骨骼点对应的预设权重, 基于所述位移 差以及所述预设权 重对所述动作迁移模型的动作迁移效果进行评价。 6.根据权利要求2所述的方法, 其特征在于, 所述基于所述位移差对所述动作迁移模型 的动作迁移效果进行评价, 具体包括: 在预设距离范围内选取多个目标距离; 针对每个所述目标距离, 确定目标骨骼点中所述位移差小于该目标距离的骨骼点的第 二数量; 其中, 所述目标骨骼点 为第一骨骼点或第二骨骼点; 基于所有的所述第二数量以及所述目标骨骼点的总数量对所述动作迁移模型的动作 迁移效果进行评价。 7.根据权利要求6所述的方法, 其特征在于, 基于所有的所述第 二数量以及所述目标骨 骼点的总数量对所述动作迁移模型的动作迁移效果进行评价, 具体包括: 基于所述多个目标距离, 以及所述每个目标距离对应的所述第 二数量与所述第 二骨骼 点的总数量的比值, 在坐标系中绘制曲线; 其中, 所述曲线的横轴表示距离, 所述 曲线的纵 轴表示比值; 基于所述曲线对所述动作迁移模型的动作迁移效果进行评价。 8.根据权利要求7所述的方法, 其特征在于, 基于所述曲线对所述动作迁移模型的动作 迁移效果进行评价, 具体包括:权 利 要 求 书 1/2 页 2 CN 115035042 A 2基于所述曲线与所述坐标系横轴的组成的图形的面积, 对所述动作迁移模型的动作迁 移效果进行评价。 9.根据权利要求1所述的方法, 其特征在于, 在将所述动作视频输入到待评价的动作迁 移模型之前, 所述方法还 包括: 对所述动作视频进行预处理, 以使所述动作迁移模型能够准确的识别所述动作视频中 的待迁移动作; 其中, 所述预处理包括以下中的至少一项: 视频剪辑、 分辨率调整、 帧率调整以及背景 替换。 10.根据权利要求1所述的方法, 其特征在于, 在基于所述第一组位置信息与所述第二 组位置信息对所述动作迁移模型的动作迁移效果进行评价之后, 所述方法还 包括: 在所述动作视频中增加干扰元素, 将增加干扰元素后的所述动作视频输入到待评价的 动作迁移模型中, 并重新对所述动作迁移模型的动作迁移效果进行评价。 11.根据权利要求1所述的方法, 其特征在于, 获取所述动作视频中多个第一骨骼点对 应的第一组位置信息, 以及所述 目标视频中多个第二骨骼点对应的第二组位置信息, 具体 包括: 通过MediaPipe姿态估计算法获取所述动作视频中多个第一骨骼点对应的第一组位置 信息, 以及所述目标视频中多个第二骨骼点对应的第二组位置信息 。 12.一种动作迁移模型的评价装置, 其特 征在于, 包括: 输入模块, 获取动作视频, 并将所述动作视频输入到待评价的动作迁移模型中, 得到目 标视频; 获取模块, 获取所述动作视频中多个第一骨骼点对应的第一组位置信息, 以及所述目 标视频中多个第二骨骼点对应的第二组位置信息, 其中, 所述第二骨骼点为所述 目标视频 中与所述第一骨骼点对应的骨骼点; 评价模块, 基于所述第 一组位置信 息与所述第二组位置信 息对所述动作迁移模型的动 作迁移效果进行评价。 13.一种电子设备, 其特征在于, 包括存储器、 处理器及存储在所述存储器上并可由所 述处理器执行的计算机程序, 所述处理器执行所述程序时实现如权利要求1至11中任意一 项所述的方法。 14.一种非暂态计算机可读存储介质, 其特征在于, 所述非暂态计算机可读存储介质存 储计算机指令, 所述计算机指令用于使计算机执行根据权利要求1至11中任一项所述的方 法。权 利 要 求 书 2/2 页 3 CN 115035042 A 3

.PDF文档 专利 动作迁移模型的评价方法、装置、电子设备及存储介质

文档预览
中文文档 16 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 动作迁移模型的评价方法、装置、电子设备及存储介质 第 1 页 专利 动作迁移模型的评价方法、装置、电子设备及存储介质 第 2 页 专利 动作迁移模型的评价方法、装置、电子设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 09:50:22上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。