(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210797502.6 (22)申请日 2022.07.06 (71)申请人 北京字跳网络技 术有限公司 地址 100190 北京市海淀区紫金 数码园4号 楼2层0207 (72)发明人 王思元　李亦彤　徐力有　 (74)专利代理 机构 北京远智汇知识产权代理有 限公司 1 1659 专利代理师 刘茜阳 (51)Int.Cl. G06T 13/40(2011.01) G06T 7/33(2017.01) G06T 7/73(2017.01) (54)发明名称 图像处理方法、 装置、 电子设备及存 储介质 (57)摘要 本公开实施例提供了一种图像处理方法、 装 置、 电子设备及存储介质， 该方法包括： 确定待处 理视频帧中目标部位的待配准骨骼链和预设骨 骼链； 根据所述待配准腕部骨骼点的第一位姿信 息和预设腕部骨骼点的第二位姿信息， 确定所述 待配准腕部骨骼点的腕部状态信息； 依据所述腕 部状态信息、 待配准指部骨骼点的第三位姿信息 以及所述预设指部骨骼点的第四位姿信息， 确定 所述待配准指部骨骼点的指部状态信息； 基于所 述腕部状态信息和指部状态信息， 在所述待处理 视频帧中显示所述目标部位。 本公开实施例实现 了在不穿模的情况下， 提高目标部位于显示界面 中显示的真实性， 进 而提高用户体验度的效果。 权利要求书3页 说明书21页 附图7页 CN 115082604 A 2022.09.20 CN 115082604 A 1.一种图像处 理方法， 其特 征在于， 包括： 确定待处理视频帧中目标部位的待配准骨骼链和预设骨骼链； 其中， 所述待配准骨骼 链上包括待配准腕部骨骼点和待配准指部骨骼 点， 所述预设骨骼链上包括预设腕部骨骼 点 和预设指部骨骼点； 根据所述待配准腕部骨骼点的第 一位姿信 息和预设腕部骨骼点的第 二位姿信 息， 确定 所述待配准腕部骨骼点的腕部状态信息； 其中， 所述腕部状态信息包括腕部旋转信息和腕 部位姿信息； 依据所述腕部状态信 息、 待配准指部骨骼点的第 三位姿信 息以及所述预设指部骨骼点 的第四位姿信息， 确定所述待配准指 部骨骼点的指 部状态信息； 其中， 所述指 部状态信息包 括指部旋转信息和指部位姿信息； 基于所述腕部状态信息和指部状态信息， 在所述待处 理视频帧中显示所述目标部位。 2.根据权利要求1所述的方法， 其特征在于， 所述根据所述待配准腕部骨骼点的第 一位 姿信息和预设腕部骨骼点的第二位姿信息， 确定所述待配准腕部骨骼点的腕部状态信息， 包括： 根据所述待配准腕部骨骼点的第一位姿信息和与所述待配准腕部骨骼点直接关联的 至少一个待配准指部骨骼点的第三 位姿信息， 确定第一旋转信息； 根据所述预设腕部骨骼点的第二位姿信息和与所述预设腕部骨骼点直接关联的至少 一个预设指部骨骼点的第四位姿信息， 确定第二旋转信息； 基于所述第 一旋转信 息和所述第 二旋转信 息， 确定所述待配准腕部骨骼点的腕部状态 信息。 3.根据权利要求2所述的方法， 其特征在于， 所述基于所述第 一旋转信 息和所述第 二旋 转信息， 确定所述待配准腕部骨骼点的腕部状态信息， 包括： 根据所述第二旋转信息和所述第一旋转信息的逆， 确定对齐 变换矩阵； 基于所述对齐变换矩阵和所述待配准腕部骨骼点的第 一位姿信 息， 确定所述腕部状态 信息。 4.根据权利要求3所述的方法， 其特征在于， 基于所述对齐变换矩阵和所述待配准腕部 骨骼点的第一 位姿信息， 确定所述腕部状态信息中的腕部位姿信息， 包括： 基于第二 位姿信息中的位置信息， 确定所述腕部位姿信息中的位置信息； 基于所述对齐变换矩阵和所述第 一位姿信 息中的位置信 息， 确定所述腕部位姿信 息中 的姿态信息 。 5.根据权利要求1所述的方法， 其特征在于， 在所述依据所述腕部状态信息、 待配准指 部骨骼点的第三位姿信息以及所述预设指 部骨骼点的第四位姿信息， 确定所述待配准指部 骨骼点的指部状态信息之前， 还 包括： 调取预先设置的待配准腕部骨骼点和待配准指部骨骼点的第 一依赖信 息， 以及预设腕 部骨骼点和预设指部骨骼点的第二依赖信息； 其中， 所述依赖信息包括骨骼链中位于同一 分支上至少一个指部骨骼点所直接依赖的指部骨骼点或腕部骨骼点； 依据所述第 一依赖信 息和所述第 二依赖信 息， 确定对所述待配准指部骨骼点和所述预 设指部骨骼 点的处理优先级， 以基于所述处理优先级依次确定所述待配准指部骨骼 点的指 部状态信息 。权　利　要　求　书 1/3 页 2 CN 115082604 A 26.根据权利要求5所述的方法， 其特征在于， 所述依据所述腕部状态信息、 待配准指部 骨骼点的第三位姿信息以及所述预设指部骨骼 点的第四位姿信息， 确定所述待配准指 部骨 骼点的指部状态信息， 包括： 确定至少一个指部骨骼点组； 其中， 所述指部骨骼点组中包括位于相应骨骼链分支且 所述处理优先级相同的预设指部骨骼点和待配准指部骨骼点； 对于所述至少一个指部骨骼点组， 根据所述处理优先级， 确定当前指部骨骼点组所依 赖的前依赖骨骼点组和后依赖骨骼点组； 其中， 所述前依赖骨骼点组包括腕部骨骼点组或 指部骨骼点组； 若所述前依赖骨骼点组为腕部骨骼点组， 则根据所述腕部状态信息中的腕部旋转信 息、 所述当前指部骨骼点组中的位姿信息以及所述后依赖骨骼点组中的位姿信息， 确定所 述当前指部骨骼点组中待配准指部骨骼点的指部状态信息 。 7.根据权利要求6所述的方法， 其特 征在于， 还 包括： 若所述前依赖骨骼点组为指部骨骼点组， 则根据 所述前依赖骨骼点组中待配准骨骼点 的指部状态信息中的目标指部旋转信息、 所述当前指 部骨骼点组中的位姿信息以及所述后 依赖骨骼点组的位姿信息， 确定所述当前指部骨骼 点组中待配准指部骨骼 点的指部状态信 息。 8.根据权利要求7所述的方法， 其特征在于， 所述根据所述前依赖骨骼点组中待配准骨 骼点的指 部状态信息中的目标指部旋转信息、 所述当前指 部骨骼点组中的位姿信息以及所 述后依赖骨骼点组的位姿信息， 确定所述当前指 部骨骼点组中待配准指部骨骼 点的指部状 态信息， 包括： 根据所述目标指部旋转信 息、 所述当前指部骨骼点组中的第 三位姿信 息和第四位姿信 息、 以及所述后依赖骨骼点组中的第三位姿信息和第四位姿信息， 确定当前指部骨骼点组 中待配准骨骼点的当前指部 旋转信息； 基于所述目标指部旋转信 息和所述当前指部旋转信 息， 确定当前指部骨骼点组中待配 准骨骼点的当前指部位姿信息； 基于所述当前指部旋转信 息和所述当前指部位姿信 息， 确定所述待配准骨骼点的指部 状态信息 。 9.根据权利要求8所述的方法， 其特征在于， 所述根据所述目标指部旋转信息、 所述当 前指部骨骼 点组中的第三位姿信息和 第四位姿信息、 以及所述后依赖骨骼 点组中的第三位 姿信息和第四位姿信息， 确定当前指部骨骼点组中待配准骨骼点的当前指部旋转信息， 包 括： 根据所述当前指部骨骼点组中的第三位姿信息和所述后依赖骨骼点组中的第三位姿 信息， 确定第三旋转向量； 以及， 根据所述当前指部骨骼点组中的第四位姿信息和所述后依赖骨骼点组中的第四位姿 信息， 确定第四旋转向量； 根据所述第 三旋转向量和第四旋转向量， 确定所述当前指部骨骼点组中的待配准指部 骨骼点旋转至相应预设指部骨骼点的旋转矩阵； 基于所述旋转矩阵和所述目标指部旋转信 息， 确定当前指部骨骼点组中待配准骨骼点 的当前指部 旋转信息 。权　利　要　求　书 2/3 页 3 CN 115082604 A 3