(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210455823.8 (22)申请日 2022.04.27 (71)申请人 广州虎牙科技有限公司 地址 511495 广东省广州市番禺区钟村街 （汉溪商业中心） 泽溪街13号13 01 (72)发明人 林哲　 (74)专利代理 机构 北京博思佳知识产权代理有 限公司 1 1415 专利代理师 陈雨柔 (51)Int.Cl. G06V 40/20(2022.01) G06V 20/40(2022.01) G06V 10/80(2022.01) G06V 10/764(2022.01) G06V 10/82(2022.01) (54)发明名称 动态姿势 识别方法、 装置、 设备及存 储介质 (57)摘要 本申请提供一种动态姿势识别方法、 装置、 设备及存储介质。 所述方法包括： 确定待识别的 目标视频帧； 获取包含所述目标视频帧及其前N 帧视频帧中人体的关节角度的关节序列； 以及， 根据所述目标视频帧及其前N帧视频帧的拍摄时 序， 确定所述关节序列中各个视频帧的关节角度 对应的排列顺序信息； N为大于0的整数； 利用融 合有所述排列顺序信息的关节序列进行动态姿 势识别， 确定所述目标视频帧中的人体姿势。 有 利于提高动态姿势的识别准确性。 权利要求书2页 说明书12页 附图5页 CN 114821787 A 2022.07.29 CN 114821787 A 1.一种动态姿势 识别方法， 其特 征在于， 包括： 确定待识别的目标视频帧； 获取包含所述目标视频帧及其前N帧视频帧中人体的关节角度的关节序列； 以及， 根据 所述目标视频帧及其前N帧视频帧的拍摄时序， 确定所述关节序列中各个视频帧的关节角 度对应的排列顺序信息； N 为大于0的整数； 利用融合有所述排列顺序信 息的关节序列进行动态姿势识别， 确定所述目标视频帧中 的人体姿势。 2.根据权利要求1所述的方法， 其特征在于， 所述利用融合有所述排列顺序信 息的关节 序列进行动态姿势 识别， 包括： 将所述关节序列中各个视频帧的关节角度及其对应的排列顺序信息进行拼接； 将拼接后的序列输入预先建立的姿势分类器中， 通过所述姿势分类器对所述拼接后的 序列进行动态姿势 识别， 获得 所述目标视频帧中的人体姿势。 3.根据权利要求1所述的方法， 其特征在于， 所述根据所述目标视频帧及其前N帧视频 帧的拍摄时序， 确定所述关节序列中各个视频帧的关节角度对应的排列顺序信息， 包括： 根据所述目标视频帧及其前N帧视频帧的拍摄时序、 和所述关节角度的值域， 确定所述 关节序列中各个视频帧的关节角度对应的排列顺序信息； 其中， 所述排列顺序信息的值域 与所述关节角度的值 域相同。 4.根据权利要求2或3所述的方法， 其特征在于， 所述姿势分类器基于若干携带有姿势 标签的样本训练得到， 所述样本为融合有所述排列顺序信息的关节序列； 所述关节序列为 使用M帧视频帧进行人体关节点检测及关节角度预测得到， M为大于1的整数， 所述M帧视频 帧对应有 姿势标签。 5.根据权利要求1至3任意一项所述的方法， 其特征在于， 在所述确定所述目标视频帧 中的人体姿势之后， 还 包括： 若所述目标视频帧中的人体姿势与所述目标视频帧的前一视频帧输出的人体姿势相 同， 输出所述目标视频帧中的人体姿势； 若所述目标视频帧中的人体姿势与所述目标视频帧的前一视频帧输出的人体姿势不 同， 输出所述目标视频帧的前一视频帧的输出 结果。 6.根据权利要求5所述的方法， 其特 征在于， 还 包括： 若所述目标视频帧中的人体姿势与所述目标视频帧的前一视频帧输出的人体姿势不 同， 将所述目标视频帧存 入缓冲区； 若所述缓冲区满且所述缓冲区中的所有视频帧中的人体姿势相同， 清 空所述缓冲区并 输出所述目标视频帧中的人体姿势； 否则， 输出 所述目标视频帧的前一视频帧的输出 结果； 若所述目标视频帧中人体的姿势与 所述目标视频帧的前一视频帧中人体的姿势不同， 清空所述缓冲区。 7.根据权利要求6所述的方法， 其特征在于， 所述缓冲区最大缓存数量与所述关节序列 对应的视频帧数量呈正相关 关系。 8.根据权利要求1所述的方法， 其特征在于， 在所述获取待识别的目标视频帧之后， 还 包括： 对所述目标视频帧进行 人体关键点检测， 获取 人体二维关键点数据；权　利　要　求　书 1/2 页 2 CN 114821787 A 2将所述人体二维关键点数据输入预先建立的关节角度预测模型中， 通过所述关节角度 预测模型对所述人体二维关键点数据进行关节角度预测， 获得所述目标视频帧中人体的关 节角度。 9.根据权利要求8所述的方法， 其特征在于， 所述关节角度 预测模型基于若干携带有角 度标签的二维关键点样本数据训练得到； 其中， 至少部分携带有角度标签的二维关键点样本数据通过以下 方式得到： 获取惯性动作捕捉系统在用户做指定动态姿势时采集到的三维关键点数据及其对应 的关节角度； 根据预先确定的惯性动作捕捉系统与相机之间的位置关系， 将所述三维关键点数据投 影到相机平面， 得到二维关键点数据； 基于二维关键点数据和所述三维关键点数据对应的关节角度获得携带有角度标签的 二维关键点样本数据。 10.一种动态姿势 识别装置， 其特 征在于， 包括： 视频帧确定模块， 用于确定待识别的目标视频帧； 关节信息获取模块， 用于获取包含所述目标视频帧及其前N帧视频帧中人体的关节角 度的关节序列； 以及， 根据所述 目标视频帧及其前N帧视频帧的拍摄时序， 确定所述关节序 列中各个视频帧的关节角度对应的排列顺序信息； N 为大于0的整数； 动态姿势识别模块， 用于利用融合有所述排列顺序信息的关节序列进行动态姿势识 别， 确定所述目标视频帧中的人体姿势。 11.一种电子设备， 其特征在于， 包括： 存储器、 处理器及存储在存储器上并可在处理器 上运行的可执行指 令， 所述处理器执行所述可执行指令时实现如权利要求 1至9任意一项 所 述方法中的步骤。 12.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述程序被处理 器执行时实现权利要求1至9任意 一项所述方法的步骤。权　利　要　求　书 2/2 页 3 CN 114821787 A 3