(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111678588.2 (22)申请日 2021.12.31 (71)申请人 济南博观智能科技有限公司 地址 250001 山东省济南市高新区新 泺大 街1166号奥盛大厦3号楼17楼 (72)发明人 韩泽　 (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 代理人 刘源 (51)Int.Cl. G06V 40/20(2022.01) G06V 20/40(2022.01) G06K 9/62(2022.01) G06V 10/774(2022.01) (54)发明名称 一种应用于监控视频的行为识别方法、 系统 及相关装置 (57)摘要 本申请提供一种应用于监控视频的行为识 别方法， 包括： 接收待识别视频； 判断训练模型是 否包含所述待识别视频对应的全部动作组； 若 是， 将所述待识别视频输入至训练模型； 在所述 训练模型中， 对 所述待识别视频的帧差进行相应 动作组的动作识别， 确定所述待识别视频包含的 行为动作。 本申以动作组为单位进行相应动作的 识别， 同时以帧差为主要输入数据， 并在训练模 型识别时基于帧差信息对训练集进行数据识别， 从而提高训练模 型的鲁棒性， 降低行为识别过程 中对背景的依赖， 降低动作识别过程中的冗余计 算。 本申请还提供一种应用于监控视频的行为识 别系统、 计算机可读存储介质和服务器， 具有上 述有益效果。 权利要求书2页 说明书9页 附图3页 CN 114333065 A 2022.04.12 CN 114333065 A 1.一种应用于监控视频的行为识别方法， 其特 征在于， 包括： 接收待识别视频； 判断训练模型 是否包含所述待识别视频对应的全部动作组； 若是， 将所述待识别视频输入至训练模型； 在所述训练模型中， 对所述待识别视频的帧差进行相应动作组的动作识别， 确定所述 待识别视频包 含的行为动作。 2.根据权利要求1所述的行为识别方法， 其特征在于， 判断训练模型是否包含待识别的 全部动作组之前， 还 包括： 获取训练视频； 将所述训练视频分割为若干 视频段， 并标注各 所述视频 段中的行为动作； 在所述视频段中以等间隔时间长度提取预设帧图片， 并计算已提取图片中相邻帧图片 之间的帧差； 分别提取 所述图片和所述帧差各自的阶段 特征， 组合并卷积后得到预设全连接层； 根据所述预设全连接层构建所述训练模型。 3.根据权利要求2所述的行为识别方法， 其特征在于， 若所述图片的数量为N， 所述分别 提取所述图片和所述帧差的阶段 特征， 组合并卷积后得到预设全连接层包括： 若N为奇数， 将第(N+1)/2张图片作为目标图片； 若N为偶数， 将第N/2张和N/2+1张图片 作为所述目标图片； 利用第一残差网络提取 所述目标图片的第一阶段 特征； 利用第二残差网络提取 所述帧差的第二阶段 特征； 组合所述第一阶段 特征和所述第二阶段 特征， 得到所述预设全连接层。 4.根据权利要求2或3所述的行为识别方法， 其特征在于， 计算相邻帧图片之间的帧差 之后， 还包括： 将所述目标图片和所述帧差归一 化到预设区间范围内。 5.根据权利要求1所述的行为识别方法， 其特征在于， 若所述训练模型未包含待识别的 全部动作组， 还 包括： 获取新动作组的新动作行为； 将所述新动作行为作为 新任务集添加至训练集； 固定已有任务集的全连接层和分类层， 建立所述新任务集对应的新分类层， 利用预设 学习率更新所述训练模型。 6.根据权利要求2所述的行为识别方法， 其特征在于， 根据 所述预设全连接层构建所述 训练模型包括： 确定预设数量的任务 集； 在所述预设全连接层后接预设数量的全连接层； 每个所述全连接层与 各所述任务集对 应类别的分类层相连接； 将所述任务集作为模型输入， 配置一个混合损 失和预设数量个子任务损 失； 所述混合 损失用于将每 个所述分类层的输出去除最后一维后组合， 并形成输出向量。 7.根据权利要求6所述的行为识别方法， 其特征在于， 配置一个混合损失和预设数量个 子任务损失时， 还 包括： 根据所述任务集的数量和类别分别配置所述子任务损失和所述混合损 失各自的权重权　利　要　求　书 1/2 页 2 CN 114333065 A 2值。 8.一种应用于监控视频的行为识别系统， 其特 征在于， 包括： 接收模块， 用于 接收待识别视频； 判断模块， 用于判断训练模型 是否包含待识别的全部动作组； 输入模块， 用于所述判断模块的判断结果 为是时， 将所述待识别视频输入至训练模型； 识别模块， 用于在所述训练模型中， 对所述待识别视频的帧差进行相应动作组的动作 识别， 得到所述待识别视频包 含的行为动作。 9.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序被 处理器执行时实现如权利要求1 ‑7任一项所述的应用于监控视频的行为识别方法的步骤。 10.一种服务器， 其特征在于， 包括存储器和处理器， 所述存储器中存有计算机程序， 所 述处理器调用所述存储器中的计算机程序时实现如权利要求 1‑7任一项所述的应用于监控 视频的行为识别方法的步骤。权　利　要　求　书 2/2 页 3 CN 114333065 A 3