(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221043408 8.2 (22)申请日 2022.04.24 (71)申请人 上海悠络客电子科技股份有限公司 地址 201702 上海市青浦区徐泾镇 华徐公 路888号6幢 (72)发明人 李润华　沈修平　 (74)专利代理 机构 上海领匠知识产权代理有限 公司 31404 专利代理师 陈剑 (51)Int.Cl. G06V 20/52(2022.01) G06V 20/40(2022.01) G06V 40/10(2022.01) G06V 10/62(2022.01) G06V 10/774(2022.01)G06V 10/82(2022.01) G06V 10/80(2022.01) (54)发明名称 多维度检测跟踪的客流统计方法、 装置、 设 备和介质 (57)摘要 本发明提供一种多维度检测跟踪的客流统 计方法、 装置、 设备和介质， 通过 获取目标场景视 频流， 提取有人员存在的帧图像； 基于目标检测 模型对各帧图像进行头部和躯体的多维度检测； 对检测到的头部对象和躯体对象分别进行跟踪 并分配跟踪 ID； 关联对应同一人员对象的头部对 象的检测跟踪数据与躯体对象的检测跟踪数据 并融合为人员对象的检测跟踪数据， 并依据人员 对象的检测跟踪数据更新客流对象列表。 在传统 单维度客流统计的基础上， 通过引入多维度数据 检测与跟踪， 能够精确的检测出人， 而且极大的 增加了对同一人的不同维度检测结果干扰的鲁 棒性， 实现了非常精准的客 流统计。 权利要求书2页 说明书8页 附图4页 CN 114998819 A 2022.09.02 CN 114998819 A 1.一种多维度检测跟踪的客 流统计方法， 其特 征在于， 所述方法包括： 获取目标场景视频流， 提取有人员存在的帧图像； 基于目标检测模型对各帧图像进行头 部和躯体的多维度检测； 对检测到的头 部对象和躯体对象分别进行跟踪并分配跟踪ID； 关联对应同一人员对象的头部对象的检测跟踪数据与躯体对象的检测跟踪数据并融 合为人员对象的检测跟踪数据， 并依据人员对象的检测跟踪数据更新 客流对象列表。 2.根据权利要求1所述的多维度检测跟踪的客流统计方法， 其特征在于， 所述目标检测 模型的获取 方法包括： 获取目标场景的监控视频并提取有人员存在的帧图像； 对所述帧图像中各 人员的头 部与躯干分别进行 标注； 将标注过的帧图像划分为训练数据与评估数据， 基于深度 学习视觉对象检测方法对所 述训练数据进行训练， 并利用所述评估数据进行验证， 以获得训练后的目标检测模型。 3.根据权利要求1所述的多维度检测跟踪的客流统计方法， 其特征在于， 所述关联对应 同一人员对象的头部对 象的检测跟踪数据与躯体对 象的检测跟踪数据并融合为人员对 象 的检测跟踪数据， 包括： 遍历躯体对象列表， 并针对当前躯体对象查找所有与其检测框面积重叠大于预设百分 比的未被关联的头 部对象： 将找到的头部对象与当前躯体对象绑定为一个人员对象， 以存入人员对象列表， 并标 记该头部对象为已关联； 或者， 当未找到头部对象时， 则将当前躯体对象单独成为一个人员 对象并存 入人员对象列表。 4.根据权利要求3所述的多维度检测跟踪的客流统计方法， 其特征在于， 所述将找到的 该头部对 象与当前躯体对 象绑定为一个人员对 象， 以存入人员对 象列表， 并标记该头部对 象为已关联， 包括： 当查找到一个头部对象时， 则将该头部对象与当前躯体对象绑定为一个人员对象， 以 存入人员对象列表， 并标记该头 部对象为已关联； 或者， 当查找到多个头部对象时， 则查找距离当前躯体对象的中心点最近的头部对象， 将头部对 象与当前躯体对 象绑定为一个人员对 象， 以存入人员对 象列表， 并标记选中的该 头部对象为已关联。 5.根据权利要求3所述的多维度检测跟踪的客流统计方法， 其特征在于， 所述关联对应 同一人员对象的头部对 象的检测跟踪数据与躯体对 象的检测跟踪数据并融合为人员对 象 的检测跟踪数据， 包括： 遍历完躯体对象列表后， 遍历头 部对象列表； 依次判断当前头 部对象是否标记为已关联； 若是， 则跳过当前头部对象并判断下一个头部对象； 若否， 则当前头部对象单独成为一 个人员对象并存 入人员对象列表。 6.根据权利要求1所述的多维度检测跟踪的客流统计方法， 其特征在于， 所述依据 人员 对象的检测跟踪数据更新 客流对象列表， 包括： 遍历客流对象列表； 判断人员对象列表中是否有相同的头 部跟踪ID或躯体跟踪ID；权　利　要　求　书 1/2 页 2 CN 114998819 A 2若是， 则将人员对象的状态更新至当前客流对象并标记人员对象已更新； 若否， 则判断 该客流对象是否已超时； 若已超时， 则记录客 流并删除该客 流对象。 7.根据权利要求6述的多维度检测跟踪的客流统计方法， 其特征在于， 所述依据 人员对 象的检测跟踪数据更新 客流对象列表， 包括： 遍历完客 流对象列表后， 遍历人员对象列表； 判断人员对象是否已更新； 若是， 则跳过该对象； 若否， 则为该人员对象创建一个新的客流对象并加入到客流对象 列表组中； 获得更新后的客 流对象列表。 8.一种多维度检测跟踪的客 流统计装置， 其特 征在于， 所述装置包括： 提取模块， 用于获取目标场景视频流， 提取有人员存在的帧图像； 检测模块， 用于基于目标检测模型对各帧图像进行头 部和躯体的多维度检测； 跟踪模块， 用于对检测到的头 部对象和躯体对象分别进行跟踪并分配跟踪ID； 融合模块， 用于关联对应同一人员对象的头部对象的检测跟踪数据与躯体对象的检测 跟踪数据并融合为人员对象的检测跟踪数据， 并依据人员对象的检测跟踪 数据更新客流对 象列表。 9.一种计算机设备， 其特征在于， 所述设备包括： 存储器与处理器； 所述存储器存储有 计算机程序， 所述处 理器执行所述计算机程序实现如权利要求1 ‑7中任意一项所述的方法。 10.一种计算机可读存储介质， 其特征在于， 其上存储有计算机程序， 该计算机程序被 处理器执行时实现如权利要求1 ‑7中任意一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114998819 A 3