(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221047478 8.4 (22)申请日 2022.04.29 (71)申请人 上海商汤科技 开发有限公司 地址 201306 上海市中国 （上海） 自由贸易 试验区临港新片区环湖西二路888号C 楼 (72)发明人 李帆　祝胜男　李艳民　闵旺华　 赵思远　成功　 (74)专利代理 机构 北京博思佳知识产权代理有 限公司 1 1415 专利代理师 苑晨浩 (51)Int.Cl. G06V 20/40(2022.01) G06T 7/00(2017.01) G06T 7/13(2017.01)G06T 7/73(2017.01) G06V 10/764(2022.01) G06V 10/82(2022.01) G06K 9/62(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 动作检测方法、 装置、 电子设备及存 储介质 (57)摘要 本公开涉及一种动作检测方法、 装置、 电子 设备及存储介质， 所述动作检测方法包括： 获取 图像采集设备针对液压支架连续采集的多帧待 检测图像； 对所述多帧待检测图像进行识别处 理， 得到每帧待检测图像中， 所述液压支架的底 座前端边缘线和伸缩 杆的侧边边缘线； 根据所述 每帧待检测图像中， 所述液压支架的底座前端边 缘线和伸缩 杆的侧边边缘线， 确定所述液压支架 的动作状态， 其中， 所述动作状态包括移架 状态、 推溜状态或静止状态。 由于液压支架的动作状态 是根据多帧待检测图像中识别到的底座前端边 缘线和伸缩 杆的侧边边缘线来确定的， 因此较为 精度较高、 效率较高、 自动化程度较高， 提高了采 煤过程的效率和安全性， 避免出现安全 事故。 权利要求书2页 说明书10页 附图4页 CN 114743149 A 2022.07.12 CN 114743149 A 1.一种动作检测方法， 其特 征在于， 包括： 获取图像采集设备针对液压支 架连续采集的多帧待检测图像； 对所述多帧待检测图像进行识别处理， 得到每帧待检测图像中， 所述液压支架 的底座 前端边缘线和伸缩杆的侧边 边缘线； 根据所述每帧待检测图像中， 所述液压支架的底座前端边缘线和伸缩杆的侧边边缘 线， 确定所述液压支架的动作状态， 其中， 所述动作状态包括移架状态、 推溜状态或静止状 态。 2.根据权利要求1所述的动作检测方法， 其特征在于， 所述对所述多帧待检测图像进行 识别处理， 得到每 帧待检测图像中， 所述液压支架的底座前端边缘线和伸缩杆的侧 边边缘 线， 包括： 对所述待检测图像进行分割处理， 得到存在所述底座前端边缘线的第 一分割图块和存 在所述伸缩杆的侧边 边缘线的第二分割图块； 对所述第一分割图块进行直线拟合处理， 得到用于表示所述底座前端边缘线的第 一线 段， 并对所述第二分割图块进行直线拟合处理， 得到用于表示所述伸缩杆的侧 边边缘线的 第二线段； 根据所述第一分割图像在所述待检测图像中的位置和所述第一线段在所述第一分割 图块的位置， 在所述待检测图像中确定所述底座前端边缘线， 并根据所述第二分割图像在 所述待检测图像中的位置和所述第二线段在所述第二分割图块的位置， 在所述待检测图像 中确定所述伸缩杆的侧边 边缘线。 3.根据权利要求1所述的动作检测方法， 其特征在于， 根据所述每帧待检测图像中， 所 述液压支架的底座前端边缘线和伸缩杆 的侧边边缘线， 确定所述液压支架的动作状态， 包 括： 在所述每帧待检测图像中， 所述液压支架 的底座前端边缘线向预设方向移动， 且所述 伸缩杆的侧边 边缘线保持静止的情况 下， 确定所述液压支 架的动作状态为移 架状态； 在所述每帧待检测图像中， 所述液压支架 的底座前端边缘线保持静止， 且所述伸缩杆 的侧边边缘线向预设方向延长的情况 下， 确定所述液压支 架的动作状态为推溜状态； 在所述每帧待检测图像中， 所述液压支架 的底座前端边缘线保持静止， 且所述伸缩杆 的侧边边缘线保持静止的情况 下， 确定所述液压支 架的动作状态为静止状态。 4.根据权利要求1所述的动作检测方法， 其特征在于， 所述待检测图像 内存在多个所述 液压支架； 所述对所述多帧待检测图像进行识别处理， 得到每帧待检测图像中， 所述液压支架 的 底座前端边 缘线和伸缩杆的侧边 边缘线， 包括： 对所述多帧待检测图像进行识别处理， 得到每帧待检测图像中， 每个所述液压支架 的 底座前端边 缘线和伸缩杆的侧边 边缘线； 所述根据 所述每帧待检测图像中， 所述液压支架的底座前端边缘线和伸缩杆的侧边边 缘线， 确定所述液压支 架的动作状态， 包括： 根据所述每帧待检测图像中， 所述液压支架的底座前端边缘线和伸缩杆的侧边边缘 线， 确定所述待检测图像中每 个所述液压支 架的动作状态。 5.根据权利要求 4所述的动作检测方法， 其特 征在于， 还 包括：权　利　要　求　书 1/2 页 2 CN 114743149 A 2确定所述待检测图像中每 个所述液压支 架的标识； 在所述确定所述待检测图像中每 个所述液压支 架的动作状态之后， 还 包括： 根据每个所述液压支架的标识和动作状态， 在人机交互界面上显示对应的所述液压支 架的动作状态。 6.根据权利要求1至5任一项所述的动作检测方法， 其特征在于， 所述人机交互界面上 显示有每 个所述液压支 架的位置， 以及采煤 机的位置； 所述获取图像采集设备针对液压支 架连续采集的多帧待检测图像， 包括： 获取针对所述采煤 机后方预设长度范围内的液压支 架连续采集的多帧待检测图像。 7.根据权利要求1至6任一项所述的动作检测方法， 其特征在于， 所述图像采集设备设 于所述液压支架上， 用于针对所在的所述液压支架外的至少一个液压支架采集待检测图 像。 8.一种动作检测装置， 其特 征在于， 包括： 获取模块， 用于获取图像采集设备针对液压支 架连续采集的多帧待检测图像； 识别模块， 用于对所述多帧待检测图像进行识别处理， 得到每帧待检测图像 中， 所述液 压支架的底座前端边 缘线和伸缩杆的侧边 边缘线； 确定模块， 用于根据所述每帧待检测图像中， 所述液压支架 的底座前端边缘线和伸缩 杆的侧边边缘线， 确定所述液压支架的动作状态， 其中， 所述动作状态包括移架状态、 推溜 状态或静止状态。 9.一种电子设备， 其特征在于， 所述设备包括存储器、 处理器， 所述存储器用于存储可 在处理器上运行 的计算机指令， 所述处理器用于在执行所述计算机指令时实现权利要求1 至7任一项所述的方法。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述程序被处理 器执行时实现权利要求1至7任一所述的方法。权　利　要　求　书 2/2 页 3 CN 114743149 A 3