(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211001115.3 (22)申请日 2022.08.19 (71)申请人 浙江大华 技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 何曾范　张凯　李乾坤　邹水生　 (74)专利代理 机构 杭州华进联浙知识产权代理 有限公司 3 3250 专利代理师 黄文勇 (51)Int.Cl. G06V 20/17(2022.01) G06V 10/422(2022.01) G06V 10/75(2022.01) G06V 10/77(2022.01) G06V 10/82(2022.01)G06F 16/248(2019.01) G06F 16/29(2019.01) G06Q 50/06(2012.01) (54)发明名称 一种二维影像地图与图像匹配的热斑定位 方法和系统 (57)摘要 本申请涉及一种二维影像地图与图像匹配 的热斑定位方法和系统， 其中， 该二维影像地图 与图像匹配的热斑定位方法包括： 获取光伏板的 可见光图像和热成像图像； 识别所述热成像图像 中的热斑， 并输出所述热斑的检测框的中心坐 标； 根据所述光伏板的可见光图像， 将所述热斑 的检测框的中心坐标映射到所述二维影像地图 中， 得到所述热斑的地理信息坐标。 通过本申请， 解决了现有技术中对光伏板热斑的定位依赖于 无人机飞行高度、 姿态角、 相机内外参等信息， 定 位效率较低的问题， 实现了光伏板热斑的准确定 位。 权利要求书2页 说明书12页 附图3页 CN 115457410 A 2022.12.09 CN 115457410 A 1.一种二维影 像地图与图像匹配的热斑定位方法， 其特 征在于， 包括： 获取光伏板的可 见光图像和热成像图像； 识别所述热成像图像中的热斑， 并输出 所述热斑的检测框的中心坐标； 根据所述光伏板的可见光图像， 将所述热斑的检测框的中心坐标映射到预设区域的所 述二维影像地图中， 得到所述热斑的地理信息坐标。 2.根据权利要求1所述的二维影像地图与图像匹配的热斑定位方法， 其特征在于， 所述 根据所述光伏板的可见光图像， 将所述热斑的检测框的中心 坐标映射到预设区域的所述二 维影像地图中， 包括： 基于所述光伏板热成像图像和所述光伏板可见光图像， 计算所述光伏板的热成像图像 到所述光伏板的可见光图像的第一映射矩阵， 基于所述光伏板的可见光图像和所述二维影 像地图， 计算所述光伏板的可见光图像到所述二维影像地图的第二映射矩阵， 基于所述第 一映射矩阵和所述第二映射矩阵， 将所述热斑检测框的中心 坐标映射到所述二维影像地图 中。 3.根据权利要求2所述的二维影像地图与图像匹配的热斑定位方法， 其特征在于， 所述 基于所述光伏板的热成像图像和所述光伏板的可见光图像， 计算所述光伏板的热成像图像 到所述光伏板的可 见光图像的第一映射矩阵， 包括： 选取任意位置的所述光伏板的热成像图像及所述光伏板的可见光图像对， 在所述光伏 板的热成像图像中选取热成像图像角点， 在所述光伏板的可见光图像中选取与所述热成像 图像角点位置相同的可见光图像角点； 根据所述热成像图像角点坐标和所述可见光图像角 点坐标， 计算所述第一映射矩阵。 4.根据权利要求2所述的二维影像地图与图像匹配的热斑定位方法， 其特征在于， 所述 基于所述光伏板的可见光图像和所述二 维影像地图， 计算所述光伏板的可见光图像到所述 二维影像地图的第二映射矩阵， 包括： 获取当前定位点的坐标， 以所述定位点的坐标为中心， 以所述可见光图像的横向分辨 率为宽， 以所述可见光图像的纵向分辨率为高， 在所述二 维影像地图中选定矩形区域， 将所 述可见光图像与所述矩形区域进 行特征点匹配， 根据匹配后的特征点计算所述可见光图像 到所述二维影像地图的第二映射矩阵。 5.根据权利要求4所述的二维影像地图与图像匹配的热斑定位方法， 其特征在于， 所述 将可见光图像与所述矩形区域进行特征点匹配， 包括选用基于深度学习的模型， 对可见光 图像与该矩形区域进行 所述特征点匹配。 6.根据权利要求2所述的二维影像地图与图像匹配的热斑定位方法， 其特征在于， 所述 得到所述热斑对应的地理信息坐标， 包括： 对投影到所述二维影像地图中的所述热斑的坐 标进行索引得到所述热斑的地理信息坐标。 7.根据权利要求1所述的方法， 其特征在于， 所述方法应用 在无人机上， 所述无人机搭 载了多目相机； 所述多目相机的至少一目用于拍摄所述可见光图像， 所述多目相机的至少一目用于拍 摄所述热成像图像； 所述预设区域是 所述无人机的监测区域。 8.一种二维影像地图与图像匹配的热斑定位装置， 其特征在于， 包括： 获取模块、 识别权　利　要　求　书 1/2 页 2 CN 115457410 A 2模块和映射模块； 所述获取模块用于获取光伏板的可 见光图像和热成像图像； 所述识别模块用于识别所述热成像图像中的热斑， 并输出所述热斑检测框的中心坐 标； 所述映射模块用于根据 所述光伏板的可见光图像， 将所述热斑检测框的中心坐标映射 到所述二维影像地图中， 得到所述热斑的地理信息坐标。 9.一种二维影像地图与图像匹配的热斑定位系统， 其特征在于， 包括： 控制单元、 图像 采集单元和定位单元； 所述图像采集单元用于采集所述光伏板的可见光图像和热成像图 像； 所述定位单元用于获取当前定位点的坐标； 所述控制单元用于执行权利要求1至权利要 求7中任一项所述的热斑定位方法。 10.一种电子装置， 包括存储器和 处理器， 其特征在于， 所述存储器中存储有计算机程 序， 所述处理器被设置为运行所述计算机程序以执行权利要求1至权利要求7中任一项所述 的热斑定位方法。 11.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序 被处理器执行时实现权利要求1至 权利要求7中任一项所述的热斑定位方法的步骤。权　利　要　求　书 2/2 页 3 CN 115457410 A 3