(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111261182.4 (22)申请日 2021.10.28 (71)申请人 济南信通达电气科技有限公司 地址 250101 山东省济南市高新区齐盛广 场1号楼1712室 (72)发明人 帅民伟　蔡富东　吕昌峰　刘焕云　 杨胜男　杨冲　 (74)专利代理 机构 北京君慧知识产权代理事务 所(普通合伙) 11716 代理人 董延丽 (51)Int.Cl. G06V 10/25(2022.01) G06V 10/774(2022.01) G06K 9/62(2022.01) G06N 20/00(2019.01) (54)发明名称 一种指示灯状态 识别方法及设备 (57)摘要 本申请公开了一种指示灯状态识别方法及 设备， 方法包括： 对指示灯进行图像采集， 以获得 包含指示灯的图像数据， 将图像数据划分为训练 集和验证集； 确认初始模型， 根据训练集对初始 模型进行两次训练， 以分别得到第一检测模型和 第二检测模 型， 并根据验证集对第一检测模型和 第二检测模 型的训练精度进行调整； 通过第一检 测模型对图像数据进行区域识别， 并通过第二检 测模型对识别的区域进行内容识别， 以获得识别 结果； 确认图像数据的先验知识， 将识别结果与 先验知识进行匹配， 以获得匹配结果， 根据匹配 结果确认检测模 型的识别正确率， 以对检测模型 进行调整。 本申请通过构建双层检测模型， 能够 有效地避免检测模型的识别错误， 确保检测模型 的可靠性。 权利要求书2页 说明书7页 附图4页 CN 114092692 A 2022.02.25 CN 114092692 A 1.一种指示灯状态 识别方法， 其特 征在于， 包括： 对指示灯进行图像采集， 以获得包含所述指示灯的图像数据， 将所述图像数据划分为 训练集和验证集； 确认初始模型， 根据 所述训练集对所述初始模型进行训练， 以得到第 一检测模型， 并在 得到所述第一检测模型后， 根据所述训练集对所述初始模型进行再次训练， 以得到第二检 测模型， 根据所述验证集对所述第一检测模型和所述第二检测模型的训练精度进行调整； 通过所述第 一检测模型对所述图像数据进行区域识别， 并通过所述第 二检测模型对识 别的区域进行内容识别， 以获得识别结果； 确认所述图像数据的先验知识， 将所述识别结果与所述先验知识进行匹配， 以获得匹 配结果， 根据所述匹配结果确认所述检测模型的识别正确率， 以对所述检测模型进行调整。 2.根据权利要求1所述的方法， 其特征在于， 将所述图像数据划分为训练集和验证集， 具体包括： 对所述图像数据的数据属性进行标注， 其中， 所述数据属性包括指示灯区域和指示灯 状态； 根据所述指示灯区域将所述图像数据划分为第 一训练集和第 一验证集， 根据 所述指示 灯状态将所述图像数据划分为第二训练集和第二验证集。 3.根据权利要求2所述的方法， 其特征在于， 根据所述训练集对所述初始模型进行训 练， 以得到第一检测模型， 并在得到所述第一检测模型后， 根据所述训练集对所述初始模型 进行再次训练， 以得到第二检测模型， 根据所述验证集对所述第一检测模型和所述第二检 测模型的训练精度进行调整， 具体包括： 根据标注后的所述图像数据的所述指示灯区域对所述第 一检测模型进行训练， 根据 所 述第一训练集对所述第一检测模型进行训练， 以获得第一训练数据， 将所述第一训练数据 与所述第一验证集进行验证， 以获得第一验证结果， 根据所述第一验证结果对所述第一检 测模型的精度参数进行调整； 根据标注后的所述图像数据的所述指示灯状态建立对所述第 二检测模型进行训练， 根 据所述第二训练集对所述第二检测模型进行训练， 以获得第二训练数据， 将所述第二训练 数据与所述第二验证集进行验证， 以获得第二验证结果， 根据所述第二验证结果对所述第 二检测模型的精度参数进行调整。 4.根据权利要求3所述的方法， 其特征在于， 通过所述第 一检测模型对所述图像数据进 行区域识别， 并通过所述第二检测模型对识别的区域进 行内容识别， 以获得识别结果， 具体 包括： 根据所述图像数据， 通过所述第 一检测模型进行区域识别， 并获得第 一识别数据， 根据 所述第一识别数据确认所述指示灯的所述图像区域； 将所述第一识别数据输入所述第二检测模型， 根据所述图像区域， 通过所述第二检测 模型进行状态识别， 并获得第二识别数据， 根据所述第二识别数据确认所述指示灯的指示 灯位置坐标和所述指示灯状态， 并将所述指示灯位置坐标和所述指示灯状态与所述图像数 据进行图像映射。 5.根据权利要求2所述的方法， 其特征在于， 根据 所述指示灯区域将所述图像数据划分 为第一训练集和 第一验证集， 根据所述指示灯状态将所述图像数据划分为第二训练集和 第权　利　要　求　书 1/2 页 2 CN 114092692 A 2二验证集， 具体包括： 根据所述指示灯区域确认对应的区域标注文件， 将所述指示灯区域对应的所述图像数 据和对应的所述区域标注文件划分为第一训练集和第一验证集； 确认所述指示灯的图像区域， 并确认所述图像区域内的所述指示灯状态， 根据所述指 示灯状态确认对应的状态标注文件， 将所述指示灯状态对应的所述图像数据和对应的所述 状态标注文件划分为第二训练集和第二验证集。 6.根据权利要求5所述的方法， 其特 征在于， 确认所述指示灯的图像区域， 具体包括： 通过所述第一检测模型获得第一训练数据， 确认所述第一训练数据的所述指示灯区 域； 对所述指示灯区域添加扰动数据， 以获得泛化指示灯区域， 并根据所述泛化指示灯区 域确认所述指示灯的所述图像区域。 7.根据权利要求2所述的方法， 其特征在于， 对所述图像数据的数据属性进行标注之 后， 所述方法还 包括： 对标注后的所述图像数据进行数据清洗， 其中， 所述数据清洗的范围包括但不 限于检 查错标、 漏标 数据、 筛选重复数据、 检查标签规范性和检查区域矩形框的规范性。 8.根据权利要求1所述的方法， 其特征在于， 将所述识别结果与所述先验知识进行匹 配， 以获得匹配结果之后， 所述方法还 包括： 对所述匹配结果进行验证， 若所述识别结果与所述先验知识匹配失败， 将所述识别结 果标记为 误检数据， 并将所述识别结果进行 过滤。 9.根据权利要求1所述的方法， 其特征在于， 根据 所述匹配结果确认所述检测模型的识 别正确率， 以对所述检测模型进行调整， 具体包括： 确认与所述先验知识匹配失败的所述识别结果， 将 失败的所述识别结果对应的所述图 像数据进行保存， 并对保存的所述图像数据的数量进行记录， 以获得所述检测模型 的失败 数量； 将所述失败数量与预先设定的阈值进行比较， 若所述失败数量大于所述阈值， 则对所 述检测模型的学习率进行调整。 10.一种指示灯状态 识别设备， 其特 征在于， 包括： 至少一个处 理器； 以及， 与所述至少一个处 理器通信连接的存 储器； 其中， 所述存储器存储有可被所述至少一个处理器执行的指令， 所述指令被所述至少一个处 理器执行， 以使所述一种指示灯状态识别设备能够执行如权利要求1 ‑9中任意一项权利要 求所述的方法。权　利　要　求　书 2/2 页 3 CN 114092692 A 3