(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111660853.4 (22)申请日 2021.12.31 (71)申请人 广东技术师范大学 地址 510000 广东省广州市天河区中山大 道西293号广东技术师范大学(东校 区) (72)发明人 谭志平　唐宇　杨捷鹏　符伊晴　 赵晋飞　李嘉豪　郭琪伟　黄华盛　 (74)专利代理 机构 广州润禾知识产权代理事务 所(普通合伙) 44446 专利代理师 林伟斌 (51)Int.Cl. G06V 20/40(2022.01) G06K 9/62(2022.01) G06V 20/52(2022.01)H04N 5/225(2006.01) H04N 5/76(2006.01) H04N 7/18(2006.01) (54)发明名称 一种虫害识别模 型训练方法、 虫害监测方法 和电子设备 (57)摘要 本发明涉及计算机视觉领域， 更具体地， 涉 及一种虫害识别模型训练方法、 虫害监测方法和 电子设备。 本发 明通过将虫害连续帧视频序列输 入时空记忆网络进行训练， 能使时空记忆网络能 同时学习虫害外观特征和时空特征， 增强虫害识 别模型的识别能力， 从而提高以识别结果为依据 的虫害监测的准确率。 时空记忆网络通过双向特 征聚合， 能更好地学习虫害特征， 提高虫害特征 的识别能力。 此外， 将虫害 光谱信息、 虫害形态信 息和和器官比例信息作为识别条件， 能识别出虫 害的大小、 轮廓、 生长情况、 危害程度， 能进一步 提高虫害种类和数量的识别准确率。 权利要求书2页 说明书7页 附图1页 CN 114511801 A 2022.05.17 CN 114511801 A 1.一种虫害识别模型训练方法， 其特 征在于， 包括： 获取虫害图像信息； 所述虫害图像信息为携带 虫害特征的图像信息； 对所述虫害图像信息进行 预处理； 基于时空记忆网络建立虫害识别模型， 利用预处理后的所述虫害图像信 息对虫害识别 模型进行训练； 将待识别的虫害图像信息 输入训练好的所述虫害识别模型， 输出 虫害危害预测结果。 2.根据权利要求1所述的一种虫害识别模型训练方法， 其特征在于， 所述虫害特征包 括： 虫害光谱信息、 虫害形态信息和器官比例信息 。 3.根据权利要求2所述的一种虫害识别模型训练方法， 其特征在于， 所述对所述虫害图 像信息进行 预处理包括： 将所述虫害图像信息分解， 得到原 始图像序列； 将所述原 始图像序列中不携带 虫害特征的帧数剔除， 得到特 征图像序列； 对所述特 征图像序列进行平 滑、 校正、 求 导、 归一化和降维。 4.根据权利要求3所述的一种虫害识别模型训练方法， 其特征在于， 所述虫害识别模型 包括： 外观特征网络、 时空记忆模块和卷积层； 所述特征图像序列包括： 输入图像序列和目 标图像序列； 所述输入图像序列为所述特征图像序列的前n帧图像序列； 所述目标图像序列 为所述特 征图像序列的前n帧之后的图像序列。 5.根据权利要求4所述的一种虫害识别模型训练方法， 其特征在于， 所述基于时空记忆 网络建立虫害识别模型， 利用预处理后的所述虫害图像信息对虫害识别模型进行训练包 括： 将所述特 征图像序列输入所述外观特 征网络， 得到虫害外观特 征图； 将所述虫害外观特 征图输入所述时空记 忆模块， 得到虫害时空特 征； 使用所述 时空记忆模块进行双向特征聚合， 以将当前时间步的所述虫害时空特征与 前 后相邻时间步的所述虫害时空特 征聚合， 获取 虫害动态特 征； 将所述虫害动态特 征输入所述卷积层， 进行分类和边框回归操作； 根据分类结果预测虫害危害的程度； 所述虫害危害的程度基于虫害种类和虫害数量预估。 6.根据权利要求5所述的一种虫害识别模型训练方法， 其特 征在于， 所述虫害为鼠害。 7.根据权利要求5所述的一种虫害识别模型训练方法， 其特征在于， 所述 时空记忆网络 还包括： 全连接层； 所述虫害动态特征 的分类和边框回归操作还可以输入所述全连接层进 行； 所述外观特 征网络为卷积网络 。 8.一种虫害监测方法， 其特 征在于， 包括： 利用监测装置采集虫害图像信息； 将所述虫害图像信息输入已训练的虫害识别模型， 得到虫害危害预测结果； 所述虫害 识别模型 是通过上述权利要求1 ‑7的训练方法训练后得到的； 根据所述虫害危害预测结果完成虫害监测。 9.根据权利要求8所述的一种虫害监测方法， 其特 征在于， 所述 监测装置包括： 捕获单元， 用于捕获虫害； 照明单元， 用于照明所述捕获单 元；权　利　要　求　书 1/2 页 2 CN 114511801 A 2图像单元， 用于采集所述捕获单 元内的图像信息； 通信单元， 用于发送所述图像信息； 能源单元， 用于给 各单元提供能源。 10.一种电子设备， 其特 征在于， 包括： 处理器以及存 储器； 所述存储器上存储有计算机可读指令， 所述计算机可读指令被所述处理器执行时实现 根据权利要求1 ‑7中任意一项所述的一种虫害识别模型训练方法或根据权利要求8 ‑9中任 意一项所述的一种虫害监测方法。权　利　要　求　书 2/2 页 3 CN 114511801 A 3