(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210777680.2 (22)申请日 2022.07.04 (71)申请人 杭州电子科技大 学 地址 310018 浙江省杭州市钱塘新区白杨 街道2号大街1 158号 (72)发明人 陈丰农　丁云帅　 (51)Int.Cl. G06T 7/00(2017.01) G06V 10/25(2022.01) G06V 10/26(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种结合边界感知和语义分割的复杂场景 检测方法 (57)摘要 本发明公开了一种结合边界感知和语义分 割的复杂场景检测方法， 包括如下步骤： S1、 创建 图像的数据集； S2、 对数据集中的图像数据进行 预处理； S3、 设计检测网络； S4、 训练检测网络得 到最优的收敛模型； S5、 加载训练得到的最优收 敛模型， 将待预测图像输入预测网络中进行预测 得到分割图； S6、 对分割图进行后处理得到最终 的水岸线。 该方法解决了物体和水面反射之间的 相似性造成检测失败问题， 该方法可以有效检测 出不同结构以及不同光照条件下的水岸线， 同时 具有较高检测速度。 权利要求书2页 说明书6页 附图2页 CN 115131321 A 2022.09.30 CN 115131321 A 1.一种结合 边界感知和语义分割的复杂场景检测方法， 其特 征在于， 包括如下步骤： S1、 创建图像的数据集； S2、 对数据集中的图像数据进行 预处理； S3、 构建检测网络， 所述检测网络采用双流式结构， 由pytorch框架搭建深度神经网络 结构， 所述检测网络包括编码器网络、 解码器网络和边界感知网络， 编码器网络用于对特征进行提取， 编码器 网络采用预训练的ResNet ‑18网络， 可以快速 对特征信息进行下采样， 以获得大的感受野， 采用4个卷积块对图像进行下采样， 每次下采 样得到不同尺度的特 征图， 边界感知网络用于关注水域边界， 丢弃大量冗余信息， 边界感知网络通过边界卷积， 来 促进语义信息转换到边界信息， 解码器网络将不同尺寸的特征与边界信息融合， 提出的基于全局平均池和最大池操 作， 并将其细化 为最后分割结果； S4、 训练检测网络得到最优的收敛模型 S4‑1、 设计双损失函数 所述双损失函数中语义损失采用标准交叉熵， 边界损失采用二元交叉熵和骰子损失联 合优化边界学习， 表达式如下： Lboundary(pd,gd)＝ λ1Ldice(pd,gd)+λ1Lbce(pd,gd) 其中， Lboundary表示边界损失， H和W分别表示数据集中图像的长和 宽， Lbce表示二元交叉 熵损失， Ldice表示骰子损失， pd∈RH×W表示预测边界图， gd∈RH×W表示从标记的分割掩码中得 到的真实边界图， 其中i表示第i个 像素， λ1、 λ2、 c为超参数； S4‑2、 确定超参数， 采用Adam优化器对检测网络进行训练， 使检测网络损失最小， 即最 优收敛模型； S5、 加载训练得到的最优收敛模型， 将待预测图像输入最优收敛模型中进行预测得到 分割图； S6、 对分割图进行后处 理得到最终的水岸线。 2.根据权利要求1所述的结合边界感知和语义分割的复杂场景检测方法， 其特征在于， 所述步骤S1中创建的数据集采用USVI nland数据集作为水岸线检测数据集。 3.根据权利要求1所述的结合边界感知和语义分割的复杂场景检测方法， 其特征在于， 所述图像数据预处理的方法为： 通过数据增强的方法提高图像的数量和多样性， 所述数据 增强方法包括裁 剪、 镜像、 亮度和对比度调节。 4.根据权利要求1所述的结合边界感知和语义分割的复杂场景检测方法， 其特征在于， 所述步骤S3中搭建的网络包括编码器网络、 边界感知网络和解码器网络， 所述编码器网络 包括4个依次连接的卷积层和1个池化层， 所述边界感知网络包括2个边界卷积块， 所述解码 器网络包括注意力细化模块、 特征融合模块和上采样， 所述编码器网络中第一和第三个卷 积层分别插入两个边界卷积块生成边界特征图， 所述注意力细化模块分别与池化层和 第四 个卷积层相连接获取语义信息， 所述特征融合模块读取边界特征图和语义信息进行融合，权　利　要　求　书 1/2 页 2 CN 115131321 A 2并通过上采样输出分割图。 5.根据权利要求1所述的结合边界感知和语义分割的复杂场景检测方法， 其特征在于， 所述编码器网络尾部增大感受野所使用的池化层采用全局平均池。 6.根据权利要求1所述的结合边界感知和语义分割的复杂场景检测方法， 其特征在于， 所述步骤S6中后处 理方法为 通过边缘检测算法提取分割图中的水岸线。权　利　要　求　书 2/2 页 3 CN 115131321 A 3