(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111678841.4 (22)申请日 2021.12.31 (71)申请人 厦门影诺医疗科技有限公司 地址 361021 福建省厦门市集美区软件园 三期诚毅北 大街63号704单 元 (72)发明人 邱祺　 (51)Int.Cl. G06V 20/40(2022.01) G06V 30/148(2022.01) G16H 30/20(2018.01) G16H 50/20(2018.01) G06T 7/136(2017.01) G06K 9/62(2022.01) A61B 1/04(2006.01) A61B 1/00(2006.01) G06V 10/74(2022.01)G06V 10/56(2022.01) (54)发明名称 一种基于图标和文字识别内镜检查状态的 方法 (57)摘要 本发明提供一种基于图标和文字识别内镜 检查状态的方法， 依次包括以下步骤： 步骤101a， 从视频流获取当前时刻的视频帧； 步骤102a， 对 视频帧中固定位置的状态区域进行灰度值计算 并记录； 步骤103a， 与前帧同区域灰度值进行比 较； 步骤104a， 对灰度值变化区域进行OCR识别； 步骤105a， 根据OCR结果进行状态匹配； 本发明方 法的通过五个步骤实现了一种无需器械操作者 介入， 自动根据当前检查状态选择算法模型执行 特定算法任务的辅助工具； 在临床工作中， 能够 有效提高人工智能辅助诊断设备的使用效率。 权利要求书1页 说明书3页 附图2页 CN 114299440 A 2022.04.08 CN 114299440 A 1.一种基于图标和文字识别内镜检查状态的方法， 其特 征在于， 依次包括以下步骤： 步骤101a， 从视频流获取当前时刻的视频帧； 步骤102a， 对视频帧中 固定位置的状态区域进行 灰度值计算并记录； 步骤103a， 与前帧同区域灰度值进行比较； 步骤104a， 对灰度值变化区域进行OCR识别； 步骤105a， 根据OCR结果进行状态匹配。 2.根据权利要求1所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 所述步骤101a中， 视频流包含有效信号， 其有效信号应能够通过协议转换成RGB三通道数 据。 3.根据权利要求1所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 所述步骤102a中， 根据设定的固定位置分别获取其像素值， 生成对应的区域灰度值总和并 记录。 4.根据权利要求3所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 设定的固定位置包括快门符号区域、 内镜类型显示区域、 电子染色状态显示区域， 其形式分 别为图形符号或/和字符串。 5.根据权利要求4所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 快门符号出现表示内镜已经接入内镜主机， 否则该区域程黑色， 灰度值接近于0； 内镜类型 显示区域将在接入内镜时显示接入的内镜型号， 包含内镜类型和内镜型号编码； 电子染色 状态区域在开启电子染色功能时将显示电子染色类型。 6.根据权利要求5所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 所述内镜类型包括胃镜、 肠镜、 支气管镜、 鼻咽喉镜、 放大内镜中的任意 一种。 7.根据权利要求1所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 所述步骤103a中， 将当前帧各设定区域的灰度值与前一帧相应区域的灰度值进行比较。 8.根据权利要求1所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 所述步骤104a 中， 当设定区域的灰度值变化超过阈值， 则对该区域进行文字识别。 9.根据权利要求8所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在于， 所述步骤105a中， 当所述104a步骤产生了非空的OCR识别结果， 则对结果进行比对， 获取当 前内镜检查的手术状态； 且结果对比通过字符串正则化匹配完成。 10.根据权利要求9所述的一种基于图标和文字识别内镜检查状态的方法， 其特征在 于， 所述内镜检查的手术状态指检查类型和电子染色类型。权　利　要　求　书 1/1 页 2 CN 114299440 A 2一种基于图标和文字识别内镜检查状态的方 法 技术领域 [0001]本发明涉及计算机 的技术领域， 特别是视频要素识别， 具体是内镜视频流中文字 和图标识别的方法。 背景技术 [0002]在一个人工智能内镜辅助诊断系统中， 通常包含多个针对不同术式、 不同部位、 不 同模式、 不同任务的辅助诊断模 型。 这些模型只能在特定模式下启动才能获得正确的结果， 如在胃镜检查下应启动胃部疾病检测模型， 肠镜检查下应启动肠镜检测模型， 窄带光成像 模式下判断病变浸润深度等。 但对于诊断模型， 启动和结束的时机需要 人为控制， 而临床 检 查过程中， 器械操作者往 往无法对另一台计算机设备进行操作。 [0003]有鉴于此， 本发明人专门设计了一种基于图标和文字识别内镜检查状态的方法， 本案由此产生。 发明内容 [0004]为了解决上述问题， 本发明的技 术方案如下： [0005]一种基于图标和文字识别内镜检查状态的方法， 依次包括以下步骤： [0006]步骤101a， 从视频流获取当前时刻的视频帧； [0007]步骤102a， 对视频帧中 固定位置的状态区域进行 灰度值计算并记录； [0008]步骤103a， 与前帧同区域灰度值进行比较； [0009]步骤104a， 对灰度值变化区域进行OCR识别； [0010]步骤105a， 根据OCR结果进行状态匹配。 [0011]进一步的， 所述步骤10 1a中， 视频流包含有效信号， 其有效信号应能够通过协议转 换成RGB三 通道数据。 [0012]进一步的， 所述步骤102a中， 根据设定的固定位置分别获取其像素值， 生成对应的 区域灰度值总和并记录 。 [0013]进一步的， 设定的固定位置包括快门符号区域、 内镜类型显示区域、 电子染色状态 显示区域， 其形式分别为图形符号或/和字符串。 [0014]进一步的， 快门符号出现表示内镜已经接入内镜主机， 否则该区域程黑色， 灰度值 接近于0； 内镜类型显示区域将在接入内镜时显示接入的内镜型号， 包含内镜类型和内镜型 号编码； 电子染色状态区域在开启电子染色功能时将显示电子染色类型。 [0015]进一步的， 所述内镜类型包括胃镜、 肠镜、 支气管镜、 鼻咽喉镜、 放大内镜中的任意 一种。 [0016]进一步的， 所述步骤103a中， 将当前帧各设定区域的灰度值与前一帧相应区域的 灰度值进行比较。 [0017]进一步的， 所述步骤104a中， 当设定区域的灰度值变化超过阈值， 则对该区域进行 文字识别； 该阈值具体设定为两个端点状态的平均值， 如， 文字消失时平均灰度值接近于0，说　明　书 1/3 页 3 CN 114299440 A 3