(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211178680.7 (22)申请日 2022.09.27 (71)申请人 内蒙古工业大 学 地址 010080 内蒙古自治区呼和浩特市土 默特左旗内蒙古工业大 学金川校区 (72)发明人 石宝　田宇　晓艳　杨德志　 段凯博　张心月　李林　周昊　 (74)专利代理 机构 西安智大知识产权代理事务 所 61215 专利代理师 段俊涛 (51)Int.Cl. G06V 40/10(2022.01) G06V 10/82(2022.01) G06V 10/774(2022.01) (54)发明名称 一种基于图像处理识别蒙医手部穴位的方 法与装置 (57)摘要 一种基于图像处理识别蒙医手部穴位的方 法， 识别手心手背， 获取数据库中人工标注手部 图像的手部关键点； 获取数据库中人工标注手部 图像的手部关键点与穴位点的位置关系； 对于待 识别手部图像， 定位其手部关键点， 并基于所述 位置关系， 计算待识别手部图像的穴位点位置。 本发明还提供了一种基于图像处理识别蒙医手 部穴位的装置， 与现有技术相比， 本发明能够准 确、 实时检测蒙医手 部穴位位置。 权利要求书3页 说明书8页 附图2页 CN 115527235 A 2022.12.27 CN 115527235 A 1.一种基于图像处 理识别蒙医手部穴位的方法， 其特 征在于， 包括： 步骤1， 识别手心手背， 待识别的蒙医手部穴位有五个， 其中两个分布在手心， 另外三个 分布在手背； 步骤2， 获取 数据库中人工标注手部图像的手部关键点； 步骤3， 获取 数据库中人工标注手部图像的手部关键点与穴位 点的位置关系； 步骤4， 对于待识别手部图像， 定位其手部关键点， 并基于所述位置关系， 计算待识别手 部图像的穴位 点位置。 2.根据权利要求1所述基于图像处理识别蒙医手部穴位的方法， 其特征在于， 所述步骤 1， 识别模型采用YOLOv3模型， 通过网页爬虫软件从互联网上爬取手部图像， 对手心及手背 进行标注， 制作手心手背识别数据集， 并划分为训练集和测试集， 利用该数据集训练所述识 别模型。 3.根据权利要求1所述基于图像处理识别蒙医手部穴位的方法， 其特征在于， 所述步骤 2， 数据库为谷歌开源库MediaPipe， 其人工标注手部图像中， 手部关键点有21个， 腕部编号 为0， 从拇指指根到指尖， 将关节从1开始顺次编号至4， 从食指指根到指尖， 将关节从5开始 顺次编号至8， 从中指指根到指尖， 将关节从9开始顺次编号至12， 从无名指指根到指尖， 将 关节从13开始顺次编号至16， 从小指指根到指尖， 将关节从17开始顺次编号至20， 由此， 得 到21个手部关键点K0～K20。 4.根据权利要求3所述基于图像处理识别蒙医手部穴位的方法， 其特征在于， 所述步骤 3， 采用平均值法或多 项式拟合法求取 所述位置关系； 所述平均值法， 步骤如下： 步骤(1)， 获取数据库中人工标注手部图像的第i个手部关键点Ki的坐标(xi(K),yi(K))以 及第j个穴位点Aj的坐标(xj(A),yj(A))， 选取与Aj距离最近的两个关键点Kk、 Kl， 将Kk、 Kl连线， 取连线的中点作为Aj的基准点Cj， Cj的坐标为(xj(C),yj(C))， 其中k＜l； 步骤(2)， 求Aj与其基准点Cj的位置关系， 所述位置关系包括Aj与Cj之间的距离 以及 一个夹角 所述夹角 为线段CjKk与线段CjAj夹角； 步骤(3)： 对 和 进行归一化处理， 首先， 取关键点Kk、 Kl连线的一半为Lj， 对 进行归一化处理； 以关键点K0为原点， 取关键点K0‑K5连线与关键点K0‑Kl连线的夹角 θoj， 若l ＝5， 则关键点K0‑Kl连线改为K0‑K17连线； 对 进行归一化处理， 归一化之后的距离d ′c,j和 角度 由公式： 求得； 步骤(4)： 对数据库中所有人工标注手部图像的距离d ′c,j和角度 分别求平均， 并计权　利　要　求　书 1/3 页 2 CN 115527235 A 2算出Aj与其基准 点Cj之间的平均距离 及平均角度 其中n为数据库中人工标注手部图像的总数； 步骤(5)： 根据平均距离 及平均角度 求出输入手部图像中未知穴位点A与其基准点 之间的距离Lengthj及角度Anglej的关系， 计算公式为： 所述多项式拟合法， 根据关键点和穴位点位置， 找到基准点， 求出所有人工标注图像中 的基准点与穴位点距离 与角度θj(A)， 选取Lj、 θoj， 并分别对穴位点与 基准点的距离和穴 位点与基准点、 关键点之间的角度关系进行多项式拟合， 进而获得穴位点与关键点之间的 位置关系。 5.根据权利要求1所述基于图像处理识别蒙医手部穴位的方法， 其特征在于， 所述步骤 4， 穴位点坐标点 通过如下公式求取： 其中(xj(C),yj(C))为穴位点相对应的基准点坐标， Lengthj为穴位点与基准点之间的距 离， Anglej为穴位点与基准 点之间的角度。 6.一种基于图像处 理识别蒙医手部穴位的装置， 包括： 图像采集模块， 用于采集对象的手部图片， 所述手部图片包括手心图片和手背图片； 识别模块 一， 识别所述手部图片为手心图片或手背图片； 识别模块 二， 识别手心图片或手背图片的手部关键点； 定位模块， 根据手部关键点与穴位 点的位置关系， 定位手部图片的穴位 点； 标记模块， 根据所述定位模块的定位， 在所述手部图片上对穴位 点进行标记； 输出模块， 输出 标记完成的手部图片。 7.根据权利要求6所述基于图像处理识别蒙医手部穴位的装置， 其特征在于， 所述图像 采集模块为摄像机以及背景纯净 的平板， 所述平板用于放置用户的手部， 所述摄像机对手 部拍照获取手部图片。 8.根据权利要求6所述基于图像处理识别蒙医手部穴位的装置， 其特征在于， 所述识别 模块一、 识别模块 二、 定位模块 一、 定位模块 二和标记模块 集成于处 理器。 9.根据权利要求6所述基于图像处理识别蒙医手部穴位的装置， 所述识别模块一基于 YOLOv3模型完成识别， 或， 基于图像采集模块采集时的定义完成识别； 所述识别模块二， 基 于谷歌开源库MediaPipe的人工标注过图像数据完成识别。 10.根据权利要求6所述基于图像处理识别蒙医手部穴位的装置， 其特征在于， 所述输权　利　要　求　书 2/3 页 3 CN 115527235 A 3