(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111683005.5 (22)申请日 2021.12.31 (71)申请人 新疆爱华盈通信息技 术有限公司 地址 830000 新疆维吾尔自治区乌鲁 木齐 市经济技术开 发区 （头屯河区） 喀纳斯 湖北路455号新疆软件园E2栋8层801 室 (72)发明人 申啸尘　周有喜　 (51)Int.Cl. G06V 40/20(2022.01) G06V 20/40(2022.01) G06V 10/147(2022.01) G06V 10/44(2022.01) G06V 10/74(2022.01) G06K 9/62(2022.01) G06T 3/00(2006.01)G06T 7/90(2017.01) (54)发明名称 一种手势识别方法、 装置及计算机可读存储 介质 (57)摘要 本申请公开了一种手势识别方法、 装置及计 算机可读存储介质， 涉及识别技术领域。 其方法 包括获取待识别的RGB手势图像， 进行灰度转换 得到待识别的灰度手势图像； 利用待识别的RGB 手势图像和待识别的灰度手势图像按预设顺序 进行组合得到待识别的手势图像； 将待识别的手 势图像送入手势识别模型进行识别输出带有手 势标记的手势标记 图像和手势标记 图像对应的 手势特征向量； 之后计算手势图像的特征向量和 预设手势库中的手势特征向量的相似度； 根据相 似度确定 出满足预设相似范围的手势特征向量， 将手势标记 图像与预设手势特征向量对应的手 势信息进行关联输出手势识别信息。 通过手势图 像减少检测环 境的复杂 度， 而利用相似度提高了 手势识别鲁棒 性。 权利要求书3页 说明书11页 附图6页 CN 114299618 A 2022.04.08 CN 114299618 A 1.一种手势 识别方法， 其特 征在于， 包括： 获取待识别的RGB手势图像； 基于所述RGB手势图像进行 灰度转换， 得到待识别的灰度手势图像； 利用所述待识别的RGB手势图像和待识别的灰度手势图像按预设顺序进行组合， 得到 待识别的手势图像； 将所述待识别的手势图像送入手势识别模型进行识别， 输出带有手势标记的手势标记 图像和所述手势标记图像对应的手势特 征向量； 从预设手势库中获取预设手势特征向量， 并基于所述手势特征向量和所述预设手势特 征向量， 计算所述手势特征向量和预设手势特征向量的相似度， 其中， 所述预设手势库包 括： 预设手势特 征向量和所述预设手势特 征向量对应的手势信息； 根据所述相似度确定出满足预设相似度范围的目标手势特征向量， 并将所述目标手势 特征向量对应的手势标记图像与所述预设手势特征向量对应的手势信息进 行关联， 输出所 述手势识别信息。 2.根据权利要求1所述的方法， 其特征在于， 所述基于所述RGB手势图像进行灰度转换， 得到待识别的灰度手势图像， 包括： 获取所述RGB手势图像中R、 G、 B的颜色 分量； 将每个所述颜色 分量乘以预设灰度系数并进行求和， 得到待调整的灰度值； 利用所述灰度值对所述RGB手势图像进行调整， 得到所述待识别的灰度手势图像。 3.根据权利要求2所述的方法， 其特征在于， 所述待识别的手势图像的灰度转换公式 为： Gray＝R* CR+G*CG+B*CB 所述Gray为灰度值， R、 G、 B分别为红、 绿、 蓝三种颜色分量的值， CR为红色分量的预设灰 度系数， CG为绿色分量的预设灰度系数， CB为蓝色分量的预设灰度系数。 4.根据权利要求1所述的方法， 其特征在于， 所述利用所述待识别的RGB手势图像和待 识别的灰度手势图像按预设顺序进行组合， 得到待识别的手势图像， 包括： 获取所述待识别的RGB手势图像 中各颜色通道的颜色图像和所述待识别的灰度手势图 像中灰度通道的灰度图像， 其中， 所述颜色通道数与所述灰度通道数对应； 将所述颜色图像和所述灰度图像进行拼接， 输出 所述待识别的手势图像。 5.根据权利要求4所述的方法， 其特征在于， 所述将所述各颜色图像和所述灰度图像进 行拼接， 输出 所述待识别的手势图像， 包括： 获取所述灰度图像的原 始像素值； 基于所述灰度图像的原始像素值进行局部对比度归一化， 得到灰度手势图像的第 一像 素值； 将所述第一像素值进行第 一预设区间 映射， 并保留大于或等于预设值的所述第 一像素 值， 生成所述第一像素值的分布图； 获取所述各颜色图像的原 始像素值； 基于所述各颜色图像的原始像素值进行局部对比度归一化， 得到各颜色手势图像的第 二像素值； 将所述第二像素值进行第二预设区间映射， 生成所述第二像素值的分布图；权　利　要　求　书 1/3 页 2 CN 114299618 A 2利用所述第二像素值的分布图中的第二像素值与所述第一像素值的分布图中的第一 像素值对应相乘， 输出待识别的手势图像。 6.根据权利要求5所述的方法， 其特 征在于， 区域映射的计算公式为： 其中， Y表示为 映射后的像素值， Xmax表示为手势图像中最大的像素值， Xmin表示为手势 图像数据中最小的像素值， X表示为手势图像中随机的像素值， a、 b表示为与所述手势图像 中像素值对应的区间值。 7.根据权利要求1所述的方法， 其特征在于， 所述将所述待识别的手势图像送入手势识 别模型进 行识别， 输出带有手势标记的手势标记图像和所述手势标记图像对应的手势特征 向量， 包括： 提取所述待识别的手势图像中RGB通道的RGB图像信息及灰度通道的灰度图像信息； 基于所述RGB图像信息与灰度图像信息分别进行图像卷积， 输出所述RGB图像信息的 RGB特征图和所述灰度图像信息的灰度特 征图； 将所述RGB特 征图和所述灰度特 征图进行拼接， 得到手势图像的特 征图； 根据所述手势图像的特征图进行特征提取和标注， 输出带有手势标记的手势标记图像 和所述手势标记图像对应的手势特 征向量。 8.根据权利要求1所述的方法， 其特征在于， 所述根据所述相似度确定出满足预设相似 度范围的目标手势特征向量， 并将所述目标手势特征向量对应的手势标记图像与所述预设 手势特征向量对应的手势信息进行关联， 输出 所述手势 识别信息， 包括： 判断所述相似度是否处于所述预设相似范围内； 若所述相似度处于所述预设相似范围内， 则将所述手势标记图像与 所述预设手势特征 向量对应的手势信息进行关联， 并输出 所述手势 识别信息； 若所述相似度不处于所述预设相似范围内， 则重新计算所述相似度。 9.一种手势 识别装置， 其特 征在于， 包括： 获取模块， 用于获取待识别的RGB手势图像； 转换模块， 用于基于所述RGB手势图像进行 灰度转换， 得到待识别的灰度手势图像； 组合模块， 用于利用所述待识别的RGB手势图像和待识别的灰度手势图像按预设顺序 进行组合， 得到待识别的手势图像； 识别模块， 用于将所述待识别的手势图像送入手势识别模型进行迭代识别， 输出手势 图像的特征向量， 其中， 所述输出手势图像的特征向量与所述手势图像中的手势信息相对 应； 计算模块， 用于从预设手势库中获取预设手势特征向量， 并基于所述手势特征向量和 所述预设手势特征向量， 计算所述手势特征向量和预设手势特征向量的相似度， 其中， 所述 预设手势库包括： 预设手势特 征向量和与预设手势特 征向量对应的手势信息； 输出模块， 用于根据所述相似度确定出满足预设相似度范围的目标手势特征向量， 并 将所述目标手势特征向量对应的手势标记图像与所述预设手势特征向量对应的手势信息 进行关联， 输出 所述手势 识别信息。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质存储有计算机指权　利　要　求　书 2/3 页 3 CN 114299618 A 3