(19)国家知识产权局
(12)发明 专利申请
(10)申请公布号
(43)申请公布日
(21)申请 号 202210613507.9
(22)申请日 2022.05.31
(71)申请人 南京润楠医疗电子 研究院有限公司
地址 211800 江苏省南京市浦口区江浦街
道浦滨路320号科创总部大厦C座1508
室
(72)发明人 方震 闫百驹 赵荣建 何光强
(74)专利代理 机构 北京中政联科专利代理事务
所(普通合伙) 11489
专利代理师 陈超
(51)Int.Cl.
G06V 40/20(2022.01)
G06F 21/62(2013.01)
G01S 13/89(2006.01)
G06K 9/62(2022.01)G06N 3/08(2006.01)
(54)发明名称
手势识别方法、 装置、 电子设备及可读存储
介质
(57)摘要
本发明公开了一种手势识别方法、 装置、 电
子设备及可读 存储介质, 属于生理信号识别技术
领域。 所述手势识别方法, 包括: 获取雷达热图,
所述雷达 热图含有目标手势的运动信息; 将所述
雷达热图输入训练好的神经网络模 型, 得到所述
目标手势的手势内容信息。 因此使用本发明中的
雷达热图完全替代了现有技术中的高精度摄像,
实现了在保护用户隐私的条件下以无感的方式
进行手势识别, 因此解决了 现有技术中在获取并
识别用户手势运动信息过程中不能有效保护用
户个人隐私的问题。
权利要求书2页 说明书7页 附图4页
CN 114926906 A
2022.08.19
CN 114926906 A
1.一种手势 识别方法, 其特 征在于, 包括:
获取雷达热图, 所述雷达热图含有目标手势的运动信息;
将所述雷达热图输入训练好的神经网络模型, 得到所述目标手势的手势内容信息 。
2.根据权利要求1所述的手势识别方法, 其特征在于, 所述神经网络模型通过半监督学
习方式训练得到 。
3.根据权利要求1所述的手势识别方法, 其特征在于, 将所述雷达热图输入到训练好的
神经网络模型, 得到所述目标手势的手势内容信息之前包括:
将所述雷达热图中的目标手势运动信息的时间序列对齐到相同的帧数;
对带标签的数据和无标签的数据通过半监督学习方式处理, 得到训练好的神经网络模
型。
4.根据权利要求3所述的手势识别方法, 其特征在于, 对带标签的数据和无标签的数据
通过半监 督学习方式处 理, 得到训练好的神经网络模型包括:
将带标签的数据输入监 督学习模型, 得到带 标签数据{xi,yi}的交叉熵损失;
将带标签的数据和无 标签的数据输入半监 督学习模型, 得到无监 督损失;
根据所述无监 督损失和所述交叉熵损失计算得到总损失;
根据所述总损失, 得到训练好的神经网络模型。
5.根据权利要求4所述的手势识别方法, 其特征在于, 将带标签的数据输入监督学习 模
型, 得到带 标签数据{xi,yi}的交叉熵损失包括:
使用交叉熵损失的公式
计算得到交叉熵损失; 其中, Ls为交
叉熵损失, C为类别数, zi为神经网络提取的特 征。
6.根据权利要求4所述的手势识别方法, 其特征在于, 所述半监督学习模型为π ‑model
模型, 所述半监督学习模型用于惩罚所述神经网络模型对同一输入向量的随机增强给出不
同的预测。
7.根据权利要求 4所述的手势 识别方法, 其特 征在于,
将带标签的数据和无 标签的数据输入半监 督学习模型, 得到无监 督损失包括:
使用无监 督损失计算公式:
计算得到无监 督损失;
其中, |X|为带标签和无标签的数据总和, zi和
分别为经过两次随机的数据增强后提
取的特征。
8.根据权利要求4所述的手势识别方法, 其特征在于, 根据 所述无监督损失和所述交叉
熵损失计算得到总损失包括:
使用总损失 公式: LT=LS+w(t)LU计算得到总损失;
其中, LT为总损失, Ls为交叉熵损失, w(t)为权重函数并用于分配交叉熵损失和无监督
损失之间的比例。
9.根据权利要求1至7中任一项所述的手势 识别方法, 其特 征在于,
获取雷达热图, 所述雷达热图含有目标手势的运动信息包括:
发射毫米波并接收含有目标手势运动的毫米波回波信号;权 利 要 求 书 1/2 页
2
CN 114926906 A
2将所述毫米波回波信号进行距离傅里叶变换;
将所述毫米波回波信号中的静止物体或微小振动物体的信号过 滤掉;
将所述毫米波回波信号进行速度傅里叶变换;
将所述毫米波回波信号进行角度傅里叶变换, 获取 雷达距离角度热图。
10.一种手势 识别装置, 其特 征在于, 包括:
获取单元, 用于获取 雷达热图, 所述雷达热图含有目标手势的运动信息; 以及
输入单元, 用于将所述雷达热图输入训练好的神经网络模型, 得到所述目标手势 的手
势内容信息 。
11.一种电子设备, 其特征在于, 包括: 处理器, 存储器及存储在所述存储器上并可在所
述处理器上运行 的程序或指令, 所述程序或指令被所述处理器执行时实现如权利要求1 ‑9
中任一项所述的手势 识别方法的步骤。
12.一种可读存储介质, 其特征在于, 所述可读存储介质上存储程序或指令, 所述程序
或指令被处 理器执行时实现如权利要求1 ‑9中任一项所述的手势 识别方法的步骤。权 利 要 求 书 2/2 页
3
CN 114926906 A
3
专利 手势识别方法、装置、电子设备及可读存储介质
安全报告 >
其他 >
文档预览
中文文档
14 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
温馨提示:本文档共14页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 思考人生 于 2024-02-07 20:38:55上传分享