(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210963513.7 (22)申请日 2022.08.11 (71)申请人 南京百舸争流网络科技有限公司 地址 211222 江苏省南京市溧水区石湫 街 道科创中心 (72)发明人 饶沂　 (74)专利代理 机构 北京清亦华知识产权代理事 务所(普通 合伙) 11201 专利代理师 孟洋 (51)Int.Cl. G06V 30/32(2022.01) G06T 7/10(2017.01) G06T 7/246(2017.01) G06T 7/30(2017.01) G06T 7/73(2017.01) (54)发明名称 笔划顺序识别方法、 装置及计算机设备 (57)摘要 本发明公开了一种笔划顺序 识别方法、 装置 及计算机设备， 主要在于能够在学生日常书写 过 程中进行笔画顺序识别， 有利于及时纠正学生的 书写问题。 其中包括： 响应于平板电脑的支撑装 置旋转预设角度， 利用内置于所述支撑装置一端 的拍摄装置拍摄学习场景下的图像序列； 对所述 图像序列进行分割处理， 得到手部图像序列和书 写工具图像序列； 对所述手部图像序列和所述书 写工具图像序列分别进行配准， 得到手部的第一 运动位移和书写工具的第二运动位移； 基于所述 第一运动位移和所述第二运动位移， 确定当前书 写字符的笔画顺序。 权利要求书2页 说明书10页 附图4页 CN 115457576 A 2022.12.09 CN 115457576 A 1.一种笔画顺序识别方法， 其特 征在于， 包括： 响应于平板电脑的支撑装置旋转预设角度， 利用内置于所述支撑装置一端的拍摄装置 拍摄学习场景 下的图像序列； 对所述图像序列进行分割处 理， 得到手部图像序列和书 写工具图像序列； 对所述手部图像序列和所述书写工具图像序列分别进行配准， 得到手部的第 一运动位 移和书写工具的第二 运动位移； 基于所述第一 运动位移和所述第二 运动位移， 确定当前书 写字符的笔画顺序。 2.根据权利要求1所述的方法， 其特征在于， 所述对所述图像序列进行分割处理， 得到 手部图像序列和书 写工具图像序列， 包括： 对所述图像序列进行手部分割， 得到所述手部图像序列； 确定所述手部图像序列中任意 一张手部图像对应的图像中心； 基于所述图像中心和预设抠图距离， 对所述手部 图像序列进行抠图处理， 得到所述书 写工具图像序列。 3.根据权利要求1所述的方法， 其特征在于， 所述对所述手部图像序列和所述书写工具 图像序列分别进行配准， 得到手部的第一 运动位移和书 写工具的第二 运动位移， 包括： 对所述手部图像序列进行配准操作， 得到所述手部图像序列中任意一张手部图像对应 的配准点； 根据所述任意一张手部图像对应的配准点的位置信息， 确定所述手部的第一运 动位移； 和， 对所述书写工具图像序列进行配准操作， 得到所述书写工具图像序列中任意一张书写 工具图像对应的配准点； 根据所述任意一张书写工具图像对应的配准点的位置信息， 确定 所述书写工具的第二 运动位移。 4.根据权利要求1 ‑3任一项所述的方法， 其特征在于， 所述基于所述第 一运动位移和所 述第二运动位移， 确定当前书 写字符的笔画顺序， 包括： 计算所述第一 运动位移和所述第二 运动位移的位移差值； 若所述位移差值小于预设位移差值， 则确定笔尖在任意一张书写工具图像中的位置信 息； 根据所述笔尖在任意一张书写工具图像中的位置信息， 确定所述书写字符的笔画顺 序。 5.根据权利要求4所述的方法， 其特征在于， 所述确定笔尖在任意一张书写工具图像中 的位置信息， 包括： 对所述书写工具图像序列进行边缘检测， 得到所述任意一张书写工具图像中的边缘形 状； 确定所述边缘形状对应的下端点， 并将所述下端点的位置信息， 确定为所述笔尖在所 述任意一张书写工具图像中的位置信息 。 6.根据权利要求 4所述的方法， 其特 征在于， 所述方法还 包括： 对所述书 写字符进行识别， 并确定识别出的所述书 写字符对应的标准笔画顺序； 将所述笔画顺序与所述标准笔画顺序进行比较； 根据比较结果， 在显示装置中显示相应的反馈信息 。 7.根据权利要求6所述的方法， 其特 征在于， 所述对所述书 写字符进行识别， 包括：权　利　要　求　书 1/2 页 2 CN 115457576 A 2根据所述笔尖的位置信息， 计算任意相邻两张书 写工具图像中笔尖的偏移 距离； 从多个所述偏移距离中确定大于预设偏移距离的目标偏移距离， 并确定所述目标偏移 距离对应的两张图像； 针对所述目标偏移距离对应的两张图像， 对前一图像中所述笔尖下的书写字符进行字 符识别。 8.一种笔画顺序识别装置， 其特 征在于， 包括： 获取单元， 用于响应于平板电脑的支撑装置旋转预设角度， 利用内置于所述支撑装置 一端的拍摄装置拍摄学习场景 下的图像序列； 分割单元， 用于对所述图像序列进行分割处理， 得到手部 图像序列和书写工具图像序 列； 配准单元， 用于对所述手部 图像序列和所述书写工具图像序列分别进行配准， 得到手 部的第一 运动位移和书 写工具的第二 运动位移； 确定单元， 用于基于所述第一运动位移和所述第二运动位移， 确定当前书写字符的笔 画顺序。 9.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序被 处理器执行时实现权利要求1至7中任一项所述的方法的步骤。 10.一种计算机设备， 包括存储器、 处理器及存储在存储器上并可在处理器上运行的计 算机程序， 其特征在于， 所述计算机程序被处理器执行时实现权利要求1至7中任一项所述 的方法的步骤。权　利　要　求　书 2/2 页 3 CN 115457576 A 3