全网唯一标准王
(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210234848.5 (22)申请日 2022.03.11 (65)同一申请的已公布的文献号 申请公布号 CN 114422531 A (43)申请公布日 2022.04.29 (73)专利权人 深圳市金政软件技 术有限公司 地址 518000 广东省深圳市龙华区大浪街 道陶元社区南科创元谷1栋402 (72)发明人 石自军 于鹏 刘学卿  (74)专利代理 机构 深圳市特讯知识产权代理事 务所(普通 合伙) 44653 专利代理师 孟智广 (51)Int.Cl. H04L 67/1095(2022.01) H04L 49/9057(2022.01)H04L 9/32(2006.01) (56)对比文件 CN 110413441 A,2019.1 1.05 CN 113672634 A,2021.1 1.19 CN 112711598 A,2021.04.27 审查员 蒋联娇 (54)发明名称 数据同步方法、 系统、 设备及存 储介质 (57)摘要 本发明涉及数据同步领域, 公开了一种数据 同步方法、 系统、 设备及存储介质。 该方法包括: 数据来源系统将收集的同步数据发送至数据校 验系统中; 数据校验系统接收同步数据, 根据校 验字符集, 对同步数据进行格式校验处理, 得到 格式校验结果; 判断格式校验结果是否为合格结 果; 若不为合格结果, 则添加异常数据标签至同 步数据中, 得到带标签的同步数据; 分析监控系 统接收带标签的同步数据, 对带标签的同步数据 进行重组处理, 得到重组的同步数据; 若为合格 结果, 则对同步数据进行哈希计算处理, 得到哈 希同步数据; 目标存储系统接收哈希同步数据, 对哈希同步数据进行验证解析处理, 得到同步数 据, 并存储同步数据。 权利要求书3页 说明书9页 附图2页 CN 114422531 B 2022.07.05 CN 114422531 B 1.一种数据同步方法, 其特征在于, 所述数据同步方法应用于数据同步系统, 所述数据 同步系统包括: 数据来源系统、 数据校验系统、 分析监控系统、 目标存储系统, 所述数据同步 方法包括: 所述数据来源系统将收集的同步数据发送至所述数据校验系统中; 所述数据校验系统接收所述同步数据, 根据预置校验字符集, 对所述同步数据进行格 式校验处 理, 得到格式校验结果; 判断所述格式校验结果是否为 合格结果; 若所述格式校验结果不为合格结果, 则添加异常数据标签至所述同步数据中, 得到带 标签的同步数据, 将所述带 标签的同步数据传输 至所述分析监控系统中; 所述分析监控系统接收所述带标签的同步数据, 根据预置格式重组算法, 对所述带标 签的同步数据进行重组处理, 得到重组的同步数据, 将所述重组的同步数据发送至所述数 据校验系统中; 若所述格式校验结果为合格结果, 则对所述同步数据进行哈希计算处理, 得到第一哈 希值, 进而得到哈希同步数据, 以及将所述哈希同步数据发送至所述目标存储系统, 其中, 所述哈希同步数据包括: 第一哈希值和同步数据; 所述目标存储系统接收所述哈希同步数据, 对所述哈希同步数据进行验证解析处理, 得到同步数据, 并存 储所述同步数据。 2.根据权利要求1所述的数据同步方法, 其特征在于, 所述目标存储系统接收所述哈希 同步数据, 对所述哈希同步数据进 行验证解析 处理, 得到同步数据, 并存储所述同步数据包 括: 所述目标存 储系统接收所述哈希同步数据; 对所述哈希同步数据中的同步数据进行哈希计算处 理, 得到第二哈希值; 基于所述第一哈希值与所述第二哈希值, 判断所述哈希同步数据是否存在更改; 若所述哈希同步数据不存在更改, 则对所述哈希同步数据进行解析运算处理, 得到解 析的同步数据, 并存 储所述同步数据; 若所述哈希同步数据存在更改, 则将异常数据标签添加至所述哈希同步数据中, 得到 带标签的哈希同步数据, 以及将所述带 标签的哈希同步数据传输 至所述分析监控系统中; 所述分析监控系统接收所述带标签的哈希同步数据, 基于所述带标签的哈希同步数 据, 生成重发指令, 将所述重发指令发送至所述数据校验系统中。 3.根据权利要求2所述的数据同步方法, 其特征在于, 所述分析监控系统接收所述带标 签的哈希同步数据, 基于所述带标签的哈希同步数据, 生 成重发指 令, 将所述重发指 令发送 至所述数据校验系统中包括: 所述分析监控系统接收所述带 标签的哈希同步数据; 将所述带 标签的哈希同步数据写入预置异常日志中, 以便人工后期查询; 基于所述带标签的哈希同步数据, 生成重发指令, 将所述重发指令发送至所述数据校 验系统中。 4.根据权利要求1所述的数据同步方法, 其特征在于, 所述分析监控系统接收所述带标 签的同步数据, 根据预置格式重组算法, 对所述带标签的同步数据进 行重组处理, 得到重组 的同步数据, 将所述重组的同步数据发送至所述数据校验系统中包括:权 利 要 求 书 1/3 页 2 CN 114422531 B 2所述分析监控系统接收所述带 标签的同步数据; 将所述带标签的同步数据与 预置字符串队列进行匹配调整处理, 得到所述字符串队列 排序的同步数据; 将所述字符串队列排序的同步数据确定为重组的同步数据, 将所述重组 的同步数据发 送至所述数据校验系统中。 5.根据权利要求4所述的数据同步方法, 其特征在于, 在所述分析监控系统接收所述带 标签的同步数据之后, 在将所述带标签的同步数据与预置字符串队列进行匹配调整处理, 得到所述字符串队列排序的同步数据之前, 还 包括: 将所述带 标签的同步数据写入预置异常日志中, 以便人工后期查询。 6.根据权利要求1所述的数据同步方法, 其特征在于, 所述根据预置校验字符集, 对所 述同步数据进行格式校验处 理, 得到格式校验结果包括: 根据预置校验字符集, 对所述同步数据进行多 线程匹配处 理, 得到匹配坐标集; 分析所述匹配坐标集的排序和所述校验字符集的排序, 得到格式校验结果。 7.根据权利要求6所述的数据同步方法, 其特征在于, 所述分析所述匹配坐标集的排序 和所述校验字符集的排序, 得到格式校验结果包括: 根据所述校验字符集与所述匹配坐标集对应关系, 分析出所述匹配坐标集对应校验字 符的匹配排序; 分析所述校验字符集的校验字符排序, 判断所述匹配排序与 所述校验字符排序 是否一 致; 若一致, 则将合格字符写入校验结果框架中, 生成格式校验结果; 若不一致, 则将不 合格字符写入校验结果框架中, 生成格式校验结果。 8.一种数据同步系统, 其特 征在于, 所述数据同步系统包括: 数据来源系统、 数据校验系统、 分析监控系统、 目标存 储系统; 所述数据来源系统, 用于将收集的同步数据发送至所述数据校验系统中; 所述数据 校验系统, 用于接收所述同步数据, 根据 预置校验字符集, 对所述同步数据进 行格式校验处 理, 得到格式校验结果; 判断所述格式校验结果是否为 合格结果; 若所述格式校验结果不为合格结果, 则添加异常数据标签至所述同步数据中, 得到带 标签的同步数据, 将所述带 标签的同步数据传输 至所述分析监控系统中; 若所述格式校验结果为合格结果, 则对所述同步数据进行哈希计算处理, 得到第一哈 希值, 进而得到哈希同步数据, 以及将所述哈希同步数据发送至所述目标存储系统, 其中, 所述哈希同步数据包括: 第一哈希值和同步数据; 所述分析监控系统, 用于接收所述带标签的同步数据, 根据 预置格式重组算法, 对所述 带标签的同步数据进行重组处理, 得到重组的同步数据, 将所述重组的同步数据发送至所 述数据校验系统中; 所述目标存储系统, 用于接收所述哈希同步数据, 对所述哈希同步数据进行验证解析 处理, 得到同步数据, 并存 储所述同步数据。 9.一种数据同步设备, 其特征在于, 所述数据同步设备包括: 存储器和至少一个处理 器, 所述存 储器中存 储有指令, 所述存 储器和所述至少一个处 理器通过线路互连;权 利 要 求 书 2/3 页 3 CN 114422531 B 3

PDF文档 专利 数据同步方法、系统、设备及存储介质

文档预览
中文文档 15 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 数据同步方法、系统、设备及存储介质 第 1 页 专利 数据同步方法、系统、设备及存储介质 第 2 页 专利 数据同步方法、系统、设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-07 12:40:13上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。