(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111646926.4 (22)申请日 2021.12.2 9 (71)申请人 泰豪软件股份有限公司 地址 330000 江西省南昌市高新 开发区泰 豪大厦 (72)发明人 宁建福 晏欢 薛国权 薛际铮  (74)专利代理 机构 南昌旭瑞知识产权代理事务 所(普通合伙) 36150 代理人 彭琰 (51)Int.Cl. G06Q 10/06(2012.01) G06Q 10/10(2012.01) (54)发明名称 一种数据质量检查方法、 装置、 存储介质及 设备 (57)摘要 本发明提供一种数据质量检查方法、 装置、 存储介质及设备, 包括获取业务需求, 根据业务 需求创建目标数据模型, 根据目标数据模型在对 应数据系统中接入数据; 根据目标数据模型制定 数据及时性检查规则、 完整性检查规则和准确性 检查规则; 根据检查规则分别对 数据执行质量检 查, 并记录每个检查规则对应的检查结果。 本发 明中的数据质量检查方法、 装置、 存储介质及设 备, 通过根据业务需求创建目标数据模型, 并根 据目标数据模 型对应接入系统中的数据, 保证了 数据的来源清楚且可靠, 进而针对接入的数据制 定及时性检查规则、 完整性检查规则和准确性检 查规则, 通过三种检查规则对数据执行质量检 查, 保证了数据检查的自动化和检查质量, 提高 了数据检查的效率, 推进了 工作流程。 权利要求书2页 说明书11页 附图3页 CN 114358565 A 2022.04.15 CN 114358565 A 1.一种数据质量检查方法, 其特 征在于, 所述方法包括: 获取业务需求, 根据所述业务需求创建目标数据模型, 并根据所述目标数据模型获取 目标模型编码和目标 数据维度; 根据所述目标模型编码、 结合所述目标数据维度在数据系统中获取与 所述目标模型编 码匹配的数据; 根据所述目标数据维度、 结合所述目标数据模型制定检查规则, 所述检查规则包括数 据及时性检查 规则、 数据完整性检查 规则和数据准确性检查 规则; 根据所述检查规则分别对所述数据执行质量检查, 得到数据及时性检查结果、 数据完 整性检查结果和数据准确性检查结果。 2.根据权利要求1所述的数据质量检查方法, 其特征在于, 所述根据所述目标模型编 码、 结合所述目标数据维度在数据系统中获取与所述目标模型编码匹配的数据的步骤包 括: 所述目标 数据维度包括数据属性、 数据接入系统和数据接入频率; 根据所述数据属性和数据接入系统查找不同的数据系统, 并根据 所述接入频率在所述 数据系统中接入与所述目标模型编码匹配的数据。 3.根据权利要求1所述的数据质量检查方法, 其特征在于, 所述根据所述目标数据维 度、 结合所述目标数据模型制定检查规则, 所述检查规则包括数据及时性检查规则、 数据完 整性检查 规则和数据准确性检查 规则的步骤后还 包括: 根据所述目标数据维度、 结合所述检查规则制定所述数据的专项检查策略, 所述专项 检查策略包括检查起止日期、 检查规则以及检查范围, 所述检查规则包括数据及时性检查 规则、 数据完整性检查 规则和数据准确性检查 规则。 4.权利要求2所述的数据质量检查方法, 其特 征在于, 所述数据及时性检查 规则包括: 判断所述数据的接入频率是否满足所述数据的接入频率要求。 5.根据权利要求2所述的数据质量检查方法, 其特征在于, 所述数据完整性检查规则包 括: 判断所述数据是否全部在所述接入时间内接入; 所述数据是否按照所述目标 数据维度接入; 所述数据的字段值是否填写规范; 所述数据是否记录有数据编码, 所述数据编码用于标记所述数据的来源。 6.根据权利要求2所述的数据质量检查方法, 其特征在于, 所述数据准确性检查规则包 括: 判断所述数据中的数据值是否超出 预设阈值范围; 所述数据中的关联 数据是否全部满足计算逻辑; 不同渠道的数据之间结果是否一 致; 不同时期的数据之间的偏差是否满足预设偏差 。 7.根据权利要求3所述的数据质量检查方法, 其特征在于, 所述根据所述检查规则分别 对所述数据执行质量检查, 得到数据及时性检查结果、 数据完整性检查结果和数据准确 性 检查结果的步骤 包括: 根据所述检查范围提取所述数据的主要要素, 根据 所述检查规则分别对所述主要要素权 利 要 求 书 1/2 页 2 CN 114358565 A 2执行质量检查; 并记录所述数据的数据及时性检查结果、 数据完整性检查结果和数据准确性检查结 果。 8.一种数据质量检查装置, 其特 征在于, 所述装置包括: 目标数据模型创建模块, 用于获获取业务需求, 根据所述业务需求创建目标数据模型, 并根据所述目标 数据模型获取目标模型编码和目标 数据维度; 数据接入模块, 用于根据所述目标模型编码、 结合所述目标数据维度在数据系统中获 取与所述目标模型编码匹配的数据; 检查规则配置模块, 用于根据所述目标数据维度、 结合所述目标数据模型制定检查规 则, 所述检查 规则包括数据及时性检查 规则、 数据完整性检查 规则和数据准确性检查 规则; 质量检查模块, 用于根据所述检查规则分别对所述数据执行质量检查, 得到数据及时 性检查结果、 数据完整性检查结果和数据准确性检查结果。 9.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 该程序被处理器执 行时实现如权利要求1-7任一所述的数据质量检查方法。 10.一种数据处理设备, 包括存储器、 处理器以及存储在存储器上并可在处理器上运行 的计算机程序, 其特征在于, 所述处理器执行所述程序时实现如权利要求1-7任一所述的 数据质量检查方法。权 利 要 求 书 2/2 页 3 CN 114358565 A 3

.PDF文档 专利 一种数据质量检查方法、装置、存储介质及设备

安全报告 > 其他 > 文档预览
中文文档 17 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共17页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种数据质量检查方法、装置、存储介质及设备 第 1 页 专利 一种数据质量检查方法、装置、存储介质及设备 第 2 页 专利 一种数据质量检查方法、装置、存储介质及设备 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常2024-03-18 20:07:45上传分享
给文档打分
您好可以输入 255 个字符
网站域名是多少( 答案:github5.com )
评论列表
  • 暂时还没有评论,期待您的金玉良言
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。