(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221040243 3.4 (22)申请日 2022.04.18 (71)申请人 重庆数地科技有限公司 地址 400000 重庆市渝北区北部新区金昌 路7号24幢1-2 (72)发明人 刘相池　赵浩宇　邹天涌　丁长兵　 肖锋　 (74)专利代理 机构 重庆中兴达启创专利代理事 务所(普通 合伙) 50264 专利代理师 赖元章 (51)Int.Cl. G06F 16/22(2019.01) G06F 16/2455(2019.01) G06F 16/25(2019.01) (54)发明名称 一种CIM平台中多源异构数据合并归档的方 法 (57)摘要 本发明公开了一种CIM平台中多源异构数据 合并归档的方法， 包括以下步骤： 在CIM平台内预 置一些基础的数据校验规则， 数据通过校验规则 进行校验， 若通过校验便将数据标记为通过， 并 进入到下一个步骤； 若不通过， 则数据返回， 并进 行自定义设置校验规则， 直到所有数据均通过校 验， 读取数据的表头字段加载到内存中； 读取数 据的表头字段和数据目的地字段信息， 并建立映 射关系； 映射关系生产归档指令； 执行所述归档 指令将数据写入 数据目的地的数据库目标表； 预 置规则和自定义脚本规则的方式完成数据的校 验和清洗， 支持几乎所有类型的数据进行自动化 校验与转换， 用户可以在不写代码或者极少量脚 本代码的方式轻松完成异构数据到最终目的数 据表的操作。 权利要求书1页 说明书3页 附图1页 CN 114780546 A 2022.07.22 CN 114780546 A 1.一种CIM平台 中多源异构数据合并归档的方法， 其特 征在于， 包括以下步骤： S1、 在CIM平台 内预置一些基础的数据校验规则； S2、 根据数据校验规则判断校验的数据是否通过； 如果通过， 则将数据进行 标记， 并读取 数据的表头 字段加载到内存中； 如果不通过， 则将数据返回重新进行 校验， 并需要自定义设置校验规则， 直到数据通过； S3、 读取数据的表头 字段和数据目的地字段信息， 并建立映射关系； 根据所述映射关系生产归档指令； 执行所述归档指令将数据写入数据目的地的数据库目标表。 2.根据权利要求1所述的一种CIM平台中多源异构数据合并归档的方法， 其特征在于， 其中数据来源 包括数据文件或数据库表。 3.根据权利要求1所述的一种CIM平台中多源异构数据合并归档的方法， 其特征在于， 基础的校验规则用于检验字段的非空与字段长度。权　利　要　求　书 1/1 页 2 CN 114780546 A 2一种CIM平台中多源异构数据 合并归档的方 法 技术领域 [0001]本发明涉及数据处理的技术领域， 具体涉及一种CIM平台中多源异构数据合并归 档的方法。 背景技术 [0002]CIM平台中除了有BIM模型、 图像、 视频等结构 化数据之外， 还有大量的非实体基础 数据需要整合处理， 如规划信息、 人 口信息、 地块信息等等， 这些数据有可能是外部文件导 入(Excel、 CSV等)， 也可能是从接口进行获取， 但是CIM接入的系统繁杂， 数据格式多样， 每 次新数据接入都需要开发人员进 行对接开发， 完成数据的接入和校验清洗之后数据才能使 用。 [0003]现有这种外部数据接入模式， 每次有数据接入需求都设计到开发， 极大地降低了 外部各类数据接入CIM平台的接入效率， 使得整个过程运行冗杂， 增加前端开 发人员的重复 工作量， 且运行效率低。 发明内容 [0004]针对现有技术中的缺陷， 本发明提供一种CIM平台中多源异构数据合并归档的方 法， 以高效解决了多种私有协议处 理的问题， 提高其 适用性。 [0005]为达到上述目的， 本发明提供了一种CIM平台中多源异构数据合并归档的方法， 包 括以下步骤： 在CIM平台 内预置一些基础的数据校验规则； 根据数据校验规则判断校验的数据是否通过； 如果通过， 则将数据进行 标记， 并读取 数据的表头 字段加载到内存中； 读取数据的表头 字段和数据目的地字段信息， 并建立映射关系； 根据所述映射关系生产归档指令； 执行所述归档指令将数据写入数据目的地的数据库目标表。 [0006]虽然现有外部接入模式， 每次需要重复开发， 但是其实不同数据接入CIM平台的整 体流程都是一样的， 不一样的部分只是数据的校验和清洗规则， 所以可以把其他部分统一 起来减少重复开 发量， 加快CIM平台对外部数据接入的效率； 通过预置规则和自定义脚本规 则的方式完成数据的校验和清洗， 支持几乎所有类型 的数据进行自动化校验与转换， 用户 可以在不写代码或者极少量脚本代码的方式轻松完成异构数据到最终目的数据表的操作。 [0007]根据上述 合并归档的方法的一有利特 征为： 还包括以下步骤： 在CIM平台 内预置一些基础的数据校验规则； 根据数据校验规则判断校验的数据是否通过； 如果不通过， 则将数据返回重新进行 校验， 并需要自定义设置校验规则， 直到数据通过。说　明　书 1/3 页 3 CN 114780546 A 3