(19)国家知识产权局
(12)发明 专利申请
(10)申请公布号
(43)申请公布日
(21)申请 号 202211267590.5
(22)申请日 2022.04.13
(62)分案原申请数据
202210381557.9 202 2.04.13
(71)申请人 韩国平
地址 261000 山东省潍坊市寒亭区民主街
253号
(72)发明人 周正涛 吴正红
(51)Int.Cl.
G06F 16/215(2019.01)
G06F 16/23(2019.01)
(54)发明名称
基于AI决策的大数据采集配置方法及智慧
场景系统
(57)摘要
本申请实施例提供一种基于AI决策的大数
据采集配置方法及智慧场景系统, 获取基于目标
噪声渗透决策模型对加载的目标智慧场景大数
据进行噪声渗透决策获得的目标噪声渗透区, 基
于目标噪声渗透区确定目标智慧场景大数据关
联的大数据采集进程的大数据清洗字段分布, 结
合大数据清洗字段分布对大数据采集进程进行
大数据清洗配置, 输出大数据清洗配置数据, 结
合大数据清洗配置数据对大数据采集进程进行
更新, 由此将更新的大数据采集进程加载到智慧
场景业务服务器进行大数据采集配置。 如此, 结
合噪声渗透区执行对应大数据清洗配置规则的
大数据清洗配置并针对性进行大数据采集配置
更新, 在后期进行大数据采集过程中进行大数据
清洗, 避免部分噪声数据 产生。
权利要求书4页 说明书13页 附图2页
CN 115510045 A
2022.12.23
CN 115510045 A
1.一种基于AI决策的大数据采集配置方法, 其特征在于, 应用于智慧场景系统, 所述方
法包括:
获取基于匹配模型部署条件的目标噪声渗透决策模型对智慧场景业务服务器基于任
务要求添加的目标智慧场景 大数据进行噪声渗透决策获得的目标噪声渗透区;
基于所述目标噪声渗透区确定所述目标智慧场景大数据关联的大数据采集进程的大
数据清洗 字段分布;
结合所述大数据清洗字段分布对所述大数据采集进程进行大数据清洗配置, 输出大数
据清洗配置数据;
结合所述大数据清洗配置数据对所述大数据采集进程进行更新, 由此将更新的大数据
采集进程加载到智慧场景业 务服务器进行 大数据采集配置 。
2.根据权利要求1所述的基于AI决策的大数据采集配置方法, 其特征在于, 所述结合所
述大数据 清洗字段分布对所述大数据采集进程进 行大数据 清洗配置, 输出大数据 清洗配置
数据的步骤, 包括:
结合所述大数据清洗字段分布对所述大数据采集进程进行大数据清洗配置, 获取所述
大数据采集进程的业务采集活动在大数据更新状态内对所述大数据采集进程关联 的大数
据更新活动进 行遍历数据采集获得的遍历数据采集节点分布, 所述遍历数据采集节点分布
包括依据大 数据采集模板的最 新采集配置顺序生成的若干个遍历数据采集节点;
针对所述遍历数据采集节点分布中各遍历数据采集节点, 在每个单独流程中获取一个
标的遍历数据采集节点确定为目标遍历数据采集节点, 并获取所述标的遍历数据采集节点
联动的一个遍历数据采集节点确定为联动遍历数据采集节点;
结合所述大数据清洗字段分布获取需要进行大数据清洗配置的目标大数据更新流程
关联的大 数据清洗配置信息;
结合所述大数据清洗配置信息对每个单独流程中获取的所述目标遍历数据采集节点
和联动遍历数据采集节点进行采集字段更新, 以对所述业务采集活动针对 各所述大数据更
新活动的大数据更新流程进行遍历数据采集的大数据清洗配置, 输出大数据清洗配置数
据, 所述大 数据清洗配置数据包括每 个遍历数据采集表项对应的噪声清洗 字段数据。
3.根据权利要求2所述的基于AI决策的大数据采集配置方法, 其特征在于, 所述结合所
述大数据清洗配置信息对每个单独流程中获取的所述目标遍历数据采集节点和联动遍历
数据采集节点进 行采集字段更新, 以对所述业务采集活动针对各所述大数据更新活动的大
数据更新 流程进行遍历数据采集的大 数据清洗配置, 包括:
结合所述大数据清洗配置信 息, 对所述目标遍历数据采集节点和所述联动遍历数据采
集节点分别进 行数据清洗指标分配, 输出所述目标遍历数据采集节点的目标数据 清洗指标
和所述联动遍历数据采集节点的联动数据 清洗指标, 所述目标数据清洗指标具有 所述目标
遍历数据采集节点关联的大数据更新流程与所述大数据清洗配置信息之间的对应清洗指
标, 所述联动数据清洗指标具有 所述联动遍历数据采集节点关联的大数据更新流程与所述
大数据清洗配置信息之间的对应清洗指标;
对所述目标数据清洗指标和所述联动数据清洗指标进行共享数据清洗指标分配, 输出
所述目标遍历数据采集节点的共享数据清洗指标;
结合所述共享数据清洗指标对所述业务采集活动针对各所述大数据更新活动的大数权 利 要 求 书 1/4 页
2
CN 115510045 A
2据更新流程进行遍历数据采集的大 数据清洗配置 。
4.根据权利要求2所述的基于AI决策的大数据采集配置方法, 其特征在于, 结合所述大
数据清洗配置信息, 对所述 目标遍历数据采集节点进行数据清洗指标分配, 输出所述 目标
遍历数据采集节点的目标 数据清洗指标, 包括:
提取所述大数据清洗配置信 息的清洗元素, 输出所述大数据清洗配置信 息的清洗元素
簇;
提取所述目标遍历数据采集节点中的若干个遍历数据采集子节点的采集元素, 输出所
述若干个遍历数据采集子节点的采集元 素;
基于所述清洗元素簇和所述若干个遍历数据采集子节点的采集元素, 输出所述若干个
遍历数据采集子节点的清洗元素分布, 所述遍历数据采集子节点的清洗元素分布指代所述
遍历数据采集子节点与所述大 数据清洗配置信息之间的映射变量信息;
基于所述若干个遍历数据采集子节点的清洗元素分布, 对所述若干个遍历数据采集子
节点的采集元 素进行关联, 输出 所述目标 数据清洗指标。
5.根据权利要求1所述的基于AI决策的大数据采集配置方法, 其特征在于, 所述目标噪
声渗透决策模型的决策函数功能层调整步骤, 包括:
从预先与所述智慧场景系统绑定的智慧场景业务数据库中调取基础模板场景大数据,
所述基础模板场景大数据涵盖若干数量的标定了根模板噪声渗透区的基础 模板场景数据,
所述根模板噪声渗透区为手动在基础模板场景数据中标注的初始噪声渗透区, 该初始噪声
渗透区表征基础模板场景 数据中存在噪声数据的定位标注信息;
结合初始化训练的噪声渗透决策模型对所述基础模板场景大数据中的基础模板场景
数据进行噪声渗透点挖掘, 输出噪声渗透点簇;
结合所述噪声渗透点簇, 以每个所述基础模板场景数据为独立的渗透噪声渗透定位分
支配置噪声渗透关系空间;
结合所述噪声渗透关系空间对所述基础模板场景数据的根模板噪声渗透区进行渗透
区衍生, 输出衍 生模板场景 大数据;
基于所述衍生模板场景大数据对所述初始化训练的噪声渗透决策模型进行决策函数
功能层调整, 并基于匹配模型部署条件的目标噪声渗透决策模型对智慧场景业务服务器基
于任务要求添加的目标智慧场景大数据进 行噪声渗透决策, 并根据噪声渗透决策获得的目
标噪声渗透区执 行大数据清洗流 程。
6.根据权利要求5所述的基于AI决策的大数据采集配置方法, 其特征在于, 所述结合所
述噪声渗透点簇, 以每个所述基础 模板场景数据为独立的渗透噪声渗透定位分支配置噪声
渗透关系空间, 包括:
在所述噪声渗透点簇中确定各个基础模板场景数据关联的噪声渗透点, 并基于所述基
础模板场景 数据的噪声渗透点, 确定所述基础模板场景 数据之间的噪声渗透连通度;
结合所述噪声渗透连通度, 在所述基础模板场景大数据中确定所述基础模板场景数据
的连通基础模板场景 数据, 输出 所述基础模板场景 数据的连通基础模板场景 大数据;
在所述噪声渗透连通度中确定所述基础模板场景数据与关联的连通基础模板场景大
数据中基础模板场景 数据之间的目标噪声渗透连通度;
对所述目标噪声渗透连通度进行聚合, 输出所述基础模板场景数据与 所述连通基础模权 利 要 求 书 2/4 页
3
CN 115510045 A
3
专利 基于AI决策的大数据采集配置方法及智慧场景系统
安全报告 >
其他 >
文档预览
中文文档
20 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
温馨提示:本文档共20页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 思考人生 于 2024-02-24 08:50:00上传分享