(19)国家知识产权局
(12)发明 专利申请
(10)申请公布号
(43)申请公布日
(21)申请 号 20221080901 1.9
(22)申请日 2022.07.11
(71)申请人 中国银行股份有限公司
地址 100818 北京市西城区复兴门内大街1
号
(72)发明人 陈戈 谢炜琪 帅红波 刘铁成
邓亚丽 彭建业 陈芬 黄国军
黄显超 柯星宇 梁展瑞 郑凯帆
吴华东 李俊华 周赞 陈志鹏
杜世琼
(74)专利代理 机构 北京集佳知识产权代理有限
公司 11227
专利代理师 杨傥月
(51)Int.Cl.
G06F 11/30(2006.01)G06F 16/36(2019.01)
(54)发明名称
一种数据处 理方法、 装置、 设备及 介质
(57)摘要
本申请公开了一种数据处理方法、 装置、 设
备及介质, 可应用于人工智能领域, 该方法包括:
解析调度配置文件, 获取批量作业之间的逻辑关
系, 其中, 该调度配置文件中包括批量作业以及
批量作业之间的逻辑关系。 基于该逻辑关系调度
批量作业, 并对批量作业进行处理。 当处理批量
作业时, 获取批量作业的运行数据。 对运行数据
进行处理, 形成目标数据, 该目标数据可 以展示
给用户, 以便用户可以根据展 示的数据更方便地
监控作业的运行情况, 无需人工查询各项数据,
减轻工作压力。 系统可以根据各批量作业之间的
逻辑关系调度并处理作业, 不依赖人工处理, 提
高系统运行的效率。
权利要求书1页 说明书7页 附图2页
CN 115185773 A
2022.10.14
CN 115185773 A
1.一种数据处 理方法, 其特 征在于, 所述方法包括:
解析调度配置文件, 获取批量作业之间的逻辑关系, 所述调度配置文件中包括所述批
量作业以及所述批量作业之间的逻辑关系;
基于所述逻辑关系调度所述批量作业并进行处 理;
当处理所述批量作业时, 获取 所述批量作业的运行 数据;
对所述运行数据进行处 理, 形成目标 数据, 所述目标 数据用于展示给用户。
2.根据权利要求1所述的方法, 其特 征在于, 所述 解析调度配置文件, 包括:
基于知识图谱技 术解析所述调度配置文件。
3.根据权利要求1所述的方法, 其特 征在于, 所述获取 所述批量作业的运行 数据, 包括:
获取所述批量作业所对应的批量 运行日志;
解析所述批量 运行日志, 获取 所述批量作业的运行 数据。
4.根据权利要求1所述的方法, 其特 征在于, 所述方法还 包括:
响应于用户输入的数据展示指令, 输出并展示所述目标 数据。
5.根据权利要求1至4任一项所述的方法, 其特征在于, 所述批量作业的运行数据包括:
所述批量作业的运行状态、 处理所述批量作业的节点信息以及所述批量作业的运行错误次
数中的至少一种。
6.一种数据处 理装置, 其特 征在于, 所述装置包括:
解析模块, 用于解析调度配置文件, 获取批量作业之间的逻辑关系, 所述调度配置文件
中包括所述批量作业以及所述批量作业之间的逻辑关系;
第一处理模块, 用于基于所述逻辑关系调度所述批量作业并进行处 理;
获取模块, 用于当处 理所述批量作业时, 获取 所述批量作业的运行 数据;
第二处理模块, 用于对所述运行数据进行处理, 形成目标数据, 所述目标数据用于展示
给用户。
7.根据权利要求6所述的装置, 其特 征在于, 所述装置还 包括: 输出模块;
所述输出模块, 用于响应于用户输入的数据展示指令, 输出 所述目标 数据。
8.一种数据处 理设备, 其特 征在于, 所述设备包括: 存 储器以及处 理器;
所述存储器用于存 储相关的程序代码;
所述处理器用于调用所述 程序代码, 执 行权利要求1至 5任一项所述的数据处 理方法。
9.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质用于存储计算机
程序, 所述计算机程序用于执 行权利要求1至 5任一项所述的数据处 理方法。
10.一种计算机程序产品, 其特征在于, 所述计算机程序产品包含程序, 当所述程序在
处理器上运行时, 使得计算机或网络设备 执行权利要求1至 5任一项所述的数据处 理方法。权 利 要 求 书 1/1 页
2
CN 115185773 A
2一种数据处理 方法、 装置、 设备及介质
技术领域
[0001]本申请涉及计算机技 术领域, 尤其涉及一种数据处 理方法、 装置、 设备及 介质。
背景技术
[0002]目前业内的大型金融系统内部结构十分复杂, 为了实现某个功能, 可能需要批量
运行大量的作业或任务, 因此在流程的调度和编排上给系统运行带来巨大 的考验。 现有的
数据调度任务和监控任务大多依赖工作人员人工处理, 当系统运行时的某个流程节点出现
故障时, 也需要人工查询数据, 进行故障排查确定故障原因, 增加工作人员的操作压力, 并
且影响系统运行的效率。
发明内容
[0003]有鉴于此, 本申请实施例提供了一种数据处理方法、 装置、 设备及介质, 以便减轻
工作人员压力, 提高系统运行的效率。
[0004]第一方面, 本申请实施例提供了一种数据处 理方法, 所述方法包括:
[0005]解析调度配置文件, 获取批量作业之间的逻辑关系, 所述调度配置文件中包括所
述批量作业以及所述批量作业之间的逻辑关系;
[0006]基于所述逻辑关系调度所述批量作业并进行处 理;
[0007]当处理所述批量作业时, 获取 所述批量作业的运行 数据;
[0008]对所述运行数据进行处 理, 形成目标 数据, 所述目标 数据用于展示给用户。
[0009]在一种可能的实现方式 中, 所述解析调度配置文件, 包括:
[0010]基于知识图谱技 术解析所述调度配置文件。
[0011]在一种可能的实现方式 中, 所述获取 所述批量作业的运行 数据, 包括:
[0012]获取所述批量作业所对应的批量 运行日志;
[0013]解析所述批量 运行日志, 获取 所述批量作业的运行 数据。
[0014]在一种可能的实现方式 中, 所述方法还 包括:
[0015]响应于用户输入的数据展示指令, 输出并展示所述目标 数据。
[0016]在一种可能的实现方式中, 所述批量作业的运行数据包括: 所述批量作业的运行
状态、 处理所述批量作业的节点信息以及所述批量作业的运行错 误次数中的至少一种。
[0017]第二方面, 本申请实施例提供了一种数据处 理装置, 所述装置包括:
[0018]解析模块, 用于解析调度配置文件, 获取批量作业之间的逻辑关系, 所述调度配置
文件中包括所述批量作业以及所述批量作业之间的逻辑关系;
[0019]第一处理模块, 用于基于所述逻辑关系调度所述批量作业并进行处 理;
[0020]获取模块, 用于当处 理所述批量作业时, 获取 所述批量作业的运行 数据;
[0021]第二处理模块, 用于对所述运行数据进行处理, 形成目标数据, 所述目标数据用于
展示给用户。
[0022]在一种可能的实现方式 中, 所述装置还 包括: 输出模块;说 明 书 1/7 页
3
CN 115185773 A
3
专利 一种数据处理方法、装置、设备及介质
文档预览
中文文档
11 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
温馨提示:本文档共11页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 人生无常 于 2024-03-18 10:55:08上传分享