全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210517413.1 (22)申请日 2022.05.13 (71)申请人 湖南长银五八消费金融股份有限公 司 地址 410013 湖南省长 沙市岳麓区滨江路 188号基金小镇第1 1、 12栋 (72)发明人 贺鸿才  (74)专利代理 机构 华进联合专利商标代理有限 公司 44224 专利代理师 邓丹 (51)Int.Cl. G06F 9/48(2006.01) G06F 9/50(2006.01) (54)发明名称 批量任务处理方法、 装置、 计算机设备和存 储介质 (57)摘要 本申请涉及一种批量任务处理方法、 装置、 计算机设备、 存储介质和计算机程序产品。 该方 法包括: 获取多维度的系统负载参数; 将系统负 载参数输入 预设系统耗时回归模 型, 将预设系统 耗时回归模 型转换为批量任务分片表达式; 预设 系统耗时回归模 型基于系统负载样 本数据、 任务 分片样本数据以及系统耗时样 本数据训练得到; 对批量任务 分片表达式进行求解, 得到任务分片 数; 根据任务分片数对批量任务进行分片并行处 理。 整个方案根据多维度的系统负载参数和预设 系统耗时回归模型, 对批量任务进行合理分配, 根据任务分片数对批量任务划分进行分片, 分配 分片数对应数量的线程对分片后的批量任务进 行处理, 提高了 批量任务处 理效率。 权利要求书2页 说明书13页 附图6页 CN 114816711 A 2022.07.29 CN 114816711 A 1.一种批量任务处 理方法, 其特 征在于, 所述方法包括: 获取多维度的系统负载参数; 将所述系统负载参数输入预设系统耗 时回归模型, 将所述预设系统耗 时回归模型转换 为批量任务分片表达式; 所述预设系统耗时回归模型基于系统负载样本数据、 任务分片样 本数据以及系统耗时样本数据训练得到; 对所述批量任务分片表达式进行求 解, 得到任务分片数; 根据所述任务分片数对所述批量任务进行分片并行处 理。 2.根据权利要求1所述的方法, 其特征在于, 所述对所述批量任务分片表达式进行求 解, 得到任务分片数包括: 对所述批量任务分片表达式进行求 导, 得到任务分片求 导表达式; 根据所述任务分片求 导表达式, 求 解确定最小系统耗时对应的任务分片数。 3.根据权利要求1所述的方法, 其特征在于, 所述预设系统耗 时回归模型的生成过程包 括: 根据系统资源参数, 构建初始系统耗时回归模型; 所述系统资源参数包括系统负载参 数以及任务分片参数; 获取样本数据, 基于所述样本数据、 并采用最小二乘法对所述初始系统耗时回归模型 进行拟合, 得到预设系统耗时回归模型, 所述样本数据包括系统负载样本数据、 任务分片样 本数据以及系统耗时样本数据。 4.根据权利要求3所述的方法, 其特征在于, 获取样本数据, 基于所述样本数据、 并采用 最小二乘法对所述初始系统耗时 回归模型进行拟合, 得到预设系统耗时 回归模型包括: 识别所述系统资源参数中包 含数据类型维度; 根据所述数据类型维度, 确定所需样本数据的数量; 根据所述所需样本数据的数量, 从历史数据中获取样本数据; 根据所述样本数据以及所述最小二乘法对所述初始系统耗 时回归模型进行拟合, 得到 预设系统耗时 回归模型。 5.根据权利要求4所述的方法, 其特征在于, 所述根据所述样本数据以及所述最小二乘 法对所述初始系统耗时 回归模型进行拟合, 得到预设系统耗时 回归模型包括: 根据所述样本数据以及所述最小二乘法对所述初始系统耗 时回归模型进行拟合, 得到 系统耗时与所述系统资源参数之间的线性关系; 根据所述系统耗时与所述系统资源参数之间的线性关系, 构建预设系统耗时回归模 型。 6.根据权利要求5所述的方法, 其特征在于, 所述根据所述样本数据以及所述最小二乘 法对所述初始系统耗时回归模型进行拟合, 得到系统耗时与所述系统资源参数之 间的线性 关系包括: 根据所述最小二乘法, 构建初始系统耗 时回归模型中系统资源参数与系统耗 时的目标 函数; 根据所述样本数据, 对所述目标函数进行求解, 确定使得所述目标函数误差最小的系 统资源参数的系数; 根据所述系统资源参数的系数, 得到系统耗时与所述系统资源参数之间的线性关系。权 利 要 求 书 1/2 页 2 CN 114816711 A 27.一种批量任务处 理装置, 其特 征在于, 所述装置包括: 获取模块, 用于获取多维度的系统负载参数; 输入模块, 用于将所述系统负载参数输入预设系统耗时回归模型, 将所述预设系统耗 时回归模型转换为批量任务分片表达式; 所述预设系统耗时回归模型基于系统负载样本数 据、 任务分片样本数据以及系统耗时样本数据训练得到; 分片模块, 用于对所述批量任务分片表达式进行求 解, 得到任务分片数; 处理模块, 用于根据所述任务分片数对所述批量任务进行分片并行处 理。 8.一种计算机设备, 包括存储器和处理器, 所述存储器存储有计算机程序, 其特征在 于, 所述处 理器执行所述计算机程序时实现权利要求1至 6中任一项所述的方法的步骤。 9.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述计算机程序被 处理器执行时实现权利要求1至 6中任一项所述的方法的步骤。 10.一种计算机程序产品, 包括计算机程序, 其特征在于, 该计算机程序被处理器执行 时实现权利要求1至 6中任一项所述的方法的步骤。权 利 要 求 书 2/2 页 3 CN 114816711 A 3

.PDF文档 专利 批量任务处理方法、装置、计算机设备和存储介质

文档预览
中文文档 22 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共22页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 批量任务处理方法、装置、计算机设备和存储介质 第 1 页 专利 批量任务处理方法、装置、计算机设备和存储介质 第 2 页 专利 批量任务处理方法、装置、计算机设备和存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 07:16:34上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。