安全公司报告
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210809383.1 (22)申请日 2022.07.11 (71)申请人 医利捷 (上海) 信息科技有限公司 地址 200030 上海市徐汇区枫林路420号2 楼A区209室 (72)发明人 肖识战 (74)专利代理 机构 上海点威知识产权代理有限 公司 31326 专利代理师 胡志强 (51)Int.Cl. G06F 9/50(2006.01) (54)发明名称 一种基于ETL服务器的任务处理方法、 系统 和电子设备 (57)摘要 本申请提供了一种基于ETL服务器的任务处 理方法、 系统和电子设备, 涉及数据计算技术领 域, 包括获取目标任务的任务处理请求, 基于所 述目标任务请求调取用户需求和所述目标任务 的任务处理流程图; 识别所述任务处理流程图的 若干任务节 点, 基于所述任务节 点的位置确定多 个待处理子任务的执行顺序和相互关系; 依照所 述待处理子任务的执行顺序和相互关系对所述 待处理子任务进行分级, 得到分级结果; 基于负 载预测模型预测每个所述待处理子任务的执行 时间和执行成本, 结合所述待处理子任务的分级 结果和所述用户需求, 确定目标优化方案; 基于 所述目标优化方案将所述待处理子任务分配给 多个ETL服务器进行任务处理, 提高所述目标任 务的处理效率。 权利要求书2页 说明书12页 附图4页 CN 115202876 A 2022.10.18 CN 115202876 A 1.一种基于 ETL服务器优化任务处 理方法, 其特 征在于, 包括: 获取目标任务的任务处理请求, 基于所述目标任务请求调取用户需求和所述目标任务 的任务处 理流程图; 识别所述任务处理流程图的若干任务节点, 基于所述任务节点的位置确定多个待处理 子任务的执 行顺序和相互关系; 依照所述待处理子任务的执行顺序和相互关系对所述待处理子任务进行分级, 得到分 级结果; 基于负载预测模型预测每个所述待处理子任务的执行时间和执行成本, 结合所述待处 理子任务的分级结果和所述用户需求, 确定目标优化方案; 基于所述目标优化方案将所述待处理子任务分配给多个ETL服务器进行任务处理, 提 高所述目标任务的处 理效率。 2.如权利要求1所述的方法, 其特征在于, 所述基于所述任务节点的位置确定多个待处 理子任务的执 行顺序和相互关系, 包括: 一个所述待处 理子任务包括至少一个任务节点; 基于所述任务节点的先后顺序, 确定所述待处 理子任务的执 行顺序。 3.如权利要求1所述的方法, 其特征在于, 所述依照所述待处理子任务的执行顺序和相 互关系对所述待处 理子任务进行分级, 得到分级结果, 包括: 依照所述待处 理子任务的执 行顺序的先后, 所述待处 理子任务的主优先级依次降低; 依照所述待处理子任务的相互关系的大小, 同一主优先级的所述待处理子任务的次优 先级依次降低。 4.如权利要求1所述的方法, 其特征在于, 所述基于负载预测模型预测每个所述待处理 子任务的执行时间和执行成本, 结合所述待处理子任务的分级结果和所述用户需求, 确定 目标优化方案, 包括: 基于负载 预测模型 预测每个所述待处 理子任务的预计执 行时间和预计执 行成本; 基于负载预测模型结合所述待处理子任务的预计执行时间、 预计执行成本和分级结 果, 确定多个任务优化方案, 所述任务优化方案包括最小时间方案、 最小成本方案、 最大成 本内的最小时间方案、 最大时间内的最小成本方案; 基于所述用户需求, 从所述多个任务优化方案中确定所述目标优化方案 。 5.如权利要求2所述的方法, 其特 征在于, 所述任务节点包括输出任务节点和输入 任务节点; 如果所述待处 理子任务仅包括输出任务节点, 则所述待处 理子任务 为起始子任务; 如果所述待处 理子任务仅包括输入 任务节点, 则所述待处 理子任务 为最终子任务。 6.如权利要求5所述的方法, 其特 征在于, 所述起始子任务包括若干待处 理内容; 基于所述待处理内容的来源, 查找与其处于 同一网络的所述ETL服务器, 作为第一ETL 服务器; 优先分配所述第一ETL 服务器处理所述待处 理内容。 7.一种基于 ETL服务器的任务处 理系统, 其特 征在于, 包括: 获取模块, 用于获取目标任务的任务处理请求, 基于所述目标任务请求调取用户需求权 利 要 求 书 1/2 页 2 CN 115202876 A 2和所述目标任务的任务处 理流程图; 识别模块, 用于识别所述任务处理流程图的若干任务节点, 基于所述任务节点的位置 确定多个待处 理子任务的执 行顺序和相互关系; 分级模块, 用于依照所述待处理子任务的执行顺序和相互关系 对所述待处理子任务进 行分级, 得到分级结果; 方案确定模块, 用于基于负载预测模型预测每个所述待处理子任务的执行时间和执行 成本, 结合所述待处 理子任务的分级结果和所述用户需求, 确定目标优化方案; 分配模块, 用于基于所述目标优化方案将所述待处理子任务分配给多个ETL服务器进 行任务处 理, 提高所述目标任务的处 理效率。 8.一种电子设备, 其中, 该电子设备包括: 处理器; 以及, 存储计算机可执行指令的存储器, 所述可执行指令在被执行时使所述处理器执行根据 权利要求1 ‑6中任一项所述的方法。 9.一种计算机可读存储介质, 其中, 所述计算机可读存储介质存储一个或多个程序, 所 述一个或多个程序当被处 理器执行时, 实现权利要求1 ‑6中任一项所述的方法。权 利 要 求 书 2/2 页 3 CN 115202876 A 3
专利 一种基于ETL服务器的任务处理方法、系统和电子设备
文档预览
中文文档
19 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 人生无常 于
2024-03-18 13:26:43
上传分享
举报
下载
原文档
(611.2 KB)
分享
友情链接
GB-T 34078.1-2017 基于云计算的电子政务公共平台总体规范第1部分 术语和定义.pdf
GB-T 41268-2022 网络关键设备安全检测方法 路由器设备.pdf
GB-T 33009.2-2016 工业自动化和控制系统网络安全 集散控制系统 DCS 第2部分:管理要求.pdf
T-CEC 642—2022 电力5G通信模组通用技术要求.pdf
GB-T 13749-2022 冲击式打桩机 安全操作规程.pdf
T-CSAE 184—2021 电动汽车动力蓄电池健康状态评价指标 及估算误差试验方法.pdf
GB-T 16946-2017 短波单边带通信设备通用规范.pdf
ISOIEC 42001-2023.pdf
T-GCHA 1.1—2018 定制家居产品 人造板定制衣柜 第1部分:术语和定义.pdf
DB52-T 1636.2-2021 机关事务云 第2部分:公务用车监督管理数据 贵州省.pdf
T-CAEPI 72—2023 袋式除尘用折式滤筒技术要求.pdf
GB-T 3785.1-2010 电声学 声级计 第1部分:规范.pdf
GB-T 38667-2020 信息技术 大数据 数据分类指南.pdf
GB-T 41871-2022 信息安全技术 汽车数据处理安全要素.pdf
DB42-T 633.1-2023 双季稻栽培技术规程 第1部分:早晚稻机械化直播 湖北省.pdf
T-CHES 54—2021 取水权交易可行性报告编制导则.pdf
DB3502-T 056.1-2020 政务信息共享协同平台 第1部分:总体设计 厦门市.pdf
GB-T 34078.2-2021 基于云计算的电子政务公共平台总体规范 第2部分:顶层设计导则.pdf
易观分析 AIGC产业研究报告2023——音频生成篇.pdf
GB-T 4223-2017 废钢铁.pdf
1
/
3
19
评价文档
赞助2.5元 点击下载(611.2 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。