行业标准网
(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210395061.7 (22)申请日 2022.04.15 (65)同一申请的已公布的文献号 申请公布号 CN 114757278 A (43)申请公布日 2022.07.15 (73)专利权人 北京科杰科技有限公司 地址 100020 北京市朝阳区阜通 东大街1号 院3号楼3层2单 元120307 (72)发明人 刘拓 于洋 高经郡  (74)专利代理 机构 北京维正专利代理有限公司 11508 专利代理师 卓凡 (51)Int.Cl. G06K 9/62(2022.01) G06F 9/50(2006.01) G06F 9/48(2006.01)(56)对比文件 CN 112036648 A,2020.12.04 CN 1087646 33 A,2018.1 1.06 CN 103941662 A,2014.07.23 CN 113535134 A,2021.10.2 2 CN 111401684 A,2020.07.10 CN 111831420 A,2020.10.27 CN 113590274 A,2021.1 1.02 US 20210 64428 A1,2021.0 3.04 WO 2019205324 A1,2019.10.31 周志萍等.基 于数据中 台的建筑企业数据治 理探索与实 践. 《中国建 设信息化》 .202 2, 刘丽.突发 浪涌数据下差异云平台的弱关联 数据调度. 《科技 通报》 .2015,第31卷(第1期),第 175-178页. Chen Zeno et al.Task Agn ostic Continual Learn ing Using Online Variational Bayes. 《Arxiv》 .2019, 审查员 崔小利 (54)发明名称 无效任务的处理方法、 装置、 计算机设备及 存储介质 (57)摘要 本申请公开了一种无效任务的处理方法、 装 置、 计算机设备及存储介质, 其中, 该无效任务的 处理方法包括: 获取任务调度请求, 任务调度请 求包括至少一个已编写任务。 启动数据中台任务 分析引擎, 用于调用已训练的无效任务识别模型 分析已编写任务, 获取任务分析结果。 若任务分 析结果为无效任务, 则将已编写任务回收至待处 理任务池。 该方法可有效提高数据中台的数据处 理效率, 降低无效任务所占用的存储资源, 提高 识别和处 理无效任务的自动化 程度和效率。 权利要求书2页 说明书9页 附图5页 CN 114757278 B 2022.12.16 CN 114757278 B 1.一种无效任务的处 理方法, 其特 征在于, 包括: 获取任务调度请求, 所述任务调度请求包括至少一个已编写任务, 所述已编写任务包 括回收标签; 通过数据资产模块提取任务训练数据, 所述任务训练数据包括: 表、 字段、 相关 数据使用率、 数据量以及s ql关键词分布; 将所述表、 字段、 相关数据使用率、 数据量以及s ql 关键词分布输入原始贝叶斯模型, 拟定有效任务和无效任务的种类作为所述原始贝叶斯模 型的输出, 对所述原 始贝叶斯模型进行训练, 用于获取 所述无效任务识别模型; 启动数据中台任务分析引擎, 用于调用已训练的无效任务识别模型分析所述已编写任 务, 获取任务分析 结果; 若所述任务分析结果为无效任务, 则将所述已编写任务回收至待处理任务池; 若所述 已编写任务的回收标签为永久失效, 则驳回所述已编写任务; 若所述已编写任务的回收标 签为待时机生效, 则提取并保存 所述已编写任务的缺省值和/或任务生效条件; 执行第一定 时任务; 当系统时间满足所述第一定时任务时, 扫描所述待处理任务池中的每一所述缺省 值和所述任务生效条件; 若任一所述已编写任务对应的所有缺省值不再为空, 则激活所述 已编写任务, 则将所述已编写任务加入任务部署队列成为可执行任务; 或者, 若任一所述已 编写任务对应的所述任务生效条件已生效, 则激活所述已编写任务, 则将所述已编写任务 加入任务部署队列成为可 执行任务。 2.根据权利要求1所述的无效任务的处理方法, 其特征在于, 在所述获取任务分析结果 之后, 还包括: 若所述任务分析结果为有 效任务, 则将所述已编写任务加入任务部署队列成为可执行 任务, 用于等待与所述可 执行任务对应的任务触发事 件; 若所述任务触发事 件被触发, 则通过任务调度引擎启动所述可 执行任务。 3.根据权利要求2所述的无效任务的处理方法, 其特征在于, 在所述将所述已编写任务 加入任务部署队列成为可 执行任务之后, 还 包括: 执行第二定时任务; 当系统时间满足所述第 二定时任务 时, 扫描所述任务部署队列中的至少一组任务执行 记录, 所述任务执 行记录包括待执 行任务、 任务执 行次数以及任务报错次数; 若所述待执行任务对应的所述任务执行次数等于所述任务报错 次数, 则将所述待执行 任务移送到所述待处 理任务池中; 若所述待执行任务在任务考核期内对应的所述任务执行次数大于所述任务报错次数, 且所述任务执行次数小于执行次数阈值, 则将所述待执行任务移送到所述待处理任务池 中。 4.根据权利要求1所述的无效任务的处理方法, 其特征在于, 所述已编写任务包括编写 需求描述; 在所述将所述已编写任务回收至待处 理任务池之后, 还 包括: 获取开发端发送的添加任务请求, 所述添加任务请求包括至少一个待添加任务和任务 需求描述; 基于所述待处理任务池中的所有所述编写需求描述和所述任务需求描述进行匹配, 获 取需求匹配结果; 若所述需求匹配结果为匹配成功, 则将所述编写需求描述对应的所述已编写任务返回权 利 要 求 书 1/2 页 2 CN 114757278 B 2给所述开发端, 用于所述 开发端对所述已编写任务 根据所述待添加任务进行二次开发。 5.一种无效任务的处 理装置, 其特 征在于, 包括: 获取调度请求模块, 用于获取任务调度请求, 所述任务调度请求包括至少一个已编写 任务, 所述已编写任务包括回收标签; 通过数据资产模块提取任务训练数据, 所述任务训练 数据包括: 表、 字段、 相关数据使用率、 数据量以及sql关键词分布; 将所述表、 字段、 相关数 据使用率、 数据量以及sql关键词分布输入原始贝叶斯模 型, 拟定有效任务和无效任务的种 类作为所述原始贝叶斯模型 的输出, 对所述原始贝叶斯模型进行训练, 用于获取所述无效 任务识别模型; 启动分析引擎模块, 用于启动数据中台任务分析引擎, 用于调用已训练的无效任务识 别模型分析 所述已编写任务, 获取任务分析 结果; 回收编写任务模块, 用于若所述任务分析结果为无效任务, 则将所述已编写任务回收 至待处理任务池; 若 所述已编写任务的回收标签为永久失效, 则驳回所述已编写任务; 若 所 述已编写任务的回收标签为待时机生效, 则提取并保存所述已编写任务的缺省值和/或任 务生效条件; 执行第一定时任务; 当系统时间满足所述第一定时任务时, 扫描 所述待处理任 务池中的每一所述缺省值和所述任务生效条件; 若任一所述已编写任务对应的所有缺省值 不再为空, 则激活所述已编写任务, 则将所述已编写任务加入任务部署队列成为可执行任 务; 或者, 若任一所述已编写任务对应的所述任务生效条件已生效, 则激活所述已编写任 务, 则将所述已编写任务加入 任务部署队列成为可 执行任务。 6.一种计算机设备, 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器 上运行的计算机程序, 其特征在于, 所述处理器执行所述计算机程序时实现如权利要求 1至 4任一项所述无效任务的处 理方法。 7.一种计算机可读存储介质, 所述计算机可读存储介质存储有计算机程序, 其特征在 于, 所述计算机程序被处理器执行时实现如权利要求1至4任一项所述无效任务的处理方 法。权 利 要 求 书 2/2 页 3 CN 114757278 B 3

.PDF文档 专利 无效任务的处理方法、装置、计算机设备及存储介质

文档预览
中文文档 17 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共17页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 无效任务的处理方法、装置、计算机设备及存储介质 第 1 页 专利 无效任务的处理方法、装置、计算机设备及存储介质 第 2 页 专利 无效任务的处理方法、装置、计算机设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 07:16:56上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。