行业标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211191522.5 (22)申请日 2022.09.28 (71)申请人 平安科技 (深圳) 有限公司 地址 518000 广东省深圳市福田区福田街 道福安社区益田路5033号平 安金融中 心23楼 (72)发明人 刘灯 胡立波 张茜  (74)专利代理 机构 深圳市沃德知识产权代理事 务所(普通 合伙) 44347 专利代理师 高杰 于志光 (51)Int.Cl. G06F 16/22(2019.01) G06F 16/28(2019.01) G06F 16/901(2019.01) G06F 40/18(2020.01) (54)发明名称 数据仓库 的数据管理方法、 装置、 设备及存 储介质 (57)摘要 本发明涉及数据处理技术, 揭露了一种数据 仓库的数据管理方法, 包括: 获取待上传项目任 务, 根据待上传项目任务构建目标数据表, 根据 命名规则对待上传项目任务及目标数据表进行 命名, 得到待上传项目任务名及目标数据表名; 将待上传项目任务、 目标数据表、 待上传项目任 务名及目标表名存储至数据仓库中; 获取数据仓 库中的所有项目任务, 对项目任务进行解析, 得 到第一依赖关系, 根据第一依赖关系设置第二依 赖关系; 对数据表进行属性 分析, 得到表结构; 根 据第二依赖关系及表结构构建图关系, 根据图关 系及数据表 生成数据表关系网。 本发 明还提出一 种数据仓库的数据管理装置、 电子设备以及存储 介质。 本发 明可以提高数据仓库中表的数据关系 的条理性。 权利要求书2页 说明书10页 附图3页 CN 115510065 A 2022.12.23 CN 115510065 A 1.一种数据仓库的数据管理方法, 其特 征在于, 所述方法包括: 获取待上传项目任务, 根据所述待上传项目任务构建目标数据表, 根据预设的命名规 则对所述待上传项目任务及所述目标数据 表进行命名, 得到待上传项目任务名及目标数据 表名; 将所述待上传项目任务、 所述目标数据表、 所述待上传项目任务名及所述目标表名存 储至预设的数据仓库中; 获取所述数据仓库中的项目任务, 对所述项目任务进行解析, 得到所述项目任务之间 的第一依赖关系, 根据所述第一依赖关系设置所述项目任务对应的数据表的第二依赖关 系; 对所述项目任务对应的数据表进行属性分析, 得到所述数据表对应的表结构; 根据所述第 二依赖关系及所述表结构构建所述项目任务对应的数据表之间的图关系, 根据所述图关系及所述项目任务对应的数据表生成数据表关系网。 2.如权利要求1所述的数据仓库的数据 管理方法, 其特征在于, 所述根据 预设的命名规 则对所述待上传项目任务及所述目标数据 表进行命名, 得到待上传项目任务名及目标数据 表名, 包括: 根据对所述待上传项目任务生成 随机数, 并利用所述随机数对所述待上传项目任务进 行编号, 得到任务编号; 获取所述待上传项目任务的上传时间, 通过任务编 号及所述上传时间对所述待上传项 目任务进行命名, 得到待上传项目任务名; 对所述目标 数据表进行排序, 得到排序 序号及排序时间; 根据所述 排序序号及所述 排序时间对所述目标 数据表进行命名, 得到目标 数据表名。 3.如权利要求1所述的数据仓库的数据 管理方法, 其特征在于, 所述根据 所述待上传项 目任务构建目标 数据表, 包括: 将所述待上传项目任务划分为多个任务子模块; 利用预设的Create  table执行语句, 根据所述任务子模块构建目标 数据表。 4.如权利要求1所述的数据仓库的数据 管理方法, 其特征在于, 所述将所述待上传项目 任务、 所述目标数据 表、 所述待 上传项目任务名及所述目标表名存储至预设的数据仓库中, 包括: 获取所述数据仓库的数据传输请求头 部, 并在所述数据传输请求头 部增加扩展字段; 增加所述扩展字段的数据传输请求头 部向所述数据仓库发送数据传输请求; 接收所述数据仓库基于所述数据传输请求返回的数据传输状态, 在所述数据传输状态 为可传输状态时, 将所述待上传 项目任务、 所述目标数据表、 所述待 上传项目任务名及所述 目标表名关联存 入所述数据仓库中。 5.如权利要求1所述的数据仓库的数据 管理方法, 其特征在于, 所述对所述项目任务进 行解析, 得到所述项目任务之间的第一依赖关系, 包括: 将所述项目任务划分为多个子任务, 并从所述子任务逐个选取目标子任务, 将所述子 任务中除所述目标子任务以外的子任务作为 参考子任务; 利用所述目标子任务对所述 参考子任务进行关联性分析, 得到关联子任务; 根据所述关联子任务与所述目标子任务的关联性 生成第一依赖关系。权 利 要 求 书 1/2 页 2 CN 115510065 A 26.如权利要求1所述的数据仓库的数据 管理方法, 其特征在于, 所述对所述项目任务对 应的数据表进行属性分析, 得到所述数据表对应的表结构, 包括: 对所述项目任务对应的数据表进行 数据属性 提取, 得到表名、 列表字段、 内容字段; 对所述表名、 所述列表字段、 所述内容字段进行结构化记录, 得到所述数据表对应的表 结构。 7.如权利要求1至6中任一项所述的数据仓库的数据管理方法, 其特征在于, 所述根据 所述第二依赖关系及所述表结构 构建所述项目任务对应的数据表之间的图关系, 包括: 提取所述第二依赖关系中的所有关系表, 以所述关系表为节点, 通过所述第二依赖关 系绘制所述关系表的基础图谱; 获取所述关系表所对应的关系表结构, 以所述关系表结构为叶子节点, 通过所述基础 图谱绘制所述项目任务对应的数据表之间的图关系。 8.一种数据仓库的数据管理装置, 其特 征在于, 所述装置包括: 命名模块, 用于获取待上传项目任务, 根据 所述待上传项目任务构建目标数据表, 根据 预设的命名规则对所述待 上传项目任务及所述目标数据表进 行命名, 得到待 上传项目任务 名及目标 数据表名; 数据存储模块, 用于将所述待上传项目任务、 所述目标数据表、 所述待上传项目任务名 及所述目标表名存 储至预设的数据仓库中; 依赖关系生成模块, 用于获取所述数据仓库中的项目任务, 对所述项目任务进行解析, 得到所述项目任务之 间的第一依赖 关系, 根据所述第一依赖关系设置所述项目任务对应的 数据表的第二依赖关系; 表结构生成模块, 用于对所述项目任务对应的数据表进行属性分析, 得到所述数据表 对应的表结构; 数据表关系网生成模块, 用于根据 所述第二依赖关系及所述表结构构建所述项目任务 对应的数据表之间的图关系, 根据所述图关系及所述项目任务对应的数据 表生成数据 表关 系网。 9.一种电子设备, 其特 征在于, 所述电子设备包括: 至少一个处 理器; 以及, 与所述至少一个处 理器通信连接的存 储器; 其中, 所述存储器存储有可被所述至少一个处理器执行的计算机程序, 所述计算机程序被所 述至少一个处理器执行, 以使 所述至少一个处理器能够执行如权利要求 1至7中任意一项 所 述的数据仓库的数据管理方法。 10.一种计算机可读存储介质, 存储有计算机程序, 其特征在于, 所述计算机程序被处 理器执行时实现如权利要求1至7中任意 一项所述的数据仓库的数据管理方法。权 利 要 求 书 2/2 页 3 CN 115510065 A 3

.PDF文档 专利 数据仓库的数据管理方法、装置、设备及存储介质

文档预览
中文文档 16 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 数据仓库的数据管理方法、装置、设备及存储介质 第 1 页 专利 数据仓库的数据管理方法、装置、设备及存储介质 第 2 页 专利 数据仓库的数据管理方法、装置、设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 11:35:47上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。