行业标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211140483.6 (22)申请日 2022.09.19 (71)申请人 广西壮族自治区气象信息中心 (广 西壮族自治区气象档案馆) 地址 530022 广西壮 族自治区南宁市民族 大道81号气象大夏 (72)发明人 黄志 林健玲 黎伟川 詹立群  周绍毅 罗红磊 谭斐  (74)专利代理 机构 北京卓岚智财知识产权代理 有限公司 1 1624 专利代理师 赵夏笛 (51)Int.Cl. G06F 16/25(2019.01) G06F 16/22(2019.01) G06F 16/242(2019.01) (54)发明名称 基于Gbase的气候禀赋统计处理方法及其系 统 (57)摘要 本发明提供基于Gbase的气候禀赋统计处理 方法及其系统, 属于数据处理技术领域, 所述方 法包括如下步骤: 步骤1: 收集历史地面观测小时 数据集和日数据集并导入服务器; 步骤2: 根据气 候禀赋规范要求设计服务器的SQL存储过程; 步 骤3: 根据存储 过程构建若干个临时表的方式, 将 数据统计并输 出; 步骤4: 将若干个存储 过程按业 务逻辑完成封装发布, 形成rest接口发布; 步骤 5: 用户输入站号和时间段的参数, 即可直接 形成 最终的统计数据集输出给用户查看。 过摒弃冗繁 的分布式软件开发框架, 开发人员可以集中精力 对统计算法进行改造, 主要是SQL逻辑查询语句 的编写和存储过程的设计, 相比较于之前的 hadoop环境下的基于SparkSql的计算框架下设 计方式要简单 快捷。 权利要求书2页 说明书8页 附图1页 CN 115495511 A 2022.12.20 CN 115495511 A 1.基于Gbase的气候禀赋统计处 理方法, 其特 征在于: 所述方法包括如下步骤: 步骤1: 收集历史地 面观测小时数据集和日数据集并导入服 务器; 步骤2: 根据气候禀赋规范要求设计服 务器的SQ L存储过程; 步骤3: 根据存 储过程构建若干个临时表的方式, 将数据统计并输出; 步骤4: 将若干个存 储过程按业 务逻辑完成封装发布, 形成rest接口发布; 步骤5: 用户输入站号和时间段的参数, 即可直接形成最终的统计数据集输出给用户查 看。 2.根据权利 要求1所述的基于Gbase的气候禀赋统计处理方法, 其特征在于: 步骤1中的 观测小时数据集和日数据集通过 互联网将各个观测站点的数据收集汇总, 同时根据设定收 集时间间隔收集或者实时收集, 将环境下的地面观测小时数据集和日数据集经过格式转 换, 导入Gbase列式数据库。 3.根据权利要求1所述的基于Gbase的气候禀赋统计处理方法, 其特征在于: 步骤2中, 重新设计SQL统计查询流程和存储过程, 从原先的数据 表中进行根据规范抽取相应的列, 从 新组合成为 新的临时表的设计, 通过SQ L进行设计, 同时设计查询过程的优先级别。 4.根据权利要求1所述的基于Gbase的气候禀赋统计处理方法, 其特征在于: 步骤3中, 构建若干个临时表的具体过程为, 根据规范选取导入数据中的某些列, 然后将获取 的列根 据根据需要查找的数据关联进 行组成一个临 时表, 然后临时表上设定表头和关联相关表的 字段, 然后将数据根据临 时表进行查询, 然后把数据存储在临时数据 表中, 然后所有的临 时 表即为输出需要查询的数据表, 然后在根据查询语句即可输出。 5.根据权利 要求1‑4任一项所述的基于Gbase的气候禀赋统计处理方法的系统, 其特征 在于: 包括观测数据收集单元、 数据库单元、 接口单元和用户输入查询单元, 观测数据收集 单元的输入端通过 互联网与外部的天气观测站连接, 观测数据收集单元的输出端与数据库 单元连接, 观测数据收集单元用于收集历史地面观测小时数据集和日数据集并导入服务 器, 数据库单元用于根据气候禀赋规范要求设计服务器的SQL存储过程, 并根据存储过程构 建若干个临时表的方式, 将数据 统计并输出, 接口单元分别与数据库单元和用户输入查询 单元连接, 接口单元用于将若干个存储过程按业务逻辑完成封装发布, 形成rest接口发布, 用户输入查询单元用于供用户输入站号和时间段的参数, 即可直接形成最终的统计数据集 输出给用户查看。 6.根据权利要求5所述的基于Gbase的气候禀赋统计处理方法的系统, 其特征在于: 观 测数据收集单元包括日数据收集模块、 小时数据收集模块、 数据 汇总模块和数据导入模块, 日数据收集模块和小时数据收集模块均与数据汇总模块连接, 日数据收集模块根据间隔时 间向各个观测站发出获取数据请求, 小时数据收集模块根据小时间隔向各个观测站发出获 取数据的请求, 数据 汇总模块将数据进 行汇总, 数据 汇总模块与数据导入模块连接, 数据导 入模块将汇总的数据进行转格式后导入数据库。 7.根据权利要求6所述的基于Gbase的气候禀赋统计处理方法的系统, 其特征在于: 数 据库单元包括服务器模块、 存储逻辑编辑模块、 临时数据表模块和输出模块, 存储逻辑编辑 模块和临时数据表模块均与服务器模块连接, 存储逻辑编辑模块与 临时数据表模块连接, 临时数据表模块与输出模块连接 。 8.根据权利要求7所述的基于Gbase的气候禀赋统计处理方法的系统, 其特征在于: 观权 利 要 求 书 1/2 页 2 CN 115495511 A 2测数据收集单元还包括数据集构建模块, 数据集构建模块以站号、 时间为global  Hash索 引、 构建以站号为哈希分布列的Gbase数据 环境下小时、 日值表, 收集整理历史地面观测日、 小时值txt格式数据集经过质量控制、 清洗与格式转换, 构建大文本数据块导入gbase数据 库对应的表, 完成数据集构建。 9.根据权利要求8所述的基于Gbase的气候禀赋统计处理方法的系统, 其特征在于: 存 储逻辑编辑模块用于根据气候资源评价、 气候宜居城镇的标准规范要求设计各类统计指 标, 对其统计逻辑经过整理归纳, 基于gbase语法设计SQL存储过程, 应用sql聚合、 转换、 数 学、 日期、 开窗、 滑动、 排名的函数以及游标的操作, 通过构建若刚个临时表的方式, 在该存 储过程中完成最后的统计结果的拼接与输出。 10.根据权利要求9所述的基于Gbase的气候禀赋统计处理方法的系统, 其特征在于: 用 户输入查询单元用于输入站号和时间段 的参数, 即可直接形成最终的统计数据集, 不必暴 露原始小时、 日值数据, 消除数据安全隐患。权 利 要 求 书 2/2 页 3 CN 115495511 A 3

.PDF文档 专利 基于Gbase的气候禀赋统计处理方法及其系统

文档预览
中文文档 12 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共12页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 基于Gbase的气候禀赋统计处理方法及其系统 第 1 页 专利 基于Gbase的气候禀赋统计处理方法及其系统 第 2 页 专利 基于Gbase的气候禀赋统计处理方法及其系统 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 11:34:55上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。