消除数据孤岛,迈向智能数据湖,释放数据价值 FusionData:华为智能数据湖解决方案 华为FusionData产品总监 杨志勇 Security Level: 数据成为新生产资料,智能成为新生产力 全球GDP +智能时代 生产要素的变化 $23亿 数字经济 传统经济 农业经济 工业经济 数字经济 土地+劳动力 资本+技术 数据+智能 2005 2015 2025 Source: Oxford Economics; Huawei Global Industry Vision 传统方案,多系统间很难信息互通协同,无法满足更多行业应用需求 行业应用诉求 智慧交通,平安出行: 传统方案:系统烟囱式建设融合分析困难 平安城市 • 跨网跨源数据汇聚 • 海量数据存储和分析 • AI算法创新,如轨迹特征分析 金融大零售的实时体验: 风险预防 产品定价 实时征信 精准营销 智慧物流 无法满足 金融 跨网跨源数据融合分析 海量数据存储和分析 AI协同 MPP DB Hadoop Streaming 数仓/大数据融合分析,高时效数据处理 • AI云/端协同,离柜化智能体验 • 生产/分析协同,金融实时决策 多部门协同: 政务 Relational DB • • 多委办局数据汇聚 • 数据治理,政务数据资产化 • 数仓/大数据融合分析,政府信息互联互通 Relational DB “BOM”域数据集中,共享访问: 运营商 * Gartner分析数据管理解决方案魔法象限的评估对象从传统数据仓库扩展到数据湖和逻辑数据仓库 * Gartner预计传统的企业数据仓库概念将会消失,大部分企业将会采用新的混合数据分析管理解决方案架构 • 海量数据存储和分析 • 数仓/大数据融合分析 FusionData:智能数据湖解决方案,助力客户释放数据价值 实现数据全生命周期智能管理,消除数据孤岛,让数据“流得动,存得下,用得好” 8K 财务系统 数据融合分析 AR IOT 大数据&AI FusionInsight 数据接入 ROMA 数据库 GaussDB 供应链系统 数据使能 DAYU 物流系统 音频 其他 融合数据存储 OceanStor 市场系统 FusionData特点:3大协同+1套平台,构筑最优数据湖解决方案 3大协同 1套平台 存算协同 存算分离,共享资源池,大幅提升存储资源 利用率,应对海量存储的挑战 统一硬件平台 FusionData 智能数据湖 OneQuery:打破企业数据烟囱,实现跨网 跨源数据融合分析 统一数据管理平台 智能数据管理 DAYU & ROMA 数仓与大数据协同 分布式OLAP GaussDB ROMA&DAYU专业服务工具,贯穿接入/开发 /治理/消费全链路,加速数据价值变现 大数据 & AI FusionInsight 融合数据存储 OceanStor 云-中心-边缘协同 云-中心-边缘,AI算法协同,数据协同,统 一调度,业务永新 专有硬件,性能提升30%+ 华为鲲鹏 华为昇腾 处理器 AI芯片 统一灾备平台 围绕业务数据生命周期管理,构筑最优TCO的 高效数据灾备方案 统一运维管理平台 构建首个数据湖一站式管理平台,提升易用性 3大协同 存算协同:计算与存储分离,共享资源池,应对海量数据存储的挑战 数据库 大数据&AI GaussDB FusionInsight 存算分离 大幅提升存储资源利用率 1. 存算分离:计算/存储解绑定,灵活扩展,资源利用 率提升30% 2. 共享资源池:文件/对象/HDFS协议互通,0数据拷 贝,降低业务规划、扩容难度,存储资源利用率提升 融合存储 OceanStor 大数据&数据库共享存储池 20% 3大协同 数仓与大数据协同:打破企业数据烟囱,实现跨网跨源数据融合分析 大幅提升数据分析效率 数据消费者 统一SQL 1. 统一SQL :GaussDB &FusionInsight,异构数据统 一SQL访问,简单易用 OneQuery 计算任务自动调优 统一数据目录、统一安全控制 2. 计算任务自动调优:自动选择最优执行执行顺序和路 径,支持FILTER/AGGR算子下推,跨地域数据访问性 能提升10倍 DSA 3. DSA数据传输加速器:数据压缩传输和抗抖动,传输 FusionInsight GaussDB 带宽降低40%-70% 3大协同 云边协同:云-中心-边缘AI算法协同,数据协同,统一调度,业务永新 大幅提升业务上线效率 HUAWEI CLOUD 模型市场 1. AI算法协同:云-中心-边缘协同,算法更新周期从周 缩短至天 1 2. 统一调度:边缘资源纳管,统一调度,资源利用率提 升90% FusionInsight AI平台 算法仓 调度 1 2 3 3. FusionCube 容器 数据协同:中心-边缘统一数据视图,数据治理效率 提升50% 一套平台 统一硬件平台:专有硬件,性能提升30%+ 多核优化 同档CPU,相同磁盘,性能提升30% 其他 专用硬件 加密加速 硬件加密,相对软加密性能提升5倍 其他 专用硬件 压缩加速 同档压缩性能,压缩率提升30% 其他 专用硬件 EC加速 全新EC算法,存储利用率提升20% 其他 专用硬件 一套平台 统一数据管理平台:ROMA智能全连接,消除数据孤岛,加速数据流动 应用系统 工业设备 公有云 ERP PLM ROMA 私有云 MES Link 数据湖 MQS FDI 1. 应用到应用间、数据、消息、API、流程集成 2. 企业到企业,跨企业数据交换 3. 公有云到私有云、云多云之间的协同 4. 设备到设备、OT和IT间的融合 APIC 一套平台 统一数据管理平台:DAYU智能使能,数据易开发,易治理,易消费 数据应用 1. 数据易开发:可视化SQL编辑,拖拉拽式作业编排 数据消费 ,百万级任务调度,开发效率提高3倍 数据湖 数 据 治 理 数 据 湖 管 理 专题库 主题库 资源库 原始库 数据集成 数据平台 数 据 湖 运 营 数 据 开 发 2. 数据易治理:开放的元数据自动采集,全链路数据 治理工具库,元数据查找秒级定位,治理效率提高 70% 3. 数据易消费:提供统一的Restful API实现数据的 高效消费,减少多数据源访问适配工作量 一套平台 统一灾备平台:全数据生命周期管理,最优TCO高效数据湖灾备 3 CDM灾备管理平台 1. 同城/异地主备容灾:RPO<=30分钟,RTO小时级 FusionData主站点 2. CDM备份一体机:RPO≈小时级,每TB备份/归档 主备容灾 1 TCO成本对比友商可节约60% 异步复制 3. 灾备管理平台:容灾配置与流程编排,一键式切换 FusionData备站点 2 并行备份 CDM备份 一体机 CDM归档 高密一体机 与容灾演练,管理效率提高80% 一套平台 统一运维管理平台: 数据湖基础设施一站式管理平台,提升易用性 1. 一站式:大数据、存储、数据库、服务器、网络等 数据湖完整基础统一管理,体验更优 2. 易用性:多组件、多维度关联分析提升问题定位效 率50%以上;跨组件向导式业务发放提升发放效率 30%以上等 3. 可分可合:插件式组合,可接入ManageOne形成 整数据中心管理能力 FusionData:智能数据湖解决方案,助力行业数字化转型,释放数据价值 政务 金融 智慧交通 政务大数据 智慧风控 从车看灯到灯看车 数据共享一网通办 毫秒级交易反欺诈 事件式精准营销 电网计量实时分析 让城市交通更顺畅 让政务服务更便捷 让金融交易更安全 让服务体验差异化 让企业更智能 安平 运营商 大企业 智慧营销 智慧运营 工行智慧银行战略:从数仓演进到数据湖 2015.3 2017.9 e-ICBC 1.0 e-ICBC 2.0 三大平台 融e行、融e购、融e联 一个中心 网络融资中心 大数据1.0 数据仓库/数据集市 2019.6 e-ICBC 3.0 智慧银行 智慧运营/服务/营销/风控 大数据3.0 数据湖-大数据&AI服务 大数据2.0 融合数仓 融e行 存贷款 银行卡 理财 征信 银行 融e购 租赁 理财 保险 注册信息 投行 融e联 征信 . . . 华为智能数据&存储解决方案可平滑演进数据湖,保护长期投资 产品方案 场景需求 演进方向 FusionData 智能数据湖 实时数仓 GaussDB 分析决策 日志分析 FusionInsight GaussDB 数据就近分析 智能数据管理 DAYU & ROMA 大数据 & AI FusionInsight 分布式OLAP GaussDB 极致性能数仓 存算灵活配置 OceanStor 分布式OLAP 大数据 & AI FusionInsight 融合数据存储 OceanStor 融合数据存储 OceanStor 华为鲲鹏 华为昇腾 处理器 AI芯片 Thank you. 把数字世界带入每个人、每个家庭、 每个组织,构建万物互联的智能世界。 Bring digital to every person, home and organization for a fully connected, intelligent world. Copyright©2018 Huawei Technologies Co., Ltd. All Rights Reserved. The information in this document may contain predictive statements including, without limitation, statements regarding the future financial and operating results, future product portfolio, new technology, etc. There are a number of factors that could cause actual results and developments to differ materially

pdf文档 华为 消除数据孤岛 迈向智能数据湖 释放数据价值

文档预览
中文文档 17 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共17页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
华为 消除数据孤岛 迈向智能数据湖 释放数据价值 第 1 页 华为 消除数据孤岛 迈向智能数据湖 释放数据价值 第 2 页 华为 消除数据孤岛 迈向智能数据湖 释放数据价值 第 3 页
下载文档到电脑,方便使用
本文档由 路人甲 于 2022-09-01 08:24:42上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。