数据中台：让数据用起来 付登坡　等著 ISBN ： 978-7-111-64240-4 本书纸版由机械工业出版社于 2020 年出版，电子版由华章分社（北京华 章图文信息有限公司，北京奥维博世图书发行有限公司）全球范围内制 作与发行。 版权所有，侵权必究 客服热线： + 86-10-68995265 客服信箱： [email protected] 官方网址： www.hzmedia.com.cn 新浪微 博 @ 华章数媒 目录 赞誉 作者简介 前言 第 1 章　数据中台：信息化的下一站 1.1 　数据中台产生的大背景 1.2 　数据中台的 3 个核心认知 1.3 　数据中台的 3 个发展阶段 1.4 　开启信息化的下一站 第 2 章　什么是数据中台2.1 　解码数据中台 2.2 　数据中台必备的 4 个核心能力 2.3 　数据中台需要厘清的 2 个概念 2.4 　数据中台 VS 现有信息架构 2.5 　数据中台的业务价值与技术价值 第 3 章　数据中台建设与架构 3.1 　持续让数据用起来的价值框架 3.2 　数据中台建设方法论 3.3 　数据中台架构 3.4 　中台手记（一）：我说服老板立项了 第 4 章　数据中台建设的评估与选择 4.1 　企业数据应用的成熟度评估 4.2 　企业数据中台建设的应用场景 4.3 　中台手记（二）：打仗前手里得有一张 “ 粮草 ” 清单 第 5 章　数据汇聚联通：打破企业数据孤岛 5.1 　数据采集、汇聚的方法和工具 5.2 　数据交换产品 5.3 　数据存储的选择 第 6 章　数据开发：数据价值提炼工厂 6.1 　数据计算能力的 4 种类型6.2 　离线开发 6.3 　实时开发 6.4 　算法开发 6.5 　中台手记（三）：选一个适合自己的技术平台真的很重要 第 7 章　数据体系建设 7.1 　数据体系规划 7.2 　贴源数据层建设 —— 全域数据统一存储 7.3 　统一数仓层建设 —— 标准化的数据底座 7.4 　标签数据层建设 —— 数据价值魅力所在 7.5 　应用数据层建设 —— 灵活支撑业务需求 7.6 　中台手记（四）：即将开启的数据淘金之旅 第 8 章　数据资产管理 8.1 　数据资产的定义和 3 个特征 8.2 　数据资产管理现状和挑战 8.3 　数据资产管理的 4 个目标 8.4 　数据资产管理在数据中台架构中的位置 8.5 　数据治理 8.6 　数据资产管理与数据治理的关系 8.7 　数据资产管理职能 8.8 　数据资产管理效果评估8.9 　数据资产管理的 7 个成功要素 8.10 　中台手记（五）：家里的这点家底可得管好了 第 9 章　数据服务体系建设 9.1 　补全数据应用的最后 “ 一公里 ” 9.2 　 4 种常见的数据服务 9.3 　 3 种常见的数据应用 9.4 　数据服务背后的产品技术 9.5 　中台手记（六）：解决 “ 数据应用最后一公里 ” 问题 第 10 章　数据中台运营机制 10.1 　数据中台运营效果评估模型 10.2 　数据中台运营的 4 个价值切入点 10.3 　数据资产运营 10.4 　数据成本运营 10.5 　数据中台运营的实践经验 10.6 　数据中台运营的要素与口诀 10.7 　中台手记（七）：让数据用起来 第 11 章　数据安全管理 11.1 　数据安全面临的挑战 11.2 　贯穿数据全生命周期的数据安全管理体系 11.3 　大数据平台安全管理技术手段11.4 　中台手记（八）：数据安全！数据安全！数据安全！ 附录　 6 大行业解决方案架构图 赞誉 这本书的大部分作者曾是阿里数据中台部门的实干者， “ 干过 ” 是一种很 宝贵的实力。今天，他们正在用这套数据中台方法论赋能各行各业的数 字化转型，并取得了卓越的业务效果。撰写此书是他们践行 “ 让数据用 起来 ” 这一使命的又一尝试，将为各行各业的数字化转型的探索者和参 与者提供体系化的指导。 —— 谢世煌　阿里巴巴集团联合创始人 / 湖畔山南资本创始人 未来的企业家都应该关注数据的应用，但不是哪个企业都适合建设数据 中台。要了解数据中台就从这本书开始吧，因为作者们都是经验丰富的 一线实践者。 —— 邱昌恒（卜鹰）　鲲腾基金创始合伙人 / 原阿里集团副总裁 大数据的本质是数据的融合，把原本各自孤立的数据互相关联、融合， 通过抽象、加工构建数据资产标签类目体系，从而赋予数据更深层次的 语义和价值，洞察事物的本质。大数据背景下的数据突出了数据的人本 特性、数据的充分利用，不仅极大地发展了生产力，同时还将深刻地改 变生产关系。 本书理论研究和实践应用并重，对于破解当前的信息化发展难题具有非 常重要的现实意义。本书会为所有想要了解数据中台丰富内涵的读者， 以及从事数据治理的技术和管理人员带来深刻的启发，指导他们的实践 和创新。 —— 周傲英　华东师范大学副校长 / 数据学院教授 / 博导 数据中台是企业数字化转型的战略选择，是数字化时代对企业的组织重构、流程再造与技术升级。数据中台并非一个简单的平台，而是对海量 数据进行采集、存储、计算、加工与融合的产物。数据中台旨在消除数 据标准和口径不一致的问题，实现面向应用的数据共享。数据中台让数 据与业务分离，实现面向客户需求的弹性化试错与快速迭代，为客户提 供高效服务。 —— 金小刚　浙江大学计算机科学与技术学院研究员 借助 “ 互联网 +” 和 “ 智能 +” ，人类社会正以前所未有的速度向智能时代前 进。在这个进程中，数据成为宝贵的资产，数据资产管理与数据服务能 力将决定政府管理与社会服务的效率，也影响企业竞争的胜败。如何应 对挑战、占尽先机，本书将带给你别具新意的解读。 —— 陈强　上海工程技术大学计算中心教授 当各行各业的数据累积到一定规模时，数据存储、管理、挖掘、应用等 新技术就能帮助我们 “ 把握现在，预知未来 ” 。数据中台就是这样一套让 数据持续用起来的机制，能够助力企业的数字化转型。 —— 魏凯　中国信通院云计算与大数据研究所副所长 因为工作的原因，我经常与国内外众多行业的管理者、数字化的实践者 和同行们交流，其中数据中台这个话题谈论得非常多。很多人在深度地 研究和实践，不仅产出了很多原创的思考和文字，而且有越来越多的实 践案例。作为数据中台领域的布道者，我相信数据中台将有助于推动中 国的数字化转型，同时，我也相信这本书将会给数据中台领域的实践者 带来有意义的启发和思考。 —— 史凯　 ThoughtWorks 中国区数据智能事业部总经理 数据是数字经济的 “ 石油 ” ，但数据的价值不仅在数据量，更在于如何让 数据有效释放能量。数据分析能力是让 “ 石油 ” 精炼进而充分 “ 燃烧 ” 的技 术， “ 数据中台 ” 更是当前支持数据分析能力提升的技术热点。这本书系 统、全面地讲述了 “ 数据中台 ” 的构建方法论，阐述了从 IT 到 DT 的发展方 向，从技术实现到体系建设，可谓面面俱到，充分体现了 “ 数据中台 ” 的 业务价值和技术价值，为企业开展 “ 数据中台 ” 建设提供了很好的规划蓝 本。架构重在实践、贵在落地，相信本书能够为业内人士提供很好的指 引。—— 付晓岩　建信金融风险合规法律部副总经理 / 《企业级业务架构设计》作者 随着 DT 时代的到来，如何让内部数据助力企业数字化建设已经成为各 公司必须面对的问题，而最近大火的数据中台正好迎合了这一历史发展 趋势。本书的作者们结合自己的中台建设经验，为读者讲述了数据中台 的概念、架构、开发、建设、管理、服务、运营、安全等内容，深入浅 出，娓娓道来。 —— 韩锋　宜信数据库开发与管理主任工程师 作者简介 付登坡（花名：天湛） 资深大数据专家，数澜科技联合创始人 & 地产事业部总经理 有 10 余年大数据领域从业经验，擅长数据建模、海量数据产品架构设计 与实现。原阿里巴巴集团大数据专家，曾在阿里巴巴集团负责消费者数 据标签体系、 DMP 平台等大数据项目设计与实施。 2015 年以创始人身份 组建阿里巴巴集团 “11 维数据创新工作室 ” ，探索数据创新与数据商业 化。 2016 年 6 月离职，联合创办数澜科技，在数澜科技先后负责技术部、咨 询服务部和地产事业部。 江敏（花名：江敏） 资深大数据专家，数澜科技联合创始人 &CTO 有 10 年大数据平台规划、数据安全交换使用、数据应用场景建设方面的 实践经验。曾任职于阿里数据平台事业部、阿里云数据事业部，负责阿 里数据能力及平台的行业客户赋能，并打造行业的数据共享交换，是 ID-Mapping 体系能力构建及服务化的核心参与者、数据交易模式的早期 探索者。 数澜科技联合创始人，负责管理公司产品技术团队，为客户输出构建和