微信读书书城企业级数据架构：核心要素、架构模型、数据管理与平台搭建

企业级数据架构：核心要素、架构模型、数据管理与平台搭建李杨

微信读书推荐值

评分不足

11人点评

推荐(8)

一般(1)

不行(2)

阅读

545人

电子书

会员卡可读

字数

24.1万字

简介

这是一部从企业架构视角系统讲解企业级数据架构的著作，包含数据架构的原理、方法和实践。本书拟分为四个部分共17个章节来系统性的阐述数据架构相关内容；第1部分架构基础主要包含1个章节 1.数据架构与企业架构其主要从宏观的角度阐述企业架构与数据架构的关系以及重要性使读者明白数据架构并不是孤立存在的且与企业架构息息相关第2部分数据架构基础主要包含5个章节从理论以及工具层面阐述数据架构的构成 2.数据架构构成介绍数据架构的主要组成以及框架 3.数据存储数据架构落地中常见的存储选型以及实用场景 4.数据调度与消息传输数据架构中调度服务以及消息传输的通用技术选型以及可能出现的关键问题以及优化手段 5.Lambda架构与Kappa架构系统性的阐述主流的两种数据架构以及使用场景 6.辅助类组件数据架构中帮助测试以及运维人员精准的定位问题的相关辅助组件，例如日志收集、系统监控以及APM等第3部分数据架构实践基于大量的业务实践，总结数据架构实践中核心组组成以及关键方法进行拆解 7.企业数据区域以及流向以不同的维度去拆解企业的数据，帮助读者构建数据架构的落地层面的意识，知道为什么拆以及如何去拆 8.模型架构详解以主流的两种建模方法论为切入点，讨论并对比优劣并让读者拓展模型设计中的工具箱。 9.模型设计以维度建模为例，详细的介绍不同数据层级、不同类型数据的建模方法，具体案例来源于大量的模型实践 10.元数据了解什么是元数据及其重要性以及如何管理数据 11.数据质量基于数据质量去设计数据质量监控体系，做好事前防范、事后治理 12.数据标准构建数据标准框架以及流程，挖掘具体数据标准落地在企业中的难度。第4部分数据资产管理 13.企业数据资产企业数据资产的构成以及搭建路径以及工具等 14.数据治理结合元数据、数据质量以及数据标准等，系统的阐述数据治理类型项目的落地 15.大数据平台实践如何一步一步搭建基于Hadoop大数据平台 16.实时数据仓库搭建如何构建企业级别的实施数据仓库 17.本书总结总结写书的感悟以及后续的一些想法等

企业级数据架构：核心要素、架构模型、数据管理与平台搭建

李杨

扉页
版权信息
+书签
作者简介
内容简介
序
自序
前言
第一部分架构基础
第1章企业架构概述
1.1 企业架构
1.2 Zachman框架
1.3 TOGAF
1.4 业务架构
1.5 数据架构
1.6 总结
第二部分数据架构基础
第2章数据架构构成
2.1 数据模型
2.2 元数据
2.3 数据质量
2.4 数据标准
2.5 数据治理
2.6 数据资产
2.7 数据生命周期
2.8 数据分布
2.9 常见数据架构技术选型
2.10 数据调度
2.11 总结
第3章数据存储
3.1 数据存储基础
3.2 集中式数据库
3.3 分布式数据库
3.4 大数据存储
3.5 特定领域存储
3.6 实时计算阶段
3.7 总结
第4章数据调度与消息传输
4.1 通用技术选型
4.2 Airflow调度平台
4.3 DataX数据同步工具
4.4 Kafka消息中间件
4.5 总结
第5章 Lambda架构与Kappa架构
5.1 架构演进
5.2 Lambda架构详解
5.3 Kappa架构详解
5.4 Lambda与Kappa对比
5.5 流批一体化
5.6 总结
第6章辅助类应用体系介绍
6.1 资源管理
6.2 资源及组件监控
6.3 应用监控
6.4 日志监控
6.5 总结
第三部分数据架构模型实践
第7章企业数据区与数据流向
7.1 数据区概述
7.2 数据区详解
7.3 企业数据流向
7.4 企业数据分层
7.5 企业集成型数据区层级
7.6 互联网公司的集成型数据区分层特点
7.7 总结
第8章数据模型架构详解
8.1 为什么要建模
8.2 建模策略
8.3 建模三步走
8.4 建模方法论
8.5 常见模型概述
8.6 数据层级与数据模型的关系
8.7 总结
第9章维度建模解析
9.1 维度建模概述
9.2 维度建模总线结构
9.3 维度详解
9.4 缓慢变化维度
9.5 事实表详解
9.6 事务型事实表
9.7 总结
第四部分数据资产管理
第10章元数据管理
10.1 元数据概述
10.2 元数据的产生
10.3 不同类型元数据详解
10.4 元数据的价值
10.5 元数据的应用
10.6 元数据的生命周期
10.7 元数据管理体系构建
10.8 总结
第11章数据质量管理
11.1 数据质量概述
11.2 数据质量内涵
11.3 数据质量管理框架
11.4 数据质量核心维度
11.5 数据质量规则体系
11.6 数据质量评估
11.7 总结
第12章数据标准管理
12.1 数据标准概述
12.2 数据标准内涵
12.3 数据标准体系设计框架
12.4 数据标准管理流程
12.5 数据标准的挑战
12.6 数据标准与数据质量的关系
12.7 总结
第13章数据治理
13.1 为什么需要数据治理
13.2 数据治理内涵
13.3 数据治理核心准则
13.4 数据治理通用流程
13.5 数据治理的挑战
13.6 总结
第14章数据资产管理与数据资产目录
14.1 数据资产内涵
14.2 数据资产管理活动职能
14.3 数据资产目录实践
14.4 总结
第五部分数据架构实践
第15章离线计算
15.1 离线计算架构概述
15.2 架构设计
15.3 软件部署
15.4 模型设计
15.5 数据处理
15.6 离线计算数据应用
15.7 总结
第16章实时计算
16.1 实时计算架构概述
16.2 架构设计
16.3 软件部署
16.4 连通性配置
16.5 实时计算层
16.6 总结
第17章对数字未来的展望
17.1 建设数字中国
17.2 金融行业的数字化转型
17.3 数据架构核心
17.4 数据开发趋势
17.5 DataOps发展
17.6 总结
文后

简介

版权

企业级数据架构：核心要素、架构模型、数据管理与平台搭建