课程简介
本课程通过这次培训让学员进一步认识和了解数据架构设计原理和数据架构规划与优化设计,并且学习数据接入设计方法论、数据处理规划设计方法论、数据驱动规划设计方法论和数据存储规划设计方法论,深入学习数据驱动设计,最后会将各种方法论结合案例进行分析讲解。
把理论与实践相结合、案例分析与方法论相结合解析;学员分组专题研讨,精心点评总结提炼及指导学员。通过全方位知识内容解析、深入剖析专题和有效技能实践及生活化、趣味化的授课方式,抓住学员的痛点,提升学员知识掌握和实践能力。
课程收益
1.了解数据架构设计原理
2.学习数据架构规划与优化设计
3.深入学习掌握用到的方法论
4.掌握方法论的案例实践
受众人群
数据分析工程师,数据架构工程师等人员。
课程周期
5天(30H)
课程大纲
时间 | 主题 | 授课内容 |
第一天上午 | 数据架构设计原理 | 1.为什么需要构建数据架构(数据建模) 什么是数据架构与数据建模? 数据模型复杂的原因分析? 客户的数据模型存在问题的实例分析 2. 数据库架构的特点 3.架构设计理念 4.架构设计的考虑要点(分解、合并、持续发展、稳定性)侧重点是什么? |
第一天下午 | 数据架构规划与优化设计 | 1.数据架构设计的考虑方向及例子(业务划分、系统划分、应用优化) 2. 数据架构模型设计优化及案例分享 1)数据业务模型建设思考与优化点 Ø 完整案例:(案例背景及隐患-->怎么做-->曾尝试的办法及收获->案例启示-->小结) Ø2)数据维度模型建设 3)研讨:如何做好业务建模的需求分析并在后续的数据增长中减少数据治理 |
第二天上午 | 数据接入设计方法论 | 1.数据接入场景矩阵 2.结构化和非结构化数据接入方式介绍 3.数据接入一般的流程介绍 4.常见的数据接入架构介绍 |
第二天下午 | 数据接入规划设计与部署案例 | 1.数据接入规划设计方案如何编写?(侧重点) 2.数据接入结构化设计规划示例 3.数据接入接口规范(例:数据仓库数据接入规范示例) 4.批量数据接入系统设计案例分析 5.接入数据问题分类汇总与思考 |
第三天上午 | 数据处理规划设计方法论 | 1.数据处理ETL过程介绍 2.数据处理ETL特性分析 3.数据处理体系架构 4.流行的数据处理ETL工具及如何选择? |
第三天下午 | 数据处理实施及部署案例分析 | 1.数据处理设计及实施案例分析 1)数据质量管理要素及过程和方法 2)数据集成的问题及方法 3)适合数据处理ETL的数据模型的构建及与数据仓库和ODS的数据模型的区别 4)技术元数据和业务元数据的设计规划分析 2.ETL异常处理案例与说明 3.数据处理ETL的应用展望 |
第四天上午 | 数据驱动规划设计方法论 | 1.什么是数据驱动的设计 2.数据驱动设计的关键点 1)数据从哪里来? 2)为什么根据数据来设计? 3)根据数据设计什么? 3.关于数据驱动的误区 4.数据驱动设计的关键点 |
第四天下午 | 如何做好数据驱动设计 | 1.数据驱动设计:数据处理流程、分析方法和实战案例 1)大数据思维 2)数据采集 3)数据建模 4)数据分析方法 5)数据驱动设计案例分析 2.数据驱动设计方法小结 |
第五天上午 | 数据存储规划设计方法论 | 1.存储相关基础知识 2.存储中常用的术语 3.存储的主要应用场景 4.存储方案设计原则介绍 |
第五天下午 | 数据存储解决方案分析 | 1.研讨和分析:如何确定存储需求的研讨与实例 2.存储规划设计的关键点与案例 1)海量存储规划与设计 2)数据容灾(备份与恢复、数据复制) 3)高可用(集群、双机容错、容错系统) 3.存储规划设计的设计案例展示和介绍 |
Oliver Yu
百林哲咨询(北京)有限公司专家团队成员
Oliver Yu
百林哲咨询(北京)有限公司专家团队成员
Oliver Yu
百林哲咨询(北京)有限公司专家团队成员
Oliver Yu
百林哲咨询(北京)有限公司专家团队成员
Oliver Yu
百林哲咨询(北京)有限公司专家团队成员
Oliver Yu
百林哲咨询(北京)有限公司专家团队成员
Oliver Yu
百林哲咨询(北京)有限公司专家团队成员