从0到1整合业务数据,构建企业可复用的数据中台!

将学到:

1. 具备数据中台架构设计能力

4. 解锁SB3.0数据中台生态

2. 掌握数据中台核心技能体系

5. 收获开源级别组件实现经验

3. 收获真实企业场景项目经验

6. 具备源码级故障处理能力

简介:

首门数据中台实战课,市场稀缺,早学早受益,本课程基于SpringBoot3.0最新技术栈,从0到1整合业务数据,构建企业可复用的数据中台,带你掌握数据中台核心技能体系,具备数据中台架构设计能力,收获真实的企业数据中台开发经验。

适合人群

Java 开发者

想要提升数据中台开发能力的开发者

对数据中台感兴趣人员

技术储备

Java语法基础

了解Spring Boot框架

了解Mybatis-Plus框架

环境参数

SpringBoot 3.0.5

RocketMq 5.0.0

ElasticJob 3.0.3

JDK 17.0.6

IDEA 2022.3

章节目录:

第1章 课程引言

3 节|21分钟

收起

视频:

1-1 课程导学

试看

12:03

视频:

1-2 数据中台项目展示及技术栈梳理

试看

04:32

视频:

1-3 学习建议

04:09

第2章 认知数据中台

4 节|27分钟

收起

视频:

2-1 数据中台的应用及发展趋势

07:52

视频:

2-2 数据中台必备核心能力

06:02

视频:

2-3 对于数据中台的认知误区

05:25

视频:

2-4 可落地的中台建设经验总结

07:04

第3章 数据中台建设 - 前置理论基础

7 节|60分钟

收起

视频:

3-1 本章介绍

01:57

视频:

3-2 元数据:构建数据中台的组件

05:32

视频:

3-3 数据血缘

11:41

视频:

3-4 理解数据生命周期

13:14

视频:

3-5 数据安全策略、数据资产管理、组织架构整合

18:25

视频:

3-6 统一的数据服务体系与数据运营管控

05:47

视频:

3-7 本章总结

02:29

第4章 构建数据模型 - 数据处理的原材料

26 节|330分钟

收起

视频:

4-1 本章介绍

02:42

视频:

4-2 【需求分析】数据中台项目需求分析

06:21

视频:

4-3 【项目架构】项目架构深入剖析与技术解决方案讲解

07:11

视频:

4-4 【数据标准】编写元数据结构 SQL,定义数据使用标准

16:25

视频:

4-5 【数据采集】编写数据采集 SQL,定义采集原始数据方法

06:20

视频:

4-6 【数据计算】编写数据计算规则 SQL,定义指标计算逻辑

06:45

视频:

4-7 【数据存储】编写数据存储规则定义 SQL,定义个性化存储方式

06:00

视频:

4-8 【组织结构】编写组织结构定义 SQL,赋予数据组织形态

04:22

视频:

4-9 【业务规则】编写应用业务规则定义 SQL,连通业务与规则

06:00

视频:

4-10 【环境安装】JDK17安装与IDEA

06:37

视频:

4-11 【环境安装】Maven安装及配置

07:36

视频:

4-12 【项目搭建】项目初始化及测试(一)

20:57

视频:

4-13 【项目搭建】项目初始化及测试(二)

22:02

视频:

4-14 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(一)

17:30

视频:

4-15 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(二)

21:20

视频:

4-16 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(三)

21:10

视频:

4-17 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(四)

18:20

视频:

4-18 【问题补充】遗留问题解答

10:26

视频:

4-19 【问题抛出】数据库实体与数据模型映射存在什么问题?

04:11

视频:

4-20 【基础补充】构建MapStruct示例,深入理解其高性能原理

15:25

视频:

4-21 【基础补充】定义MapStruct映射器(一)

13:54

视频:

4-22 【基础补充】定义MapStruct映射器(二)

13:10

视频:

4-23 【基础补充】MapStruct数据类型转换

25:52

视频:

4-24 【基础补充】MapStruct映射集合

17:36

视频:

4-25 【基础补充】MapStruct自定义映射

20:24

视频:

4-26 【解决方案】Spring Boot集成MapStruct,完美解决数据库与数据模型映射问题

10:39

第5章 数据查询之SpringBoot动态多数据源技术 - 数据处理的助推剂

25 节|339分钟

收起

视频:

5-1 本章介绍

01:12

视频:

5-2 【模型查询】用于承载数据的查询应用规则模型

22:44

视频:

5-3 【模型查询】用于承载数据的查询应用规则模型

20:42

视频:

5-4 【问题抛出及解决方案】为何要使用数据源查询?不同规则下的数据源查询问题?

02:51

视频:

5-5 【基础补充】动态多数据源原理

01:34

视频:

5-6 【基础补充】手撸原生动态多数据源代码(一)

17:37

视频:

5-7 【基础补充】手撸原生动态多数据源代码(二)

15:21

视频:

5-8 【基础补充】Mybatis-Plus实现动态多数据源

17:30

视频:

5-9 【源码分析与源码实战】源码分析Spring Boot动态多数据源原理与实战

20:12

视频:

5-10 【组件解析】动态多数据源结构讲解

02:42

视频:

5-11 【动态配置】动态多数据源配置引入starter机制--创建动态数据源框架(一)

24:58

视频:

5-12 【动态配置】动态多数据源配置引入starter机制--创建动态数据源框架(二)

01:18

视频:

5-13 【框架构建】自定义注解实现 Spring Boot动态多数据源--属性配置

12:09

视频:

5-14 【框架构建】自定义注解实现 Spring Boot动态多数据源--数据源创建(一)

15:17

视频:

5-15 【框架构建】自定义注解实现 Spring Boot动态多数据源--数据源创建(二)

11:13

视频:

5-16 【框架构建】自定义注解实现 Spring Boot动态多数据源--数据源加载

05:33

视频:

5-17 【框架构建】自定义注解实现Spring Boot动态多数据源

18:20

视频:

5-18 【框架构建】自定义注解实现Spring Boot动态多数据源--通知与增强

17:41

视频:

5-19 【框架构建】自定义注解实现Spring Boot动态多数据源--查找当前类及接口方法注解

23:52

视频:

5-20 【框架构建】自定义注解实现Spring Boot动态多数据源--自动装配

18:14

视频:

5-21 【框架构建】自定义注解实现Spring Boot动态多数据源--整合多数据源组件测试

21:05

视频:

5-22 【问题抛出】多数据源事务下事务失效问题?

08:38

视频:

5-23 【解决方案】源码深度适配解决多数据源事务问题(一)

13:45

视频:

5-24 【解决方案】源码深度适配解决多数据源事务问题(二)

13:38

视频:

5-25 【单元测试】多数据集成单元测试

10:35

第6章 分布式调度之ElasticJob - 数据处理的方向盘

18 节|218分钟

收起

视频:

6-1 本章介绍

01:36

视频:

6-2 【环境准备】介绍用户中心服务

04:49

视频:

6-3 【环境安装】Zookeeper安装及简单测试使用

07:12

视频:

6-4 【解决方案】Spring boot 集成 Dubbo完成分布式调用

10:09

视频:

6-5 【组织构建】组装组织结构数据:从组织层面依次进行数据处理(一)

15:55

视频:

6-6 【组织构建】组装组织结构数据:从组织层面依次进行数据处理(二)

17:27

视频:

6-7 【组织构建】组装组织结构数据:从组织层面依次进行数据处理(三)

16:50

视频:

6-8 【参数组装】组装维度及时间数据:准备数据处理的参数

22:36

视频:

6-9 【异步调用】引入异步能力 Spring Boot async 优化数据处理

19:24

视频:

6-10 【数据调度】分布式调度组件 ElasticJob 概述

03:53

视频:

6-11 【基础补充】ElasticJob 技术架构解析

03:27

视频:

6-12 【基础补充】ElasticJob 作业分片调度开发

17:17

视频:

6-13 【案例实现】Spring Boot集成 ElasticJob 案例实现(一)

14:12

视频:

6-14 【案例实现】Spring Boot集成 ElasticJob 案例实现(二)

15:14

视频:

6-15 【案例实现】Spring Boot集成 ElasticJob 案例实现(三)

15:10

视频:

6-16 【解决方案】Spring Boot集成 ElasticJob 进行数据处理调度(一)

16:20

视频:

6-17 【解决方案】Spring Boot集成 ElasticJob 进行数据处理调度(二)

15:05

视频:

6-18 本章总结

01:09

第7章 数据采集 - 数据处理的发动机

15 节|154分钟

收起

视频:

7-1 本章介绍

02:02

视频:

7-2 【数据校验】数据校验处理:统一拦截不符合计算标准的数据(一)

13:51

视频:

7-3 【数据校验】数据校验处理:统一拦截不符合计算标准的数据(二)

13:48

视频:

7-4 【模板构建】构建数据采集器模板

22:08

视频:

7-5 【参数组装】组装基础维度查询 SQL 参数(一)

13:39

视频:

7-6 【参数组装】组装基础维度查询 SQL 参数(二)

14:06

视频:

7-7 【SQL组装】构建基础维度查询 SQL 能力

09:13

视频:

7-8 【结果合并】合并指标查询结果

06:35

视频:

7-9 【异常处理】处理异常或者无意义指标数据值

06:33

视频:

7-10 【参数组装】组装高维度查询 SQL 参数

04:17

视频:

7-11 【SQL组装】处理高维度查询 SQL 能力(一)

14:40

视频:

7-12 【SQL组装】处理高维度查询 SQL 能力(二)

14:01

视频:

7-13 【结果合并】高维度数据指标结果合并

07:08

视频:

7-14 【单元测试】采集集成单元测试

10:23

视频:

7-15 本章总结

01:32

第8章 Google Aviator表达式引擎助力数据运算 - 数据处理的第二把火

15 节|162分钟

收起

视频:

8-1 本章介绍

00:52

视频:

8-2 【问题抛出】数据表达式运算面临的问题?

01:29

视频:

8-3 【解决方案】数据运算问题解决方案:Aviator表达式引擎概述

02:17

视频:

8-4 【基础补充】Google Aviator 引擎常用操作符(一)

15:48

视频:

8-5 【基础补充】Google Aviator 引擎常用操作符(二)

15:58

视频:

8-6 【基础补充】Google Aviator 内置函数(一)

15:02

视频:

8-7 【基础补充】Google Aviator 内置函数(二)

14:37

视频:

8-8 【基础补充】Google Aviator 自定义函数

20:31

视频:

8-9 【基础补充】Google Aviator 表达式引擎实战

12:49

视频:

8-10 【指标计算】数据指标表达式计算逻辑与实现(一)

15:28

视频:

8-11 【指标计算】数据指标表达式计算逻辑与实现(二)

13:52

视频:

8-12 【模板构建】构建数据存储器模板

15:06

视频:

8-13 【指标存储】数据指标存储业务处理

09:37

视频:

8-14 【单元测试】表达式引擎及存储器集成单元测试

06:25

视频:

8-15 本章总结

01:24

第9章 RocketMq助力数据维度升级计算 - 数据处理的最后一把火

15 节|155分钟

收起

视频:

9-1 本章介绍

01:48

视频:

9-2 【问题抛出】低维时间、低维空间如何向高维时间、高维空间升级计算?

02:54

视频:

9-3 【模板构建】构建维度事件升级模板

24:16

视频:

9-4 【解决方案】维度升级解决方案:消息中间件 RocketMq 概述

04:07

视频:

9-5 【架构剖析】RocketMq 架构剖析

04:46

视频:

9-6 【环境安装】RocketMq环境安装及简单测试

12:33

视频:

9-7 【案例实现】Spring Boot集成 RocketMq 案例实现

18:52

视频:

9-8 【基础补充】RocketMq 解决消费重复问题

13:49

视频:

9-9 【基础补充】RocketMq 解决消费事务问题(一)

15:12

视频:

9-10 【基础补充】RocketMq 解决消费事务问题(二)

09:35

视频:

9-11 【消息发送】构建 MQ 消息升级维度数据处理

13:55

视频:

9-12 【消息接收】RocketMq 消息接收器编码及参数封装

09:54

视频:

9-13 【维度升级】组装升级时间维度、空间维度参数

13:49

视频:

9-14 【单元测试】维度升级消息集成单元测试

06:39

视频:

9-15 本章总结

02:18

第10章 项目大成及中台展望 - 数据处理的终点站

13 节|152分钟

收起

视频:

10-1 本章介绍

07:55

视频:

10-2 【环境准备】考勤业务表结构及数据介绍

03:18

视频:

10-3 【接口编写】编写生成业务规则的接口(一)

27:18

视频:

10-4 【接口编写】编写生成业务规则的接口(二)

25:50

视频:

10-5 【接口测试】业务规则接口测试

19:18

视频:

10-6 【SQL校验】引入 SQL 校验能力

13:21

视频:

10-7 【中台赋能】使用数据中台快速对考勤业务赋能

12:30

视频:

10-8 【口径统一】提供统一标准的对外 api 之指标计算结果

15:42

视频:

10-9 【资产统一】提供统一标准的对外 api 之元数据资产目录

05:20

视频:

10-10 【项目总结】项目演示及流程梳理总结

11:01

视频:

10-11 【拓展思考】跨业务数据指标的联合运算拓展与思考

04:11

视频:

10-12 【拓展思考】数据中台权限设计思考

03:34

视频:

10-13 本章总结

02:34

第11章 课程总结

1 节|

收起

图文:

11-1 课程持续更新中

历史上的今天
06月
12
    抱歉,历史上的今天作者很懒,什么都没写!
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。