共计 4735 个字符，预计需要花费 12 分钟才能阅读完成。
前几天把跨年搞的和人生分水岭似的
那么，2023 年的你有什么不一样了吗？
是不是还和去年一样的造型？新姿态，学起来！
腾讯云开发者社区带着干货来了，腾讯云×尚硅谷大数据研究院强强联手，重磅推出新年第一弹：
腾讯云 EMR 数仓教程公布
腾讯云开发者社区“公开课”中转：
腾讯云开发者公开课 – 腾讯云开发者社区 - 腾讯云
这套教程由腾讯云官网与尚硅谷大数据研究院联合推出，分为实时及离线两局部。
实时数仓依靠国内电商巨头的实在业务场景，基于各大互联网企业对于腾讯云 EMR 架构体系的需要，将整个电商的实时数据仓库体系搭建在腾讯云架构上。教程全方面实现了整个实时数据仓库架构的海量数据采集、存储、计算以及可视化展现，整个业务流程全副搭建在腾讯云服务器上，并全副采纳腾讯云 EMR 的服务组件，将各 EMR 服务组件进行充沛联动。
离线数仓则基于腾讯云 EMR 平台买通数据采集通道，从数仓建模到逐层构建离线数仓，领有残缺的数仓建模实践及建模过程，且在构建过程中采纳了 EMR 平台组件和原生组件相结合的形式，让企业在组件抉择上更加灵便。
我的项目文档依照出书规范编写，具体解说一行一行手敲代码，内容全面且粗疏，教程附赠全套视频、文档、代码、材料。通过本套教程的学习，你能够全方位把握腾讯云的大数据服务组件应用和调优！
【教程简介】
实时数仓课程介绍
离线数仓课程介绍
在“腾讯云开发者”公众号发送“数仓建设”或扫码退出“腾讯云大数据 EMR 交换群”收费获取全套教程，群内提供腾讯云官网大数据团队导师全程领导及技术交换
【教程目录】
实时数仓：
001. 腾讯云 EMR 实时数仓教程简介
002. 需要及架构 - 简介
003. 需要及架构 - 课程目标
004. 需要及架构 - 数据仓库概念
005. 需要及架构 - 我的项目需要
006. 需要及架构 - 技术选型
007. 需要及架构 - 数据流程设计
008. 需要及架构 - 框架的版本选型
009. 需要及架构 - 服务器选型
010. 需要及架构 - 集群规模及集群布局
011. 需要及架构 - 电商业务简介
012. 需要及架构 -EMR 的购买与启动
013. 需要及架构 -EMR 集群简略阐明
014. 需要及架构 - 应用 XShell 连贯服务
015. 需要及架构 - 批改主机映射 & 配置无密登录
016. 需要及架构 - 电商业务数据阐明
017. 需要及架构 - 上传材料包
018. 需要及架构 -MySQL 的装置与启动
019. 需要及架构 -MySQL 批改明码 & 近程拜访
020. 需要及架构 - 生成业务数据
021. 需要及架构 -Kafka 装置
022. 需要及架构 -Kafka 配置环境变量 & 群起
023. 需要及架构 - 同步策略 & 开启 MySQL Binlog
024. 需要及架构 -Flink 装置
025. 需要及架构 - 我的项目构建
026. 需要及架构 -FlinkCDC 代码解说 & 本地测试
027. 需要及架构 -FlinkCDC 代码近程测试
028. 实时数仓搭建 - 课程介绍
029. 实时数仓搭建 - 分层框架 -ODS&DIM 层
030. 实时数仓搭建 -DWD&DWS&ADS 层
031. 实时数仓搭建 - 架构剖析
032. 实时数仓搭建 - 筹备工作
033. 实时数仓搭建 - 具体工作
034. 实时数仓搭建 -HBase 部署
035. 实时数仓搭建 -HBase 启动 & 测试
036. 实时数仓搭建 -IDEA 代码环境阐明
037. 实时数仓搭建 -Phoenix 部署
038. 实时数仓搭建 -Phoenix 启动
039. 实时数仓搭建 -Redis 部署
040. 实时数仓搭建 -Redis 启动 & 测试
041. 实时数仓搭建 -ClickHouse 装置 & 启动 & 测试
042. 实时数仓搭建 - 课程阐明
043. 实时数仓搭建 -DIM 层 - 思路剖析 1
044. 实时数仓搭建 -DIM 层 - 思路剖析 2
045. 实时数仓搭建 -DIM 层 - 思路剖析 3
046. 实时数仓搭建 -DIM 层 - 思路整顿
047. 实时数仓搭建 -DIM 层 - 生产 & 过滤 & 转换数据
048. 实时数仓搭建 -DIM 层 - 配置信息表
049. 实时数仓搭建 -DIM 层 - 读取配置信息 & 解决成播送流
050. 实时数仓搭建 -DIM 层 - 解决连贯流 - 思路剖析
051. 实时数仓搭建 -DIM 层 - 解决连贯流 - 播送流 - 解析数据
052. 实时数仓搭建 -DIM 层 - 解决连贯流 - 播送流 - 校验并建表
053. 实时数仓搭建 -DIM 层 - 解决连贯流 - 播送流 - 写入状态
054. 实时数仓搭建 -DIM 层 - 解决连贯流 - 支流 - 读取状态 & 过滤数据
055. 实时数仓搭建 -DIM 层 - 解决连贯流 - 支流 - 补充字段并写出数据
056. 实时数仓搭建 -DIM 层 - 将数据写出到 Phoenix- 编码
057. 实时数仓搭建 -DIM 层 - 将数据写出到 Phoenix- 测试
058. 实时数仓搭建 -DIM 层 - 将数据写出到 Phoenix- 打包上传集群
059. 实时数仓搭建 -DWD 层 - 用户域用户注册代码解说
060. 实时数仓搭建 -DWD 层 - 前置常识 -WindowJOIN- 阐明
061. 实时数仓搭建 -DWD 层 - 前置常识 -IntervalJOIN- 阐明
062. 实时数仓搭建 -DWD 层 - 前置常识 -IntervalJOIN- 编码
063. 实时数仓搭建 -DWD 层 - 前置常识 -IntervalJOIN- 测试
064. 实时数仓搭建 -DWD 层 - 交易域加购事实表
065. 实时数仓搭建 -DWD 层 - 工具域领券事实表
066. 实时数仓搭建 -DWD 层 - 互动域评估事实表
067. 实时数仓搭建 -DWD 层 - 交易域订单事实表
068. 实时数仓搭建 -DWS 层 - 整体介绍
069. 实时数仓搭建 -DWS 层 - 用户域用户注册根底代码
070. 实时数仓搭建 -DWS 层 -ClickHouse 工具类 1
071. 实时数仓搭建 -DWS 层 -ClickHouse 工具类 2
072. 实时数仓搭建 -DWS 层 -ClickHouse 工具类 3
073. 实时数仓搭建 -DWS 层 - 交易域加购需要根底代码
074. 实时数仓搭建 -DWS 层 - 交易域 SKU 粒度下单需要前置阐明
075. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 需要剖析 1
076. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 需要剖析 2
077. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 思路整顿
078. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 -JavaBean 封装
079. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 读取 & 转换 & 过滤 & 分组数据
080. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 -left join 反复数据去重
081. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 分组 & 开窗 & 聚合
082. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 两头测试
083. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表阐明
084. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 -JDBCUtil 封装 1
085. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 -JDBCUtil 封装 2
086. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 -JDBCUtil 测试 & 再封装
087. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 优化的必要性
088. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 旁路缓存 - 阐明
089. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 旁路缓存 - 读写编码
090. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 旁路缓存 - 读写测试
091. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 旁路缓存 - 删除缓存数据
092. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 旁路缓存 - 删除缓存数据 测试
093. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 异步 IO- 阐明
094. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 异步 IO-API 阐明
095. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 异步 IO- 线程池工具类
096. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 异步 IO- 异步函数 1
097. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 异步 IO- 异步函数 2
098. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 异步 IO- 异步函数 3
099. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 异步 IO- 异步函数 4
100. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 残缺测试
101. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 测试筹备工作
102. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联维表 - 测试实现
103. 实时数仓搭建 -DWS 层 - 交易域 -SKU 粒度下单需要 - 关联其余维表 & 写出数据
104. 实时数仓搭建 - 可视化展现 - 课程介绍
105. 实时数仓搭建 - 可视化展现 - 工作介绍
106. 实时数仓搭建 - 可视化展现 -Sugar 根本介绍
107. 实时数仓搭建 - 可视化展现 -Web 我的项目根本阐明
108. 实时数仓搭建 - 可视化展现 - 构建 SpringBoot Web 模块
109. 实时数仓搭建 - 可视化展现 - 初体验 SpringBoot Web 模块
110. 实时数仓搭建 - 可视化展现 - 再体验 SpringBoot Web 模块
111. 实时数仓搭建 - 可视化展现 -GMV 需要 -Mapper 实现
112. 实时数仓搭建 - 可视化展现 -GMV 需要 -Service 实现
113. 实时数仓搭建 - 可视化展现 -GMV 需要 -Controllrt 实现
114. 实时数仓搭建 - 可视化展现 -GMV 需要 - 接口测试实现
115. 实时数仓搭建 - 可视化展现 -GMV 需要 - 对接 Sugar 测试实现
离线数仓：
01. 腾讯云 EMR 离线数仓教程简介
02. 采集模块介绍
03. 课程目标
04. 数据仓库概念
05. 我的项目需要
06. 技术选型
07. 数据流程设计
08. 框架版本选型
09. 服务器选型
10. 集群规模 & 布局
11. 电商业务简介
12. 选购 EMR 集群
13. 近程连贯
14. 批改主机名
15. 配置主机映射
16. 配置免密登录
17. 电商业务数据分析
18. 上传材料包
19.MySQL 装置与启动
20. 近程连贯 MySQL& 建库建表
21. 业务数据生成
22.Kafka 服务装置
23.Kafka 服务群起 & 测试
24.Flume& 同步策略和工具概述
25. 开启 MySQL Binlog 配置信息
26. 开启 MySQL Binlog 测试
27. 应用 Sqoop 实现全量数据同步
28. 增量数据同步数据通道
29.Flink 部署
30.FlinkCDC 简略代码阐明
31.FlinkCDC 简略代码本地测试
32.FlinkCDC 残缺代码阐明
33.FlinkCDC 残缺代码打包测试
34.Flume 配置文件
35. 增量数据同步测试
36.Flume 脚本实现
37. 构建离线数仓文档阐明
38. 数据仓库概述
39. 建模筹备工作
40. 建模具体工作
41.Hive 环境筹备 - 批改配置
42.Hive 环境筹备 - 测试
43.Yarn 环境筹备
44. 开发环境筹备阐明
45.ODS 层 - 建表
46.ODS 层 - 装载数据
47.DIM 层 - 商品维度表
48.DIM 层 - 优惠券维度表
49.DIM 层 - 流动维度表
50.DIM 层 - 地区维度表
51.DIM 层 - 用户维度表
52.DWD 层 - 加购事实表
53.DWD 层 - 下单事实表
54.DWD 层 - 勾销订单事实表
55.DWD 层 - 其余事实表 & 脚本封装
56.DWD 层 - 数据展现
57.DWS 层 - 交易域用户商品粒度订单需要 - 需要剖析
58.DWS 层 - 交易域用户商品粒度订单需要 - 建表 & 装载数据
59.DWS 层 - 交易域用户商品粒度退单需要 - 建表 & 装载数据
60.ADS 层 - 品牌订单统计
61.ADS 层 - 交易综合统计
62. 数据可视化 - 建表 & 导出数据
63. 数据可视化 - 最终总结
扫码或猛击原文