尚硅谷大数据项目Flink实时数仓2021年9月

课程目录

01_尚硅谷大数据之实时数仓_数据采集层_V2.0.pdf

02_尚硅谷大数据之实时数仓_DWD层数据准备_V2.0.pdf

03_尚硅谷大数据之实时数仓_DWM层业务实现_V2.0.pdf

04_尚硅谷大数据之实时数仓_DWS层业务实现_V2.0.pdf

05_尚硅谷大数据之实时数仓_ClickHouse_V2.0.pdf

06_尚硅谷大数据之实时数仓_数据可视化接口实现_V2.0.pdf

07_尚硅谷大数据之实时数仓_优化_V2.0.pdf

尚硅谷大数据项目之Flink实时数仓.xmind

尚硅谷大数据之实时数仓_FlinkCDC.pdf

实时数仓.png

001-课程介绍.mp4

002-项目介绍.mp4

003-采集模块-课程介绍.mp4

004-采集模块-数仓分层之为什么分层.mp4

005-采集模块-数仓分层之分层明细.mp4

006-采集模块-整体需求介绍.mp4

007-采集模块-离线架构分析之Sqoop&Flume.mp4

008-采集模块-离线架构分析之FlumeTairDirSource问题提出&解决.mp4

009-采集模块-离线架构分析之Kafka.mp4

010-采集模块-离线架构分析之其他.mp4

011-采集模块-实时架构分析.mp4

012-采集模块-架构对比.mp4

013-采集模块-日志数据采集之需求分析.mp4

014-采集模块-日志数据采集之MockJar包测试.mp4

015-采集模块-日志数据采集之SpringBoot简单介绍.mp4

016-采集模块-日志数据采集之SpringBoot创建项目&简单测试.mp4

017-采集模块-日志数据采集之SpringBoot创建项目&加参数测试.mp4

018-采集模块-日志数据采集之数据落盘&写入Kafka 编码.mp4

019-采集模块-日志数据采集之数据落盘&写入Kafka 本地测试.mp4

020-采集模块-日志数据采集之数据落盘&写入Kafka 单机测试.mp4

021-采集模块-日志数据采集之Nginx 介绍.mp4

022-采集模块-日志数据采集之Nginx 安装&启动.mp4

023-采集模块-日志数据采集之Nginx 配置负载均衡&测试.mp4

024-采集模块-日志数据采集之集群测试.mp4

025-采集模块-业务数据采集之建库&建表.mp4

026-采集模块-业务数据采集之FlinkCDC 什么是CDC&对比.mp4

027-采集模块-业务数据采集之FlinkCDC 介绍.mp4

028-采集模块-业务数据采集之FlinkCDC DataStream方式 编码.mp4

029-采集模块-业务数据采集之FlinkCDC DataStream方式 测试.mp4

030-采集模块-业务数据采集之FlinkCDC DataStreamAPI 设置CK&打包&开启集群.mp4

031-采集模块-业务数据采集之FlinkCDC DataStreamAPI 打包进行断点续传测试.mp4

032-采集模块-业务数据采集之FlinkCDC FlinkSQLAPI 编码&测试.mp4

033-采集模块-业务数据采集之FlinkCDC DataStreamAPI 自定义反序列化器 格式说明.mp4

034-采集模块-业务数据采集之FlinkCDC DataStreamAPI 自定义反序列化器 编码完成.mp4

035-采集模块-业务数据采集之FlinkCDC DataStreamAPI 自定义反序列化器 代码测试.mp4

036-采集模块-业务数据采集之FlinkCDC DataStreamAPI&FlinkSQL对比.mp4

037-采集模块-业务数据采集之Maxwell 安装说明&测试.mp4

038-采集模块-业务数据采集之Canal 安装说明&测试.mp4

039-采集模块-业务数据采集之CDC对比.mp4

040-采集模块-业务数据采集之读取MySQL数据并写入Kafka 编码.mp4

041-采集模块-业务数据采集之读取MySQL数据并写入Kafka 测试.mp4

042-DWD&DIM-课程介绍.mp4

043-DWD&DIM-行为数据 需求分析.mp4

044-DWD&DIM-行为数据 思路整理&消费Kafka数据.mp4

045-DWD&DIM-行为数据 将数据转换为JSON对象.mp4

046-DWD&DIM-行为数据 新老用户校验.mp4

047-DWD&DIM-行为数据 侧输出流&写入Kafka.mp4

048-DWD&DIM-行为数据 测试.mp4

049-DWD&DIM-业务数据之需求分析.mp4

050-DWD&DIM-业务数据之代码逻辑梳理.mp4

051-DWD&DIM-业务数据之代码编写 消费数据并过滤.mp4

052-DWD&DIM-业务数据之代码编写 读取配置表创建广播流.mp4

053-DWD&DIM-业务数据之代码编写 配置表字段分析&建表&JavaBean.mp4

054-DWD&DIM-业务数据之代码编写 开启配置表Binlog并测试.mp4

055-DWD&DIM-业务数据之代码编写 连接主流&广播流并分析业务逻辑.mp4

056-DWD&DIM-业务数据之代码编写 创建TableProcessFunction并初始化相关参数.mp4

057-DWD&DIM-业务数据之代码编写 处理广播流数据 解析数据&建表.mp4

058-DWD&DIM-业务数据之代码编写 处理广播流数据 写入状态.mp4

059-DWD&DIM-业务数据之代码编写 处理主流数据 读取状态&过滤字段.mp4

060-DWD&DIM-业务数据之代码编写 处理主流数据 补充SinkTable&分流.mp4

061-DWD&DIM-业务数据之代码编写 检查代码.mp4

062-DWD&DIM-业务数据之代码编写 测试准备.mp4

063-DWD&DIM-业务数据之代码编写 测试.mp4

064-DWD&DIM-业务数据之代码编写 将数据写入HBase 编码.mp4

065-DWD&DIM-业务数据之代码编写 将数据写入Kafka 编码.mp4

066-DWD&DIM-业务数据之整体测试 环境准备.mp4

067-DWD&DIM-业务数据之整体测试 测试完成.mp4

068-ODS&DWD&DIM-小总结.mp4

069-ODS&DWD&DIM-SQL分享 需求说明&建表&导数据.mp4

070-ODS&DWD&DIM-SQL分享 方案一.mp4

071-ODS&DWD&DIM-SQL分享 方案二.mp4

072-ODS&DWD&DIM-SQL分享 HiveOnSpark Bug说明.mp4

073-DWM层-需求分析.mp4

074-DWM层-访客UV 需求分析.mp4

075-DWM层-访客UV 代码编写 消费数据并转换为JSON对象.mp4

076-DWM层-访客UV 代码编写 过滤数据.mp4

077-DWM层-访客UV 代码编写 设置状态超时时间防止状态过大.mp4

078-DWM层-访客UV 代码测试.mp4

079-DWM层-跳出明细 需求分析.mp4

080-DWM层-跳出明细 代码编写.mp4

081-DWM层-跳出明细 代码测试.mp4

082-DWM层-跳出明细 测试.mp4

083-DWM层-跳出明细 CEP 循环模式.mp4

084-DWM层-订单宽表 需求分析.mp4

085-DWM层-订单宽表 双流JOIN 官方文档说明.mp4

086-DWM层-订单宽表 双流JOIN 代码编写.mp4

087-DWM层-订单宽表 双流JOIN 代码测试.mp4

088-DWM层-订单宽表 代码编写 消费Kafka数据&转换JavaBean&提取事件时间.mp4

089-DWM层-订单宽表 代码编写 订单与订单明细表双流JOIN.mp4

090-DWM层-订单宽表 代码测试 准备工作.mp4

091-DWM层-订单宽表 代码测试 测试完成.mp4

092-DWM层-订单宽表 关联维度 思路梳理.mp4

093-DWM层-订单宽表 关联维度 JDBCUtil 返回值&参数说明.mp4

094-DWM层-订单宽表 关联维度 JDBCUtil 查询&封装泛型对象.mp4

095-DWM层-订单宽表 关联维度 JDBCUtil 测试.mp4

096-DWM层-订单宽表 关联维度 DimUtil封装&优化的必要性.mp4

097-DWM层-订单宽表 关联维度 优化1旁路缓存 思路分析.mp4

098-DWM层-订单宽表 关联维度 优化1旁路缓存 Redis工具类&Key的设计.mp4

099-DWM层-订单宽表 关联维度 优化1旁路缓存 代码编写.mp4

100-DWM层-订单宽表 关联维度 优化1旁路缓存 代码测试.mp4

101-DWM层-订单宽表 回顾.mp4

102-DWM层-订单宽表 关联维度 优化2 异步IO说明.mp4

103-DWM层-订单宽表 关联维度 优化2 异步IO编码步骤.mp4

104-DWM层-订单宽表 关联维度 优化2 异步IO编码 初始化函数.mp4

105-DWM层-订单宽表 关联维度 优化2 异步IO编码 异步函数完成.mp4

106-DWM层-订单宽表 关联维度 优化2 异步IO编码 测试准备.mp4

107-DWM层-订单宽表 关联维度 优化2 异步IO编码 测试完成.mp4

108-DWM层-订单宽表 关联维度 补充其他维度信息.mp4

109-DWM层-订单宽表 最终测试.mp4

110-DWM层-订单宽表 不丢维度数据说明.mp4

111-DWM层-支付宽表 需求分析.mp4

112-DWM层-支付宽表 代码编写.mp4

113-DWM层-支付宽表 代码测试.mp4

114-DWM层-支付宽表 时间工具类说明.mp4

115-DWS层-课程介绍.mp4

116-DWS层-访客主题宽表 需求分析.mp4

117-DWS层-访客主题宽表 思路整理&读取Kafka数据.mp4

118-DWS层-访客主题宽表 处理输出流&ｕｎｉｏｎ&提取时间戳分组.mp4

119-DWS层-访客主题宽表 开窗&聚合.mp4

120-DWS层-访客主题宽表 打印测试.mp4

121-DWS层-ClickHouse 课程介绍.mp4

122-DWS层-ClickHouse 概述&特点.mp4

123-DWS层-ClickHouse 安装准备工作.mp4

124-DWS层-ClickHouse 安装&启动.mp4

125-DWS层-ClickHouse 数据类型.mp4

126-DWS层-ClickHouse 简单引擎介绍.mp4

127-DWS层-ClickHouse MergeTree.mp4

128-DWS层-ClickHouse MergeTree之Partition By.mp4

129-DWS层-ClickHouse MergeTree之Primary Key.mp4

130-DWS层-ClickHouse MergeTree之Order By.mp4

131-DWS层-ClickHouse MergeTree之TTL.mp4

132-DWS层-ClickHouse ReplacingMergeTree.mp4

133-DWS层-ClickHouse SummingMergeTree.mp4

134-DWS层-ClickHouse 引擎选择分析.mp4

135-DWS层-ClickHouse SQL操作 一.mp4

136-DWS层-ClickHouse SQL操作 二.mp4

137-DWS层-ClickHouse 副本机制.mp4

138-DWS层-ClickHouse 分片机制 说明.mp4

139-DWS层-ClickHouse 分片机制 实操.mp4

140-DWS层-访客主题 ClickHouseUtil 创建.mp4

141-DWS层-访客主题 ClickHouseUtil 封装.mp4

142-DWS层-访客主题 ClickHouseUtil 封装完成.mp4

143-DWS层-访客主题 ClickHouseUtil 测试完成.mp4

144-DWS层-商品主题 需求分析.mp4

145-DWS层-商品主题 JavaBean说明.mp4

146-DWS层-商品主题 代码编写 思路整理&消费数据创建流.mp4

147-DWS层-商品主题 代码编写 处理页面日志&收藏数据&购物车数据.mp4

148-DWS层-商品主题 代码编写 处理订单&支付数据.mp4

149-DWS层-商品主题 代码编写 处理退单&评价数据.mp4

150-DWS层-商品主题 代码编写 分组开窗&聚合.mp4

151-DWS层-商品主题 代码编写 关联维度&将数据写入ClickHouse.mp4

152-DWS层-商品主题-整体测试.mp4

153-DWS层-商品主题-需求分析.mp4

154-DWS层-商品主题 代码编写 创建环境&使用DDL方式读取Kafka数据.mp4

155-DWS层-商品主题 代码编写 分组开窗聚合.mp4

156-DWS层-商品主题 代码编写 将动态表转换为流并打印.mp4

157-DWS层-商品主题 代码编写 将数据写入ClickHouse&测试.mp4

158-DWS层-关键词主题 需求分析.mp4

159-DWS层-关键词主题 代码编写 分词工具类封装.mp4

160-DWS层-关键词主题 代码编写 分词UDTF.mp4

161-DWS层-关键词主题 代码编写 思路分析&读取数据&建表.mp4

162-DWS层-关键词主题 代码编写 分词&开窗聚合.mp4

163-DWS层-关键词主题 代码编写 动态表转换为流&写入ClickHouse.mp4

164-DWS层-关键词主题 代码测试.mp4

165-数据可视化-课程介绍.mp4

166-数据可视化-Sugar 创建大屏.mp4

167-数据可视化-Sugar 使用步骤介绍.mp4

168-数据可视化-数据接口 项目构建.mp4

169-数据可视化-数据接口 依赖导入&分层说明.mp4

170-数据可视化-数据接口 GMV接口 Mapper完成.mp4

171-数据可视化-数据接口 GMV接口 Service&Controller完成.mp4

172-数据可视化-数据接口 GMV接口 测试.mp4

173-数据可视化-数据接口 GMV接口 对接Sugar.mp4

174-数据可视化-数据接口 品牌GMV接口 Mapper完成.mp4

175-数据可视化-数据接口 品牌GMV接口 Service完成.mp4

176-数据可视化-数据接口 品牌GMV接口 Controller完成.mp4

177-数据可视化-数据接口 品牌GMV接口 测试完成.mp4

178-数据可视化-数据接口 品牌GMV接口 对接Sugar.mp4

179-数据可视化-数据接口 导入代码&品类GMV&SPU GMV.mp4

180-数据可视化-数据接口 其他需求图表.mp4

181-数据可视化-最终测试.mp4

182-Flink优化-课程介绍.mp4

183-Flink优化-资源优化之内存设置.mp4

184-Flink优化-资源优化之并行度设置.mp4

185-Flink优化-资源优化之RockDB配置.mp4

186-Flink优化-资源优化之CheckPoint配置.mp4

187-Flink优化-资源优化之ParameterTool的介绍.mp4

188-Flink优化-反压处理之反压介绍&定位.mp4

189-Flink优化-反压处理之反压问题解决.mp4

190-Flink优化-数据倾斜之定位问题.mp4

191-Flink优化-数据倾斜之KeyBy之前的数据倾斜.mp4

192-Flink优化-数据倾斜之KeyBy之后直接聚合.mp4

193-Flink优化-数据倾斜之KeyBy之后开窗聚合.mp4

194-Flink优化-KafkaSource.mp4

195-Flink优化-FlinkSQL优化之MiniBatch.mp4

196-Flink优化-FlinkSQL优化之LocalGlobal.mp4

197-Flink优化-FlinkSQL优化之SplitDistinct.mp4

198-Flink优化-FlinkSQL优化之Agg With Filter.mp4

199-Flink优化-FlinkSQL优化之TopN优化.mp4

200-Flink优化-FlinkSQL优化之去重方案&其他.mp4

git.txt

资料.tar