课程简介：

全新的版本！全新的内容！Flink实时数仓项目4.0带来全新升级，完全对标企业实际开发场景，为你带来不一样的学习体验！

本套项目教程以电商采集项目为前置基础，整体内容分为三大部分：实时数仓架构介绍、数仓模型搭建、Suger可视化大屏展示。教程通过精炼的业务体系逻辑，带你快速掌握实时数仓所使用的技术手段。使用到的框架包括：Hadoop、Kafka、Flume、Maxwell、Flink、HBase、Redis、Doris、Suger、StreamPark等。

相较于Flink实时数仓项目3.0版本，本项目采用企业级分模块开发部署方式，使用了新版的Flink 1.17，自主部署了GitLab，同时采用GitFlow任务流的形式，来对整体项目进行版本控制，最终采用StreamPark框架，将整个项目在线部署至YARN集群，提供在线监控、自动告警等功能。

课程目录：

├──01_Flink最新电商数据课程介绍.mp4 21.33M
├──02_实时数仓和离线数仓的概述区别.mp4 27.95M
├──03_实时数仓的完整架构.mp4 54.36M
├──04_实时数仓选型-doris简介.mp4 30.55M
├──05_实时数仓框架选型-ods dwd和dim.mp4 47.55M
├──06_实时数仓框架选型-dws和ads及最终步骤.mp4 29.21M
├──07_实时数仓和实时计算及离线计算的比较.mp4 14.12M
├──08_数仓建模回顾.mp4 71.02M
├──09_数仓设计回顾.mp4 51.35M
├──10_实时数仓最新代码结构介绍.mp4 30.43M
├──11_git分支流程介绍.mp4 31.16M
├──12_idea中的代码结构部署.mp4 69.87M
├──13_gitlab的安装部署.mp4 543.23M
├──14_gitlab用户创建和管理.mp4 71.38M
├──15_gitlab兼容IDEA实现提交推送项目.mp4 36.80M
├──16_实时数仓架构搭建-flink和hbase的安装部署.mp4 93.52M
├──17_实时数仓架构搭建-redis的安装部署.mp4 170.41M
├──18_ODS_确保数据源时间有序的方法介绍.mp4 41.37M
├──19_ODS_数据生成同步方法介绍.mp4 40.68M
├──20_DIM_flink处理数据的固定流程.mp4 74.76M
├──21_DIM_baseAPP使用演示.mp4 64.43M
├──22_DIM_基类添加webUI页面介绍.mp4 24.06M
├──23_DIM_common模块封装常量类和source方法.mp4 69.31M
├──24_DIM_动态拆分维度表功能实现的选择介绍.mp4 54.07M
├──25_DIM_flinkCDC使用介绍及数据展示.mp4 103.86M
├──26_DIM_核心业务逻辑介绍.mp4 26.71M
├──27_DIM_对主流数据进行清洗过滤.mp4 134.18M
├──28_DIM_读取配置表数据.mp4 57.81M
├──29_DIM_HBase创建关闭连接.mp4 502.71M
├──30_DIM_HBase创建表格.mp4 433.40M
├──31_DIM_HBase删除表格API编写.mp4 23.01M
├──32_DIM_使用配置流信息创建HBase表格.mp4 75.31M
├──33_DIM_动态拆分维度表基础功能实现.mp4 147.65M
├──34_DIM_使用JDBC工具预加载配置表信息避免主流数据丢失.mp4 96.46M
├──35_DIM_预加载配置表信息避免数据丢失功能实现.mp4 79.42M
├──36_DIM_HBase写入数据和删除数据的方法编写.mp4 87.21M
├──37_DIM_写出数据到HBase的代码编写.mp4 31.94M
├──38_DIM_写出数据到HBase的演示.mp4 35.88M
├──39_DIM_代码与功能回顾.mp4 93.01M
├──40_DWD_数据源分析.mp4 77.99M
├──41_DWD_日志拆分需求代码结构介绍.mp4 35.65M
├──42_DWD_日志拆分需求分析.mp4 42.19M
├──43_DWD_日志拆分需求数据清洗ETL处理.mp4 56.90M
├──44_DWD_日志拆分需求新旧访客修改代码实现.mp4 94.63M
├──45_DWD_日志拆分需求新旧访客修复代码测试.mp4 256.29M
├──46_DWD_日志拆分需求完成拆分.mp4 164.37M
├──47_DWD_日志拆分业务实现.mp4 57.31M
├──48_DWD_flinkSQL的使用架构.mp4 72.24M
├──49_DWD_flinkSQL读取不同的数据源数据.mp4 52.70M
├──50_DWD_flinkSQL完成两种表格的join操作.mp4 69.48M
├──51_DWD_flinkSQL的基础原理介绍.mp4 46.67M
├──52_DWD_LookUp join使用场景介绍.mp4 82.35M
├──53_DWD_LookUp join具体使用演示.mp4 36.75M
├──54_DWD_baseSQLApp封装读取topicdb方法.mp4 45.24M
├──55_DWD_baseSQLAPP封装实现及使用方法.mp4 22.46M
├──56_DWD_评论事实表完成HBase的lookup_join.mp4 91.25M
├──57_DWD_评论事实表完成数据写出.mp4 63.55M
├──58_DWD_筛选加购事务表明细数据.mp4 100.40M
├──59_DWD_加购事务事实表编写完成.mp4 49.05M
├──60_DWD_下单事务事实表需求分析.mp4 33.71M
├──61_DWD_下单事务事实表内连接关联订单表和订单详情表.mp4 92.39M
├──62_DWD_下单明细表完成四个表格的join操作.mp4 69.34M
├──63_DWD_下单明细表写出到kafka实现.mp4 79.66M
├──64_DWD_取消订单事实表需求分析.mp4 36.69M
├──65_DWD_支付成功事实表需求分析.mp4 50.39M
├──66_DWD_支付成功需求筛选支付成功数据.mp4 44.49M
├──67_DWD_支付成功需求三张表格数据准备.mp4 42.67M
├──68_DWD_支付成功需求使用interval join完成表格关联.mp4 110.82M
├──69_DWD_支付成功需求使用lookupJoin完成维度退化.mp4 38.38M
├──70_DWD_支付成功需求写出数据.mp4 177.25M
├──71_DWD_base_db表格处理需求分析.mp4 32.07M
├──72_DWD_base_db需求读取主流和配置表数据.mp4 84.69M
├──73_DWD_base_db合并处理事实表数据.mp4 89.26M
├──74_DWD_base_db数据写出.mp4 114.56M
├──75_DWS_doris简介.mp4 37.79M
├──76_DWS_doris部署上传解压操作.mp4 101.23M
├──77_DWS_doris部署前端.mp4 36.89M
├──78_DWS_doris单台后端的安装部署.mp4 42.19M
├──79_DWS_doris的be扩容.mp4 58.83M
├──80_DWS_doris的be缩容.mp4 16.17M
├──81_DWS_doris的fe扩容.mp4 52.56M
├──82_DWS_doris的fe缩容及群起脚本.mp4 20.83M
├──83_DWS_doris的数据模型agg模型介绍.mp4 114.56M
├──84_DWS_doris的分区分桶.mp4 55.73M
├──84_DWS_doris的数据模型唯一与可重复模型介绍.mp4 17.10M
├──86_DWS_doris的复合分区和多列分区介绍.mp4 25.17M
├──87_DWS_doris的动态分区原理介绍.mp4 44.40M
├──88_DWS_doris的动态分区使用介绍.mp4 32.48M
├──89_DWS_doris的rollup介绍.mp4 51.00M
├──90_DWS_doris的物化视图.mp4 58.03M
├──91_DWS_热词开窗统计需求分析及IK分词器介绍.mp4 57.90M
├──92_DWS_热词开窗统计筛选关键字.mp4 119.66M
├──93_DWS_自定义UDTF函数方法介绍.mp4 72.66M
├──94_DWS_完成关键词的拆分工作.mp4 23.67M
├──95_DWS_关键字分组开窗聚合统计.mp4 59.68M
├──96_DWS_关键词开窗统计数据写出到doris.mp4 145.90M
├──97_DWS_流量域各粒度用户页面访问窗口聚合需求分析.mp4 25.68M
├──98_DWS_流量域各粒度用户页面访问窗口聚合得到独立访客和会话数.mp4 139.58M
├──99_DWS_流量域各粒度用户访问分组开窗聚合代码实现.mp4 84.56M
├──100_DWS_流量域各粒度用户访问数据写出到doris.mp4 141.71M
├──101_DWS_流量域各粒度用户访问数据添加状态存活时间.mp4 22.07M
├──102_DWS_首页详情页独立访客统计需求分析.mp4 60.76M
├──103_DWS_首页详情页独立访客判断代码实现.mp4 98.41M
├──104_DWS_首页详情页独立访客数据写出到doris.mp4 139.11M
├──105_DWS_用户登录统计需求分析.mp4 33.98M
├──106_DWS_用户登录统计需求过滤数据.mp4 64.84M
├──107_DWS_用户登录统计判断独立用户和回流用户.mp4 193.09M
├──108_DWS_用户登录统计数据聚合写出到doris.mp4 71.09M
├──109_DWS_用户注册统计需求分析.mp4 30.15M
├──110_DWS_用户注册需求实现.mp4 170.39M
├──111_DWS_用户加购需求分析和结构搭建.mp4 32.36M
├──112_DWS_用户加购需求实现数据写出.mp4 139.09M
├──113_common模块回顾.mp4 93.76M
├──114_dim和dwd模块代码回顾.mp4 68.18M
├──115_dws模块回顾.mp4 22.76M
├──116_DWS_sku商品下单需求分析.mp4 54.64M
├──117_DWS_sku商品粒度过滤添加水位线.mp4 89.54M
├──118_DWS_sku商品粒度度量值修复.mp4 188.58M
├──119_DWS_商品粒度聚合统计.mp4 51.92M
├──120_DWS_维度关联补全sku_info信息.mp4 193.97M
├──121_DWS_完整维度信息关联编写.mp4 47.01M
├──122_DWS_补全维度信息写出到doris.mp4 84.45M
├──123_DWS_旁路缓存原理介绍.mp4 30.53M
├──124_DWS_添加redis作为旁路缓存.mp4 153.23M
├──125_DWS_修改变更维度数据的一致性.mp4 184.90M
├──126_DWS_度量值去重回顾.mp4 59.12M
├──127_DWS_旁路缓存回顾.mp4 47.16M
├──128_DWS_异步IO介绍.mp4 30.13M
├──129_DWS_异步连接的获取.mp4 36.54M
├──130_DWS_flink异步算子使用编写.mp4 151.06M
├──131_DWS_flink异步算子实现维度关联.mp4 42.83M
├──132_DWS_模板方法初步封装.mp4 112.97M
├──133_DWS_完整封装模板方法实现维度关联.mp4 91.77M
├──134_DWS_各省份下单需求数据获取清洗.mp4 51.47M
├──135_DWS_各省份下单需求聚合统计.mp4 110.15M
├──136_DWS_各省份窗口下单聚合统计.mp4 81.96M
├──137_项目部署上线介绍.mp4 37.25M
├──138_streamPark概述介绍.mp4 26.26M
├──139_streamPark的解压部署.mp4 46.09M
├──140_streamPark的安装部署.mp4 41.12M
├──141_streamPark使用设置.mp4 154.02M
├──142_streamPark编译部署项目.mp4 289.45M
├──143_streamPark上线任务演示.mp4 101.37M
├──144_streamPark使用检查点重启任务.mp4 15.49M
├──145_合并gitlab代码请求.mp4 26.26M
├──146_可视化展示总体介绍.mp4 16.50M
├──147_可视化展示sugar使用方法介绍.mp4 37.33M
├──148_spring-boot数据接口上手.mp4 454.76M
├──149_内网穿透访问本机.mp4 60.00M
├──150_可视化实现省份订单数展示.mp4 39.98M
├──151_Flink实时数仓整体回顾.mp4 48.25M
├──152_Flink实时数仓代码结构设计回顾.mp4 49.89M
├──153_GitFlow工作流回顾.mp4 25.51M
├──154_ODS层回顾.mp4 29.20M
├──155_DIM和DWD回顾.mp4 82.19M
├──156_DWS回顾.mp4 81.42M
├──157_部署及可视化回顾.mp4 25.19M
├──笔记.zip 40.41M
└──代码.zip 228.36kb
├──软件
| ├──1.jdk.exe 186.29M
| ├──10.redis.exe 2.45M
| ├──12.flink.exe 447.98M
| ├──14.streampark.exe 206.48M
| ├──3.flume.exe 85.17M
| ├──4.kafka.exe 100.53M
| ├──5.zookeeper.exe 12.37M
| ├──7.maxwell.exe 63.20M
| ├──8.mock.exe 34.87M
| └──9.hbase.exe 270.60M