Java大数据实战数仓项目《金融审批实时数仓+离线数仓》（代码+资料+笔记）

金融审批实时数仓项目共分三大部分:实时数仓架构介绍、数仓模型搭建、Sugar可视化大屏展示。金融审批实时数仓项目延续了离线数仓的业务逻辑，以金融租赁业务线为主题，从审批流程一直到设备租赁，完整地对金融租赁业务进行了各个流程的实时数据分析。
项目以金融审批采集项目为前置基础，使用采集项目中搭建的虚拟机环境，读取采集项目实时监控的业务数据，对数据进行实时的分析计算，最终得到指标需求结果，写出到Doris之后，使用Sugar进行可视化展示。
项目使用的框架包括:Hadoop、Kafka、Flume、Maxwell、Flink、HBase、Phoenix、Redis、Doris、Sugar等。整套教程通过精炼的业务体系逻辑，帮助学习者快速掌握实时数仓所使用的技术手段。

课程目录：
金融审批实时数仓
01_金融审批实时数仓课程介绍.mp4
02_采集平台内容回顾.mp4
03_金融审批实时数仓搭建概;念介绍.mp4
04_金融审批实时数仓基础架构介绍.mp4
05_金融审批实时数仓具体开发层级介绍.mp4
06_数仓建模ER模型介绍.mp4
07_数仓建模ER模型三范式介绍.mp4
08_数仓建模维度模型介绍.mp4
09_维度建模事实表简单概述.mp4
10_维度建模事务型事实表介绍.mp4
11_维度建模周期快照事实表,mp4
12_维度建模累积快照事实表.mp4
13_维度建模维度表设计流程.mp4
14 维度表设计规范化和反规范化.mp4
15_维度表设计维度变化的选择.mp4
16_维度表设计多值维度和多值属性.mp4
17_数仓分层规划介绍.mp4
18_数仓构建流程简单介绍.mp4
19_数仓构建数据调研.mp4
20_数仓构建明确数据域.mp4
21_数仓构建业务总线矩阵和维度模型设计.mp4
22_数仓构建指标分析和汇总模型设计.mp4
23_IDEA环境准备,mp4
24_flink的环境准备.mp4
25_hbase的环境部署.mp4
26_redis的环境部署.mp4
27_doris的fe部署.mp4
28_doris的be集群安装部署,mp4
29_doris的be集群bug解决.mp4
30_实时数仓ODS层开发.mp4
31_dim_动态拆分维度表原理介绍.mp4
32_dim_动态拆分维度表整体流程介绍.mp4
33_dim_flinkCDC的基础介绍.mp4
34_dim_flinkCDC的使用演示.mp4
35_dim_flink读取kafka数据.mp4
36_dim整体流程介绍及封装创建环境方法.mp4
37_dim_工具类读取topic_db原始数据.mp4
38_dim_读取mysql配置表数据.mp4
39_dim_hbase创建关闭连接方法封装.mp4
40_dim_hbase创建表格的代码实现.mp4
41_dim_完成hbase创建表格的流程.mp4
42_dim_合并两条流的数据确定处理方法.mp4
43_dim_处理合并流数据的核心方法编写.mp4
44_dim_初始化配置数据解决主流数据过早到的问题,mp4
45_dim_写出数据函数结构编写.mp4
46_dim_hbase删除写入数据方法编写.mp4
47_dim_数据写出演示.mp4
48_dwd_整体流程介绍.mp4
49_dwd_读取业务数据筛选业务表格.mp4
50_dwd_按照授信id进行分组.mp4
51_dwd_动态分流数据状态介绍.mp4
52_dwd_完成数据分流的结构介绍.mp4
53_dwd_审批三种状态的数据处理.mp4
54_dwd_添加批复状态补全审批通过的信息.mp4
55_dwd_审批通过与新增授信合同制作数据先后问题.mp4
56_dwd_审批拒绝和审批取消的数据处理方式.mp4
57_dwd_批复数据后到的处理方式.mp4
58_dwd_授信表数据后到的处理编写.mp4
59_dwd_审批域数据写出到对应的kafka主题.mp4
60_dwd_授信域数据分流写出到对应的kafka主题.mp4
61_dwd_合并合同制作及合同表数据流.mp4
62_dwd_分流处理租赁域数据架构.mp4
63_dwd_完成租赁域数据分流.mp4
64_dwd_租赁域数据写出.mp4
65_dwd_数据测试及bug解决.mp4
66_dws_审批通过各行业各方向各信审经办窗口统计结构介绍.mp4
67_dws_审批通过聚合读取数据及类型转换.mp4
68_dws_审批通过数据分组开窗聚合.mp4
69_dws_使用泛型异步读取dim层数据介绍.mp4
70_dws_hbase的异步连接及读取数据架构介绍.mp4
71_dws_实现三级行业名称和二级行业ID的维度关联.mp4
72_dws_使用redis实现旁路缓存优化.mp4
73_dws_完成全部的维度关联.mp4
74_dws_自定义工具将bean转jsonString.mp4
75_dws_自定义注解过滤不需要的属性.mp4
76 dws 将窗口聚合数据写出到doris中.mp4
77_dws_审批取消各维度窗口聚合代码编写.mp4
78_dws_审批取消业务关联维度数据及写出到doris.mp4
79_dws_审批拒绝窗口汇总聚合.mp4
80_dws_信审经办审批通过的窗口聚合数据.mp4
81_dws_信审经办业务员审批通过数据写出.mp4
82_dws_信审经办粒度审批取消窗口汇总.mp4
83_dws_信审经办粒度拒绝窗口汇总.mp4
84_dws_授信新增窗口汇总.mp4
85_dws_授信占用窗口汇总.mp4
86_dws_合同制作窗口汇总.mp4
87_dws_合同签约各窗口汇总.mp4
88_dws_合同起租各窗口汇总.mp4
89_可视化_suger使用方式介绍.mp4
90_可视化_数据接口的结构介绍.mp4
91_可视化_内网穿透介绍,mp4
92_可视化_渐变色各方向审批通过图形可视化展示.mp4

金融审批离线数仓
01_金融审批数仓课程介绍.mp4
02_数据仓库概述.mp4
03_数据仓库项目需求介绍.mp4
04_数据仓库技术选型.mp4
05_数据仓库整体流程设计.mp4
06_框架版本选择介绍.mp4
07_服务器选型介绍.mp4
08_集群资源规划设计.mp4
09_金融租赁业务简单介绍.mp4
10_金融租赁业务流程简单介绍.mp4
11_金融租赁业务流程细节内容介绍.mp4
12_金融审批表结构介绍.mp4
13_环境准备_使用模板机创建3台虚拟机.mp4
14_环境准备_使用阿里云简介.mp4
15_环境准备_集群分发脚本配置及使用.mp4
16_ssh免密登录的配置,mp4
17_ssh免密登录的使用.mp4
18_jdk的安装部署,mp4
19_环境变量配置的介绍.mp4
20_集群查看脚本编写.mp4
21_hadoop部署_基础配置文件编写.mp4
22_hadoop的安装部署及启动.mp4
23_hadoop的群起群停脚本介绍,mp4
24_hadoop的参数调优,mp4
25_mysql的安装部署.mp4
26_数据生成脚本介绍.mp4
27_使用ezdml梳理业务表格关系.mp4
28_zookeeper的安装部署介绍.mp4
29_zookeeper的客户端使用.mp4
30_kafka的安装部署.mp4
31_kafka的启动停止以及群起群停脚本编写.mp4
32_kafka的基础命令行操作演示.mp4
33_flume的安装部署.mp4
34_flume的内存调优经验介绍.mp4
35_maxwell的简单介绍.mp4
36_maxwell的原理介绍.mp4
37_maxwell的安装部署.mp4
38_maxwell的启动和使用展示.mp4
39_maxwell的停止和脚本介绍,mp4
40_maxwell的bootstrap功能.mp4
41_数据同步策略介绍.mp4
42_数据同步工具选择.mp4
43_datax的基础介绍.mp4
44_datax架构原理.mp4
45_datax运行流程.mp4
46 datax的安装部署及使用方法介绍.mp4
47_datax同步mysql数据到hdfs.mp4
48_datax解决同步null不同步的问题,mp4
49_datax的querySQL模式和配置文件传参,mp4
50_使用datax完成hdfs数据导出到mysql.mp4
51_datax的优化及内存调节.mp4
52_同步全量表数据演示.mp4
53 datax自动生成配置文件演示.mp4
54_datax全量导入数据脚本单表导入方法编写.mp4
55_datax全量导入数据多表导入及功能完善.mp4
56_增量数据采集的flume配置文件编写.mp4
57_增量数据采集flume拦截器功能介绍.mp4
58_增量数据采集flume拦截器代码编写.mp4
59_业务数据flume拦截器的使用.mp4
60_增量业务数据采集的flume启停脚本.mp4
61_增量业务数据首日全量同步脚本运行.mp4
62_hive的安装部署.mp4
63_离线数仓的概述及核心架构.mp4
64_数仓建模ER模型介绍.mp4
65_数仓建模ER模型三范式介绍.mp4
66_数仓建模维度模型介绍.mp4
67_维度建模事实表简单概述.mp4
68_维度建模事务型事实表介绍.mp4
69维度建模周期快照事实表和累积性快照事实表.mp4
70_维度建模维度表设计流程.mp4
71_维度表设计规范化和反规范化.mp4
72_维度表设计维度变化的选择.mp4
73_维度表设计多值维度和多值属性.mp4
74_数仓设计分层规划.mp4
75_数仓设计之数据调研.mp4
76_数仓设计之明确数据域.mp4
77_数仓设计之构建业务总线矩阵.mp4
78_数仓设计之指标体系分析.mp4
79_hive的执行引擎介绍.mp4
80_hive替换spark引擎的完整展示.mp4
81_AM资源比例参数介绍.mp4
82_数仓开发工具datagrip介绍.mp4
83_模拟数据的采集同步.mp4
84_hive常见问题的解决.mp4
85_ods设计总体原则.mp4
86_ods_全量客户表数据装载.mp4
87_ods_使用getjson_object方法来解析json.mp4
88_ods_使用jsonSerde解析增量表数据.mp4
89_ods_创建所有的表格修复已有的分区.mp4
90_ods_脚本数据装载的编写和使用.mp4
91_dim_部门维度表装载.mp4
92_dim_员工和行业维度表装载.mp4
93_dim_脚本数据装载.mp4
94_dwd_整体需求介绍.mp4
95_dwd_累积快照事实表分区设计.mp4
96_dwd_数据装载情况介绍.mp4
97_dwd_累积快照事实表基础表格数据聚合.mp4
98_dwd_累积快照事实表的首日装载.mp4
99_dwd_累积快照事实表初始数据的聚合.mp4
100_dwd_累积快照事实表每日装载,mp4
101_dwd_脚本数据装载.mp4
102_ads_待审主题综合统计.mp4
103_ads_待审数据各业务方向统计和各部门统计.mp4
104_ads_业务经办和信审经办的审核数据统计.mp4
105_ads_各行业审核数据统计.mp4
106_ads_审批结束数据综合统计.mp4
107_ads_审批结束数据各业务方向和各部门聚合统计,mp4
108_ads_审批结束数据各业务经办和信审经办聚合统计.mp4
109_ads_审批结束各行业统计.mp4
110_ads_转换数据统计数据计算.mp4
111_ads_转换数据统计导入及ads需求总结.mp4
112_脚本数据装载.mp4
113_导出数据样例演示.mp4
114_使用脚本完成datax的数据导出.mp4
115_dolphinSchedule基础概述.mp4
116_dolphinScheduler架构介绍.mp4
117_dolphinSchedule的安装部署.mp4
118_dolphinSchedule管理用户介绍及简单案例,mp4
119_dolphinSchedule的定时和传参功能.mp4
120_dolphinSchedule的依赖资源和告警功能介绍.mp4
121_新数据生成及单机dolphinSchedule启动.mp4
122_dolphinSchedule完成全流程调度,mp4
123_可视化虚拟环境安装部署.mp4
124_superSet的安装部署.mp4
125_superSet的可视化展示演示.mp4
126_金融审批项目采集总结.mp4
127_金融审批项目数仓总结.mp4