尚硅谷线上问诊实时数仓项目延续了离线数仓的业务逻辑,以线上问诊开处方为基础业务逻辑,真实表现了线上问诊数据的实时分析统计。
线上问诊实时数仓项目共分三大部分:实时数仓架构介绍、数仓模型搭建、Suger可视化大屏展示。项目以线上问诊采集项目为前置基础,使用采集项目中搭建的虚拟机环境,读取采集项目实时监控的业务数据,对数据进行实时的分析计算,最终得到指标需求结果。
项目中使用的框架包括:Hadoop、Kafka、Flume、Maxwell、Flink、Phoenix、HBase、Redis、Doris、Suger等。教程通过精炼的业务体系逻辑,带你快速掌握实时数仓所使用的技术手段!
课程目录
├──尚硅谷大数据项目之线上问诊离线数仓
| ├──视频
| | ├──01-数据采集课程内容介绍.mp4 6.91M
| | ├──02-数据仓库的概念.mp4 12.13M
| | ├──03-数据仓库的架构.mp4 12.65M
| | ├──04-项目需求分析.mp4 15.14M
| | ├──05-技术选型.mp4 23.02M
| | ├──06-系统数据流程设计.mp4 20.61M
| | ├──07-框架版本的选择.mp4 18.04M
| | ├──08-服务器的选型.mp4 16.14M
| | ├──09-集群规模.mp4 14.05M
| | ├──10-集群规模设计.mp4 22.52M
| | ├──100-医生维度表建表.mp4 44.36M
| | ├──101-医生维度表数据加载.mp4 34.98M
| | ├──102-医院维度表建表和数据加载.mp4 22.43M
| | ├──103-药品维度表建表和数据加载.mp4 14.52M
| | ├──104-患者维度表建表和数据加载.mp4 15.81M
| | ├──105-用户维度表建表和数据加载.mp4 9.91M
| | ├──106-dim层数据加载脚本.mp4 44.28M
| | ├──107-事实表建模理论回顾.mp4 49.50M
| | ├──108-DWD层设计要点.mp4 9.26M
| | ├──109-问诊事务型事实表建表.mp4 21.45M
| | ├──11-业务数据说明.mp4 27.12M
| | ├──110-问诊事实表首日数据加载.mp4 38.05M
| | ├──111-问诊事实表每日数据加载.mp4 17.83M
| | ├──112-问诊支付成功事实表建表和首日加载.mp4 35.78M
| | ├──113-问诊支付成功事实表每日数据加载.mp4 39.73M
| | ├──114-处方开单事实表建表和首日数据加载.mp4 33.95M
| | ├──115-处方开单事实表每日数据加载.mp4 14.07M
| | ├──116-处方支付成功事实表建表和首日数据加载.mp4 41.74M
| | ├──117-处方支付成功事实表每日数据加载.mp4 23.77M
| | ├──118-医生注册事实表建表和首日数据加载.mp4 35.74M
| | ├──119-医生注册事实表每日数据加载.mp4 14.67M
| | ├──12-虚拟机安装配置.mp4 88.92M
| | ├──120-用户注册事实表建表和数据加载.mp4 32.83M
| | ├──121-患者登记事实表建表和数据加载.mp4 29.71M
| | ├──122-用户评价事实表建表和数据加载.mp4 25.41M
| | ├──123-dwd首日数据加载脚本.mp4 55.86M
| | ├──124-dwd每日数据加载脚本.mp4 70.39M
| | ├──125-dws设计要点.mp4 22.15M
| | ├──126-医院患者性别年龄段问诊最近1日汇总表mp4.mp4 75.35M
| | ├──127-医院患者性别年龄段问诊支付成功最近1日汇总表.mp4 35.00M
| | ├──128-医院患者性别年龄段处方开单最近1日汇总表.mp4 33.59M
| | ├──129-医院患者性别年龄段处方开单支付成功最近1日汇总表.mp4 26.35M
| | ├──13-集群分发脚本.mp4 57.52M
| | ├──130-医生粒度问诊最近1日汇总表.mp4 27.07M
| | ├──131-dws 1d首日数据加载脚本.mp4 44.69M
| | ├──132-dws 1d每日数据加载脚本.mp4 36.02M
| | ├──133-交易域医院患者性别年龄段粒度问诊最近n日汇总表.mp4 48.14M
| | ├──134-交易域医院患者性别年龄段粒度问诊支付成功最近n日汇总表.mp4 19.42M
| | ├──135-交易域医院患者性别年龄段粒度处方开单最近n日汇总表.mp4 14.62M
| | ├──136-交易域医院患者性别年龄段粒度处方开单支付成功最近n日汇总表.mp4 15.35M
| | ├──137-交易域医生粒度问诊最近n日汇总表.mp4 9.08M
| | ├──138-dws nd数据加载脚本.mp4 48.24M
| | ├──139-交易域医生粒度问诊历史至今汇总表.mp4 67.58M
| | ├──14-安装jdk.mp4 33.12M
| | ├──140-互动域医院用户粒度用户评价历史至今汇总表.mp4 76.59M
| | ├──141-互动域医院粒度用户评价历史至今汇总表.mp4 65.19M
| | ├──142-dws td首日数据加载脚本.mp4 32.34M
| | ├──143-dws td每日数据加载脚本.mp4 20.71M
| | ├──144-ads层设计要点.mp4 14.05M
| | ├──145-交易综合统计.mp4 118.55M
| | ├──146-各医院交易统计.mp4 62.46M
| | ├──147-各性别患者交易统计.mp4 26.74M
| | ├──148-各年龄段患者交易统计.mp4 24.14M
| | ├──149-医生变动统计.mp4 69.67M
| | ├──15-环境变量配置说明.mp4 12.39M
| | ├──150-用户变动统计.mp4 31.76M
| | ├──151-评价综合统计.mp4 26.97M
| | ├──152-各医院评价统计.mp4 19.63M
| | ├──153-ads数据加载脚本.mp4 63.15M
| | ├──154-mysql建库建表.mp4 20.57M
| | ├──155-将数据从hdfs导入到mysql演示.mp4 78.64M
| | ├──156-生成datax配置文件.mp4 39.75M
| | ├──157-ads导数据到Mysql脚本.mp4 59.84M
| | ├──158-dolphinscheduler简介.mp4 52.75M
| | ├──159-dolphinscheduler部署说明.mp4 32.81M
| | ├──16-查看进程脚本.mp4 10.35M
| | ├──160-安装dolphinscheduler.mp4 152.29M
| | ├──161-安全中心配置.mp4 26.84M
| | ├──162-定义工作流与执行工作流.mp4 46.57M
| | ├──163-定时调度.mp4 8.82M
| | ├──164-局部参数.mp4 24.40M
| | ├──165-全局参数.mp4 34.67M
| | ├──166-参数传递.mp4 17.22M
| | ├──167-参数的优先级.mp4 26.09M
| | ├──168-内置参数.mp4 29.05M
| | ├──169-引用依赖资源.mp4 13.97M
| | ├──17-安装hadoop-配置集群.mp4 61.46M
| | ├──170-告警通知.mp4 31.43M
| | ├──171-失败重试.mp4 9.38M
| | ├──172-生成新数据.mp4 21.64M
| | ├──173-数仓工作流调度.mp4 107.93M
| | ├──174-superset简介.mp4 8.27M
| | ├──175-安装superset.mp4 155.06M
| | ├──176-superset启动脚本.mp4 40.18M
| | ├──177-superset可视化.mp4 73.30M
| | ├──178-总结.mp4 44.77M
| | ├──18-安装hadoop-配置历史服务器.mp4 31.12M
| | ├──19-hadoop群起脚本.mp4 13.71M
| | ├──20-hdfs存储多目录.mp4 21.93M
| | ├──21-集群数据均衡.mp4 30.63M
| | ├──22-hadoop参数调优.mp4 25.71M
| | ├──23-安装zookeeper.mp4 29.15M
| | ├──24-zookeeper启动脚本.mp4 14.97M
| | ├──25-zookeeper常用指令.mp4 21.42M
| | ├──26-安装kafka.mp4 50.62M
| | ├──27-kafka群起脚本.mp4 24.67M
| | ├──28-kafka常用指令-topic相关.mp4 62.28M
| | ├──29-kafka常用指令-生产者和消费者相关.mp4 30.32M
| | ├──30-flume安装与项目经验.mp4 20.61M
| | ├──31-安装mysql.mp4 25.91M
| | ├──32-模拟生成数据.mp4 32.00M
| | ├──33-客户端连接异常问题.mp4 14.53M
| | ├──34-maxwell简介.mp4 18.69M
| | ├──35-mysql原理.mp4 19.70M
| | ├──36-安装maxwell.mp4 63.13M
| | ├──37-maxwell启动脚本.mp4 32.41M
| | ├──38-maxwell数据同步.mp4 59.46M
| | ├──39-同步策略.mp4 26.92M
| | ├──40-数据同步工具.mp4 24.90M
| | ├──41-datax简介和框架设计.mp4 24.68M
| | ├──42-datax运行流程.mp4 12.75M
| | ├──43-datax调度思路.mp4 11.27M
| | ├──44-datax与sqoop的对比.mp4 11.24M
| | ├──45-datax安装.mp4 27.19M
| | ├──46-将数据从mysql导入到hdfs-tableMode模式.mp4 95.48M
| | ├──47-将数据从mysql导入到hdfs-querysql模式.mp4 28.54M
| | ├──48-datax传参.mp4 20.14M
| | ├──49-将数据从hdfs导入到mysql.mp4 75.53M
| | ├──50-datax优化.mp4 33.24M
| | ├──51-datax配置文件生成.mp4 69.11M
| | ├──52-全量表数据同步脚本.mp4 83.29M
| | ├──53-flume配置01.mp4 150.11M
| | ├──54-flume配置02.mp4 145.43M
| | ├──55-增量表首日同步.mp4 37.73M
| | ├──56-flume启动停止脚本.mp4 34.81M
| | ├──57-安装hive.mp4 94.35M
| | ├──58-在线就诊数仓项目简介.mp4 13.94M
| | ├──59-数仓的概念.mp4 27.28M
| | ├──60-数仓架构.mp4 40.50M
| | ├──61-建模的意义.mp4 27.79M
| | ├──62-ER模型.mp4 75.13M
| | ├──63-维度模型.mp4 25.66M
| | ├──64-事实表介绍.mp4 14.00M
| | ├──65-事务型事实表概述.mp4 18.57M
| | ├──66-事务型事实表的设计流程.mp4 51.65M
| | ├──67-事务型事实表的不足.mp4 25.31M
| | ├──68-事务型事实表的不足.mp4 21.10M
| | ├──69-周期型快照事实表的概念.mp4 32.40M
| | ├──70-周期型快照事实表设计与事实类型.mp4 30.06M
| | ├──71-累积型快照事实表.mp4 55.96M
| | ├──72-维度表设计.mp4 71.65M
| | ├──73-规范化与反规范化.mp4 14.58M
| | ├──74-全量快照维度表.mp4 21.13M
| | ├──75-拉链表.mp4 24.45M
| | ├──76-多值维度.mp4 25.93M
| | ├──77-多值属性.mp4 9.08M
| | ├──78-数据仓库的分层.mp4 28.40M
| | ├──79-数仓的构建流程.mp4 30.18M
| | ├──80-数据调研.mp4 22.11M
| | ├──81-明确数据域.mp4 6.19M
| | ├──82-业务总线矩阵.mp4 19.63M
| | ├──83-明确统计指标.mp4 42.27M
| | ├──84-维度模型与汇总模型设计.mp4 13.03M
| | ├──85-hive引擎简介.mp4 12.71M
| | ├──86-hive on spark兼容性说明.mp4 13.56M
| | ├──87-搭建hive on spark.mp4 52.21M
| | ├──88-ApplicationMaster资源比例调整.mp4 26.78M
| | ├──89-datagrip使用.mp4 34.82M
| | ├──90-模拟产生数据.mp4 92.63M
| | ├──91-hive常见问题和解决方案.mp4 45.90M
| | ├──92-ods层设计要点.mp4 20.33M
| | ├──93-全量表建表.mp4 62.36M
| | ├──94-复杂数据类型回顾.mp4 54.70M
| | ├──95-json数据建表.mp4 38.53M
| | ├──96-增量表建表.mp4 41.59M
| | ├──97-ods数据加载脚本.mp4 101.57M
| | ├──98-维度表建模理论回顾.mp4 32.32M
| | └──99-dim层设计要点.mp4 17.24M
| ├──笔记.zip 36.61M
| ├──代码.zip 664.29kb
| └──资料.zip 2.87G
└──尚硅谷大数据项目之线上问诊实时数仓
| ├──视频
| | ├──01_线上问诊实时数仓课程介绍.mp4 24.37M
| | ├──02_采集项目数据采集回顾.mp4 96.42M
| | ├──03_线上问诊实时数仓概念介绍.mp4 10.57M
| | ├──04_线上问诊实时数仓核心架构介绍.mp4 17.19M
| | ├──05_实时数仓架构的具体操作流程.mp4 17.28M
| | ├──06_数仓建模ER模型介绍.mp4 17.52M
| | ├──07_数仓建模ER模型三范式介绍.mp4 40.81M
| | ├──08_数仓建模维度模型介绍.mp4 17.52M
| | ├──09_维度建模事实表简单概述.mp4 11.44M
| | ├──10_维度建模事务型事实表介绍.mp4 24.86M
| | ├──11_维度建模周期快照事实表.mp4 19.27M
| | ├──12_维度建模累积快照事实表.mp4 12.86M
| | ├──13_维度建模维度表设计流程.mp4 18.25M
| | ├──14_维度表设计规范化和反规范化.mp4 12.19M
| | ├──15_维度表设计维度变化的选择.mp4 15.78M
| | ├──16_维度表设计多值维度和多值属性.mp4 24.41M
| | ├──17_数仓分层规划.mp4 15.58M
| | ├──18_数仓构建流程简单介绍.mp4 14.81M
| | ├──19_数仓数据调研介绍.mp4 18.68M
| | ├──20_数仓分配数据域.mp4 7.39M
| | ├──21_数仓构建业务总线矩阵及维度模型设计.mp4 22.21M
| | ├──22_数仓指标体系分析.mp4 36.23M
| | ├──23_idea开发环境准备.mp4 28.05M
| | ├──24_flink的环境准备.mp4 15.93M
| | ├──25_hbase的环境部署.mp4 52.34M
| | ├──26_redis的环境部署.mp4 43.87M
| | ├──27_doris的fe部署.mp4 66.98M
| | ├──28_doris的be集群安装部署.mp4 36.36M
| | ├──29_doris的be集群bug解决.mp4 29.64M
| | ├──30_ods_使用kafka存储原始数据.mp4 42.40M
| | ├──31_dim_实时监控实现动态配置维度表元数据信息原理介绍.mp4 50.41M
| | ├──32_flinkCDC测试代码编写.mp4 406.55M
| | ├──33_dim_整体代码结构介绍.mp4 19.27M
| | ├──34_dim_流式环境创建的方法封装.mp4 57.83M
| | ├──35_dim_读取kafka主流ods层数据.mp4 371.21M
| | ├──36_dim_读取配置表数据.mp4 45.23M
| | ├──37_dim_封装hbase获取同步连接.mp4 387.26M
| | ├──38_dim_创建hbase中的维度表.mp4 111.23M
| | ├──39_dim_处理合并流完成主流过滤维度表的操作.mp4 156.08M
| | ├──40_dim_写出维度表数据到hbase.mp4 95.96M
| | ├──41_dim_维度表代码测试及整体逻辑回顾.mp4 161.05M
| | ├──42_dwd_flinkSQL的使用方法.mp4 43.97M
| | ├──43_dwd_使用flinkSQL读取ods层数据.mp4 37.07M
| | ├──44_dwd_问诊事实表筛选数据.mp4 36.61M
| | ├──45_dwd_问诊事务事实表数据写出.mp4 23.55M
| | ├──46_dwd_问诊支付成功事实表代码编写及演示.mp4 266.76M
| | ├──47_dwd_处方事实表代码编写.mp4 75.12M
| | ├──48_dwd_处方事实表数据测试.mp4 19.71M
| | ├──49_dwd_interval_join的原理介绍.mp4 203.97M
| | ├──50_dwd_处方开单支付事务事实表编写及测试.mp4 100.03M
| | ├──51_dwd_用户注册事务事实表.mp4 40.24M
| | ├──52_dwd_新增患者事务事实表.mp4 27.23M
| | ├──53_dwd_医生注册事务事实表.mp4 151.02M
| | ├──54_dws_医院性别年龄粒度问诊聚合需求介绍.mp4 33.40M
| | ├──55_dws_读取dwd层数据并转换结构.mp4 47.72M
| | ├──56_dws_使用异步连接优化维度关联.mp4 42.86M
| | ├──57_dws_旁路缓存优化介绍.mp4 18.46M
| | ├──58_dws_实现维度关联的抽象类设计.mp4 768.22M
| | ├──59_dws_实现医院id和患者信息的维度关联.mp4 58.30M
| | ├──60_dws_开窗聚合问诊次数及问诊金额代码及演示.mp4 86.18M
| | ├──61_dws_修复补全维度信息.mp4 206.67M
| | ├──62_dws_将javaBean保留需要的字段转换为jsonString.mp4 72.38M
| | ├──63_dws_doris写出工具类编写.mp4 41.71M
| | ├──64_dws_写出数据到doris演示.mp4 70.02M
| | ├──65_dws_问诊支付成功窗口聚合.mp4 128.12M
| | ├──66_dws_处方开单窗口聚合.mp4 528.78M
| | ├──67_dws_处方开单支付窗口聚合.mp4 44.22M
| | ├──68_dws_用户注册的窗口聚合.mp4 54.85M
| | ├──69_dws_患者添加窗口聚合.mp4 52.73M
| | ├──70_dws_医生注册窗口汇总.mp4 209.32M
| | ├──71_dws_医院粒度评价表使用状态找出新增评价.mp4 451.65M
| | ├──72_dws_医院粒度评价导出数据.mp4 44.77M
| | ├──73_大屏可视化流程介绍.mp4 50.28M
| | ├──74_大屏可视化内网穿透展示.mp4 27.56M
| | └──75_sugerBI实现可视化展示.mp4 28.11M
| ├──笔记.zip 25.46M
| ├──代码.zip 74.88kb
| └──资料.zip 5.52G