大数据项目线上问诊数仓项目(采集+离线+实时)

大数据项目线上问诊数仓项目(采集+离线+实时)资源简介:

 

 线上问诊实时数仓项目延续了离线数仓的业务逻辑,以线上问诊开处方为基础业务逻辑,真实表现了线上问诊数据的实时分析统计。

线上问诊实时数仓项目共分三大部分:实时数仓架构介绍、数仓模型搭建、Suger可视化大屏展示。项目以线上问诊采集项目为前置基础,使用采集项目中搭建的虚拟机环境,读取采集项目实时监控的业务数据,对数据进行实时的分析计算,最终得到指标需求结果。

项目中使用的框架包括:Hadoop、Kafka、Flume、Maxwell、Flink、Phoenix、HBase、Redis、Doris、Suger等。教程通过精炼的业务体系逻辑,带你快速掌握实时数仓所使用的技术手段!

课程目录

├──大数据项目之线上问诊离线数仓

|   ├──视频

|   |   ├──01-数据采集课程内容介绍.mp4  6.86M

|   |   ├──02-数据仓库的概念.mp4  12.08M

|   |   ├──03-数据仓库的架构.mp4  12.60M

|   |   ├──04-项目需求分析.mp4  15.10M

|   |   ├──05-技术选型.mp4  22.98M

|   |   ├──06-系统数据流程设计.mp4  20.56M

|   |   ├──07-框架版本的选择.mp4  17.99M

|   |   ├──08-服务器的选型.mp4  16.10M

|   |   ├──09-集群规模.mp4  14.00M

|   |   ├──10-集群规模设计.mp4  22.48M

|   |   ├──100-医生维度表建表.mp4  44.31M

|   |   ├──101-医生维度表数据加载.mp4  34.94M

|   |   ├──102-医院维度表建表和数据加载.mp4  22.38M

|   |   ├──103-药品维度表建表和数据加载.mp4  14.47M

|   |   ├──104-患者维度表建表和数据加载.mp4  15.77M

|   |   ├──105-用户维度表建表和数据加载.mp4  9.86M

|   |   ├──106-dim层数据加载脚本.mp4  44.24M

|   |   ├──107-事实表建模理论回顾.mp4  49.45M

|   |   ├──108-DWD层设计要点.mp4  9.22M

|   |   ├──109-问诊事务型事实表建表.mp4  21.40M

|   |   ├──11-业务数据说明.mp4  27.07M

|   |   ├──110-问诊事实表首日数据加载.mp4  38.00M

|   |   ├──111-问诊事实表每日数据加载.mp4  17.78M

|   |   ├──112-问诊支付成功事实表建表和首日加载.mp4  35.73M

|   |   ├──113-问诊支付成功事实表每日数据加载.mp4  39.69M

|   |   ├──114-处方开单事实表建表和首日数据加载.mp4  33.90M

|   |   ├──115-处方开单事实表每日数据加载.mp4  14.03M

|   |   ├──116-处方支付成功事实表建表和首日数据加载.mp4  41.69M

|   |   ├──117-处方支付成功事实表每日数据加载.mp4  23.72M

|   |   ├──118-医生注册事实表建表和首日数据加载.mp4  35.69M

|   |   ├──119-医生注册事实表每日数据加载.mp4  14.63M

|   |   ├──12-虚拟机安装配置.mp4  88.87M

|   |   ├──120-用户注册事实表建表和数据加载.mp4  32.78M

|   |   ├──121-患者登记事实表建表和数据加载.mp4  29.66M

|   |   ├──122-用户评价事实表建表和数据加载.mp4  25.37M

|   |   ├──123-dwd首日数据加载脚本.mp4  55.81M

|   |   ├──124-dwd每日数据加载脚本.mp4  70.35M

|   |   ├──125-dws设计要点.mp4  22.11M

|   |   ├──126-医院患者性别年龄段问诊最近1日汇总表mp4.mp4  75.30M

|   |   ├──127-医院患者性别年龄段问诊支付成功最近1日汇总表.mp4  34.96M

|   |   ├──128-医院患者性别年龄段处方开单最近1日汇总表.mp4  33.55M

|   |   ├──129-医院患者性别年龄段处方开单支付成功最近1日汇总表.mp4  26.31M

|   |   ├──13-集群分发脚本.mp4  57.47M

|   |   ├──130-医生粒度问诊最近1日汇总表.mp4  27.02M

|   |   ├──131-dws 1d首日数据加载脚本.mp4  44.64M

|   |   ├──132-dws 1d每日数据加载脚本.mp4  35.97M

|   |   ├──133-交易域医院患者性别年龄段粒度问诊最近n日汇总表.mp4  48.09M

|   |   ├──134-交易域医院患者性别年龄段粒度问诊支付成功最近n日汇总表.mp4  19.38M

|   |   ├──135-交易域医院患者性别年龄段粒度处方开单最近n日汇总表.mp4  14.57M

|   |   ├──136-交易域医院患者性别年龄段粒度处方开单支付成功最近n日汇总表.mp4  15.31M

|   |   ├──137-交易域医生粒度问诊最近n日汇总表.mp4  9.04M

|   |   ├──138-dws nd数据加载脚本.mp4  48.20M

|   |   ├──139-交易域医生粒度问诊历史至今汇总表.mp4  67.53M

|   |   ├──14-安装jdk.mp4  33.08M

|   |   ├──140-互动域医院用户粒度用户评价历史至今汇总表.mp4  76.54M

|   |   ├──141-互动域医院粒度用户评价历史至今汇总表.mp4  65.15M

|   |   ├──142-dws td首日数据加载脚本.mp4  32.30M

|   |   ├──143-dws td每日数据加载脚本.mp4  20.66M

|   |   ├──144-ads层设计要点.mp4  14.00M

|   |   ├──145-交易综合统计.mp4  118.50M

|   |   ├──146-各医院交易统计.mp4  62.41M

|   |   ├──147-各性别患者交易统计.mp4  26.70M

|   |   ├──148-各年龄段患者交易统计.mp4  24.09M

|   |   ├──149-医生变动统计.mp4  69.62M

|   |   ├──15-环境变量配置说明.mp4  12.34M

|   |   ├──150-用户变动统计.mp4  31.72M

|   |   ├──151-评价综合统计.mp4  26.92M

|   |   ├──152-各医院评价统计.mp4  19.58M

|   |   ├──153-ads数据加载脚本.mp4  63.10M

|   |   ├──154-mysql建库建表.mp4  20.52M

|   |   ├──155-将数据从hdfs导入到mysql演示.mp4  78.59M

|   |   ├──156-生成datax配置文件.mp4  39.71M

|   |   ├──157-ads导数据到Mysql脚本.mp4  59.80M

|   |   ├──158-dolphinscheduler简介.mp4  52.71M

|   |   ├──159-dolphinscheduler部署说明.mp4  32.77M

|   |   ├──16-查看进程脚本.mp4  10.31M

|   |   ├──160-安装dolphinscheduler.mp4  152.25M

|   |   ├──161-安全中心配置.mp4  26.79M

|   |   ├──162-定义工作流与执行工作流.mp4  46.52M

|   |   ├──163-定时调度.mp4  8.77M

|   |   ├──164-局部参数.mp4  24.36M

|   |   ├──165-全局参数.mp4  34.62M

|   |   ├──166-参数传递.mp4  17.17M

|   |   ├──167-参数的优先级.mp4  26.04M

|   |   ├──168-内置参数.mp4  29.01M

|   |   ├──169-引用依赖资源.mp4  13.93M

|   |   ├──17-安装hadoop-配置集群.mp4  61.42M

|   |   ├──170-告警通知.mp4  31.38M

|   |   ├──171-失败重试.mp4  9.33M

|   |   ├──172-生成新数据.mp4  21.59M

|   |   ├──173-数仓工作流调度.mp4  107.89M

|   |   ├──174-superset简介.mp4  8.22M

|   |   ├──175-安装superset.mp4  155.02M

|   |   ├──176-superset启动脚本.mp4  40.13M

|   |   ├──177-superset可视化.mp4  73.26M

|   |   ├──178-总结.mp4  44.73M

|   |   ├──18-安装hadoop-配置历史服务器.mp4  31.08M

|   |   ├──19-hadoop群起脚本.mp4  13.66M

|   |   ├──20-hdfs存储多目录.mp4  21.88M

|   |   ├──21-集群数据均衡.mp4  30.58M

|   |   ├──22-hadoop参数调优.mp4  25.67M

|   |   ├──23-安装zookeeper.mp4  29.11M

|   |   ├──24-zookeeper启动脚本.mp4  14.92M

|   |   ├──25-zookeeper常用指令.mp4  21.37M

|   |   ├──26-安装kafka.mp4  50.58M

|   |   ├──27-kafka群起脚本.mp4  24.62M

|   |   ├──28-kafka常用指令-topic相关.mp4  62.23M

|   |   ├──29-kafka常用指令-生产者和消费者相关.mp4  30.27M

|   |   ├──30-flume安装与项目经验.mp4  20.57M

|   |   ├──31-安装mysql.mp4  25.87M

|   |   ├──32-模拟生成数据.mp4  31.96M

|   |   ├──33-客户端连接异常问题.mp4  14.48M

|   |   ├──34-maxwell简介.mp4  18.64M

|   |   ├──35-mysql原理.mp4  19.65M

|   |   ├──36-安装maxwell.mp4  63.09M

|   |   ├──37-maxwell启动脚本.mp4  32.37M

|   |   ├──38-maxwell数据同步.mp4  59.42M

|   |   ├──39-同步策略.mp4  26.87M

|   |   ├──40-数据同步工具.mp4  24.85M

|   |   ├──41-datax简介和框架设计.mp4  24.63M

|   |   ├──42-datax运行流程.mp4  12.71M

|   |   ├──43-datax调度思路.mp4  11.22M

|   |   ├──44-datax与sqoop的对比.mp4  11.20M

|   |   ├──45-datax安装.mp4  27.14M

|   |   ├──46-将数据从mysql导入到hdfs-tableMode模式.mp4  95.43M

|   |   ├──47-将数据从mysql导入到hdfs-querysql模式.mp4  28.50M

|   |   ├──48-datax传参.mp4  20.10M

|   |   ├──49-将数据从hdfs导入到mysql.mp4  75.48M

|   |   ├──50-datax优化.mp4  33.20M

|   |   ├──51-datax配置文件生成.mp4  69.06M

|   |   ├──52-全量表数据同步脚本.mp4  83.24M

|   |   ├──53-flume配置01.mp4  150.07M

|   |   ├──54-flume配置02.mp4  145.39M

|   |   ├──55-增量表首日同步.mp4  37.68M

|   |   ├──56-flume启动停止脚本.mp4  34.77M

|   |   ├──57-安装hive.mp4  94.31M

|   |   ├──58-在线就诊数仓项目简介.mp4  13.89M

|   |   ├──59-数仓的概念.mp4  27.24M

|   |   ├──60-数仓架构.mp4  40.46M

|   |   ├──61-建模的意义.mp4  27.74M

|   |   ├──62-ER模型.mp4  75.09M

|   |   ├──63-维度模型.mp4  25.62M

|   |   ├──64-事实表介绍.mp4  13.95M

|   |   ├──65-事务型事实表概述.mp4  18.53M

|   |   ├──66-事务型事实表的设计流程.mp4  51.60M

|   |   ├──67-事务型事实表的不足.mp4  25.26M

|   |   ├──68-事务型事实表的不足.mp4  21.05M

|   |   ├──69-周期型快照事实表的概念.mp4  32.35M

|   |   ├──70-周期型快照事实表设计与事实类型.mp4  30.01M

|   |   ├──71-累积型快照事实表.mp4  55.92M

|   |   ├──72-维度表设计.mp4  71.61M

|   |   ├──73-规范化与反规范化.mp4  14.54M

|   |   ├──74-全量快照维度表.mp4  21.09M

|   |   ├──75-拉链表.mp4  24.41M

|   |   ├──76-多值维度.mp4  25.88M

|   |   ├──77-多值属性.mp4  9.03M

|   |   ├──78-数据仓库的分层.mp4  28.36M

|   |   ├──79-数仓的构建流程.mp4  30.14M

|   |   ├──80-数据调研.mp4  22.06M

|   |   ├──81-明确数据域.mp4  6.14M

|   |   ├──82-业务总线矩阵.mp4  19.58M

|   |   ├──83-明确统计指标.mp4  42.23M

|   |   ├──84-维度模型与汇总模型设计.mp4  12.98M

|   |   ├──85-hive引擎简介.mp4  12.67M

|   |   ├──86-hive on spark兼容性说明.mp4  13.51M

|   |   ├──87-搭建hive on spark.mp4  52.16M

|   |   ├──88-ApplicationMaster资源比例调整.mp4  26.73M

|   |   ├──89-datagrip使用.mp4  34.78M

|   |   ├──90-模拟产生数据.mp4  92.59M

|   |   ├──91-hive常见问题和解决方案.mp4  45.86M

|   |   ├──92-ods层设计要点.mp4  20.28M

|   |   ├──93-全量表建表.mp4  62.32M

|   |   ├──94-复杂数据类型回顾.mp4  54.65M

|   |   ├──95-json数据建表.mp4  38.48M

|   |   ├──96-增量表建表.mp4  41.55M

|   |   ├──97-ods数据加载脚本.mp4  101.52M

|   |   ├──98-维度表建模理论回顾.mp4  32.28M

|   |   └──99-dim层设计要点.mp4  17.20M

|   ├──笔记.zip  36.61M

|   ├──代码.zip  664.29kb

|   └──资料.zip  2.87G

└──尚硅谷大数据项目之线上问诊实时数仓

|   ├──视频

|   |   ├──01_线上问诊实时数仓课程介绍.mp4  24.32M

|   |   ├──02_采集项目数据采集回顾.mp4  96.37M

|   |   ├──03_线上问诊实时数仓概念介绍.mp4  10.53M

|   |   ├──04_线上问诊实时数仓核心架构介绍.mp4  17.15M

|   |   ├──05_实时数仓架构的具体操作流程.mp4  17.23M

|   |   ├──06_数仓建模ER模型介绍.mp4  17.47M

|   |   ├──07_数仓建模ER模型三范式介绍.mp4  40.77M

|   |   ├──08_数仓建模维度模型介绍.mp4  17.47M

|   |   ├──09_维度建模事实表简单概述.mp4  11.39M

|   |   ├──10_维度建模事务型事实表介绍.mp4  24.82M

|   |   ├──11_维度建模周期快照事实表.mp4  19.23M

|   |   ├──12_维度建模累积快照事实表.mp4  12.82M

|   |   ├──13_维度建模维度表设计流程.mp4  18.20M

|   |   ├──14_维度表设计规范化和反规范化.mp4  12.15M

|   |   ├──15_维度表设计维度变化的选择.mp4  15.73M

|   |   ├──16_维度表设计多值维度和多值属性.mp4  24.36M

|   |   ├──17_数仓分层规划.mp4  15.54M

|   |   ├──18_数仓构建流程简单介绍.mp4  14.76M

|   |   ├──19_数仓数据调研介绍.mp4  18.64M

|   |   ├──20_数仓分配数据域.mp4  7.35M

|   |   ├──21_数仓构建业务总线矩阵及维度模型设计.mp4  22.17M

|   |   ├──22_数仓指标体系分析.mp4  36.18M

|   |   ├──23_idea开发环境准备.mp4  28.01M

|   |   ├──24_flink的环境准备.mp4  15.89M

|   |   ├──25_hbase的环境部署.mp4  52.29M

|   |   ├──26_redis的环境部署.mp4  43.83M

|   |   ├──27_doris的fe部署.mp4  66.93M

|   |   ├──28_doris的be集群安装部署.mp4  36.32M

|   |   ├──29_doris的be集群bug解决.mp4  29.59M

|   |   ├──30_ods_使用kafka存储原始数据.mp4  42.35M

|   |   ├──31_dim_实时监控实现动态配置维度表元数据信息原理介绍.mp4  50.36M

|   |   ├──32_flinkCDC测试代码编写.mp4  406.51M

|   |   ├──33_dim_整体代码结构介绍.mp4  19.22M

|   |   ├──34_dim_流式环境创建的方法封装.mp4  57.78M

|   |   ├──35_dim_读取kafka主流ods层数据.mp4  371.17M

|   |   ├──36_dim_读取配置表数据.mp4  45.19M

|   |   ├──37_dim_封装hbase获取同步连接.mp4  387.22M

|   |   ├──38_dim_创建hbase中的维度表.mp4  111.18M

|   |   ├──39_dim_处理合并流完成主流过滤维度表的操作.mp4  156.03M

|   |   ├──40_dim_写出维度表数据到hbase.mp4  95.91M

|   |   ├──41_dim_维度表代码测试及整体逻辑回顾.mp4  161.00M

|   |   ├──42_dwd_flinkSQL的使用方法.mp4  43.92M

|   |   ├──43_dwd_使用flinkSQL读取ods层数据.mp4  37.03M

|   |   ├──44_dwd_问诊事实表筛选数据.mp4  36.57M

|   |   ├──45_dwd_问诊事务事实表数据写出.mp4  23.51M

|   |   ├──46_dwd_问诊支付成功事实表代码编写及演示.mp4  266.71M

|   |   ├──47_dwd_处方事实表代码编写.mp4  75.08M

|   |   ├──48_dwd_处方事实表数据测试.mp4  19.66M

|   |   ├──49_dwd_interval_join的原理介绍.mp4  203.93M

|   |   ├──50_dwd_处方开单支付事务事实表编写及测试.mp4  99.98M

|   |   ├──51_dwd_用户注册事务事实表.mp4  40.20M

|   |   ├──52_dwd_新增患者事务事实表.mp4  27.19M

|   |   ├──53_dwd_医生注册事务事实表.mp4  150.98M

|   |   ├──54_dws_医院性别年龄粒度问诊聚合需求介绍.mp4  33.35M

|   |   ├──55_dws_读取dwd层数据并转换结构.mp4  47.67M

|   |   ├──56_dws_使用异步连接优化维度关联.mp4  42.81M

|   |   ├──57_dws_旁路缓存优化介绍.mp4  18.41M

|   |   ├──58_dws_实现维度关联的抽象类设计.mp4  768.18M

|   |   ├──59_dws_实现医院id和患者信息的维度关联.mp4  58.25M

|   |   ├──60_dws_开窗聚合问诊次数及问诊金额代码及演示.mp4  86.14M

|   |   ├──61_dws_修复补全维度信息.mp4  206.63M

|   |   ├──62_dws_将javaBean保留需要的字段转换为jsonString.mp4  72.34M

|   |   ├──63_dws_doris写出工具类编写.mp4  41.66M

|   |   ├──64_dws_写出数据到doris演示.mp4  69.97M

|   |   ├──65_dws_问诊支付成功窗口聚合.mp4  128.08M

|   |   ├──66_dws_处方开单窗口聚合.mp4  528.74M

|   |   ├──67_dws_处方开单支付窗口聚合.mp4  44.18M

|   |   ├──68_dws_用户注册的窗口聚合.mp4  54.81M

|   |   ├──69_dws_患者添加窗口聚合.mp4  52.68M

|   |   ├──70_dws_医生注册窗口汇总.mp4  209.27M

|   |   ├──71_dws_医院粒度评价表使用状态找出新增评价.mp4  451.60M

|   |   ├──72_dws_医院粒度评价导出数据.mp4  44.72M

|   |   ├──73_大屏可视化流程介绍.mp4  50.23M

|   |   ├──74_大屏可视化内网穿透展示.mp4  27.51M

|   |   └──75_sugerBI实现可视化展示.mp4  28.07M

|   ├──笔记.zip  25.46M

|   ├──代码.zip  74.88kb

|   └──资料.zip  5.52G

此处有隐藏内容--请扫描下方二维码查看