尚硅谷大数据项目之物流数仓采集平台 离线与实时数据处理全方位实战应用
课程介绍本课程将深入探讨尚硅谷大数据项目中的物流数仓采集平台,着重介绍离线与实时数据处理的全方位实战应用。学员将学习如何构建智能物流数据处理系统,深入了解各种技术与方法在实际物流场景中的应用。课程内容涵盖物流数仓采集平台架构设计、离线数据处理与实时数据流处理、数据质量管理与监控、应用场景开发与优化等方面的深度解析和实战项目。通过大量的实际案例和项目练习,学员将掌握从物流数据采集到离线与实时处理的全流程技能,成为物流行业大数据解决方案的专家,为企业的智能化转型提供强有力的支持。
课程目录(1)\尚硅谷大数据项目之物流数仓-1采集平台;目录中文件数:4个
├─代码.zip
├─笔记.zip
├─课程简介.txt
├─资料.zip
(2)\尚硅谷大数据项目之物流数仓-2离线;目录中文件数:5个
├─1.笔记.zip
├─代码.zip
├─物流离线数仓项目官网介绍.txt
├─笔记.zip
├─资料.zip
(3)\尚硅谷大数据项目之物流数仓-3实时;目录中文件数:3个
├─代码.zip
├─笔记.zip
├─资料.zip
(4)\尚硅谷大数据项目之物流数仓-1采集平台\1.笔记;目录中文件数:4个
├─尚硅谷大数据项目之物流数仓(1表结构及组件部署)V1.0.docx
├─尚硅谷大数据项目之物流数仓(2业务数据采集平台)V1.0.docx
├─物流数仓1.0.pptx
├─物流数仓1.0.xmind
(5)\尚硅谷大数据项目之物流数仓-1采集平台\2.资料;目录中文件数:0个
(6)\尚硅谷大数据项目之物流数仓-1采集平台\3.代码;目录中文件数:0个
(7)\尚硅谷大数据项目之物流数仓-1采集平台\4.视频;目录中文件数:63个
├─01_项目概述.mp4
├─02_数仓概念-数仓简介.mp4
├─03_数仓概念-数仓总体介绍.mp4
├─04_数仓概念-项目需求分析.mp4
├─05_数仓概念-技术选型考虑因素.mp4
├─06.具体功能选型.mp4
├─07_数仓概念-系统数据流程.mp4
├─08_数仓概念-框架版本的选择.mp4
├─09_数仓概念-具体版本号选择.mp4
├─10_数仓概念-服务器选型.mp4
├─11_数仓概念-集群规模.mp4
├─12_数仓概念-集群资源规划.mp4
├─13_业务数据采集-物流业务简介.mp4
├─14_业务数据采集-物流业务数据.mp4
├─15_业务数据采集-阿里云准备(备选).mp4
├─16_业务数据采集-虚拟机环境准备.mp4
├─17_业务数据采集-克隆三台服务器.mp4
├─18_业务数据采集-集群同步脚本.mp4
├─19_业务数据采集-免密登录配置.mp4
├─20_业务数据采集-安装JDK.mp4
├─21_业务数据采集-Linux环境变量说明.mp4
├─22_业务数据采集-查看集群所有进程脚本.mp4
├─23_业务数据采集-Zookeeper安装.mp4
├─24_业务数据采集-Zookeeper启停脚本.mp4
├─25_业务数据采集-Hadoop-HA安装(上).mp4
├─26_业务数据采集-Hadoop-HA安装(中).mp4
├─27_业务数据采集-Hadoop-HA安装(下).mp4
├─28_业务数据采集-Hadoop-HA启停脚本.mp4
├─29_业务数据采集-Hadoop项目经验.mp4
├─30_业务数据采集-Kafka安装.mp4
├─31_用户行为数据采集-Kafka启停脚本.mp4
├─32_业务数据采集-Flume安装.mp4
├─33_业务数据采集-MySQL安装.mp4
├─34_业务数据采集-模拟数据.mp4
├─35_业务数据采集-EZDML建模工具.mp4
├─36_业务数据采集-数据同步策略概述.mp4
├─37_业务数据采集-数据同步策略选择.mp4
├─38_业务数据采集-数据同步策略选择.mp4
├─39_业务数据采集-DataX简介.mp4
├─40_业务数据采集-DataX调度决策思路.mp4
├─41_业务数据采集-DataX与Sqoop对比.mp4
├─42_业务数据采集-DataX部署.mp4
├─43_业务数据采集-同步MySQL数据到HDFS(案例一).mp4
├─44_业务数据采集-同步MySQL数据到HDFS(案例二).mp4
├─45_业务数据采集-同步HDFS数据到MySQL(案例三).mp4
├─46_业务数据采集-DataX传参.mp4
├─47_业务数据采集-Datax的SplitPK切割原理.mp4
├─48_业务数据采集-DataX的HdfsWriter的Null值存储问题.mp4
├─49_业务数据采集-DataX参数调优.mp4
├─50_业务数据采集-Flink-CDC简介.mp4
├─51_业务数据采集-启用MySQL Binlog.mp4
├─52_业务数据采集-DataStreamAPI实现FlinkCDC.mp4
├─53_业务数据采集-FlinkCDC集群提交.mp4
├─54_业务数据采集-FlinkSQL实现FlinkCDC.mp4
├─55_业务数据采集-Datax配置一键生成.mp4
├─56_业务数据采集-全量表数据同步脚本.mp4
├─57_业务数据采集-增量同步Flink-CDC配置.mp4
├─58_业务数据采集-增量同步Flink-CDC集群模式提交.mp4
├─59_业务数据采集-增量同步Flume通道分析.mp4
├─60_业务数据采集-增量同步Flume配置.mp4
├─61_业务数据采集-增量同步Flume拦截器配置.mp4
├─62_业务数据采集-增量同步Flume启停脚本.mp4
├─63_业务数据采集-Hive安装.mp4
(8)\尚硅谷大数据项目之物流数仓-1采集平台\视频;目录中文件数:63个
├─01_项目概述.mp4
├─02_数仓概念-数仓简介.mp4
├─03_数仓概念-数仓总体介绍.mp4
├─04_数仓概念-项目需求分析.mp4
├─05_数仓概念-技术选型考虑因素.mp4
├─06.具体功能选型.mp4
├─07_数仓概念-系统数据流程.mp4
├─08_数仓概念-框架版本的选择.mp4
├─09_数仓概念-具体版本号选择.mp4
├─10_数仓概念-服务器选型.mp4
├─11_数仓概念-集群规模.mp4
├─12_数仓概念-集群资源规划.mp4
├─13_业务数据采集-物流业务简介.mp4
├─14_业务数据采集-物流业务数据.mp4
├─15_业务数据采集-阿里云准备(备选).mp4
├─16_业务数据采集-虚拟机环境准备.mp4
├─17_业务数据采集-克隆三台服务器.mp4
├─18_业务数据采集-集群同步脚本.mp4
├─19_业务数据采集-免密登录配置.mp4
├─20_业务数据采集-安装JDK.mp4
├─21_业务数据采集-Linux环境变量说明.mp4
├─22_业务数据采集-查看集群所有进程脚本.mp4
├─23_业务数据采集-Zookeeper安装.mp4
├─24_业务数据采集-Zookeeper启停脚本.mp4
├─25_业务数据采集-Hadoop-HA安装(上).mp4
├─26_业务数据采集-Hadoop-HA安装(中).mp4
├─27_业务数据采集-Hadoop-HA安装(下).mp4
├─28_业务数据采集-Hadoop-HA启停脚本.mp4
├─29_业务数据采集-Hadoop项目经验.mp4
├─30_业务数据采集-Kafka安装.mp4
├─31_用户行为数据采集-Kafka启停脚本.mp4
├─32_业务数据采集-Flume安装.mp4
├─33_业务数据采集-MySQL安装.mp4
├─34_业务数据采集-模拟数据.mp4
├─35_业务数据采集-EZDML建模工具.mp4
├─36_业务数据采集-数据同步策略概述.mp4
├─37_业务数据采集-数据同步策略选择.mp4
├─38_业务数据采集-数据同步策略选择.mp4
├─39_业务数据采集-DataX简介.mp4
├─40_业务数据采集-DataX调度决策思路.mp4
├─41_业务数据采集-DataX与Sqoop对比.mp4
├─42_业务数据采集-DataX部署.mp4
├─43_业务数据采集-同步MySQL数据到HDFS(案例一).mp4
├─44_业务数据采集-同步MySQL数据到HDFS(案例二).mp4
├─45_业务数据采集-同步HDFS数据到MySQL(案例三).mp4
├─46_业务数据采集-DataX传参.mp4
├─47_业务数据采集-Datax的SplitPK切割原理.mp4
├─48_业务数据采集-DataX的HdfsWriter的Null值存储问题.mp4
├─49_业务数据采集-DataX参数调优.mp4
├─50_业务数据采集-Flink-CDC简介.mp4
├─51_业务数据采集-启用MySQL Binlog.mp4
├─52_业务数据采集-DataStreamAPI实现FlinkCDC.mp4
├─53_业务数据采集-FlinkCDC集群提交.mp4
├─54_业务数据采集-FlinkSQL实现FlinkCDC.mp4
├─55_业务数据采集-Datax配置一键生成.mp4
├─56_业务数据采集-全量表数据同步脚本.mp4
├─57_业务数据采集-增量同步Flink-CDC配置.mp4
├─58_业务数据采集-增量同步Flink-CDC集群模式提交.mp4
├─59_业务数据采集-增量同步Flume通道分析.mp4
├─60_业务数据采集-增量同步Flume配置.mp4
├─61_业务数据采集-增量同步Flume拦截器配置.mp4
├─62_业务数据采集-增量同步Flume启停脚本.mp4
├─63_业务数据采集-Hive安装.mp4
(9)\尚硅谷大数据项目之物流数仓-2离线\2.资料;目录中文件数:0个
(10)\尚硅谷大数据项目之物流数仓-2离线\3.代码;目录中文件数:2个
├─建表及装载语句.zip
├─数据加载脚本.zip
(11)\尚硅谷大数据项目之物流数仓-2离线\4.视频;目录中文件数:152个
├─1-物流数仓项目课程介绍.mp4
├─10-事实表介绍.mp4
├─100-dws 1d表首日数据加载脚本.mp4
├─101-dws 1d表每日数据加载脚本.mp4
├─102-机构货物类型粒度下单最近N日汇总表.mp4
├─103-转运站粒度揽收最近N日汇总表.mp4
├─104-发单最近N日汇总表.mp4
├─105-班次粒度运输最近N日汇总表.mp4
├─106-班次粒度运输最近N日汇总表城市获取问题.mp4
├─107-转运站粒度派生成功最近N日汇总表.mp4
├─108-转运站粒度分拣最近N日汇总表.mp4
├─109-dws nd表数据加载脚本.mp4
├─11-事务型事实表设计流程.mp4
├─110-发单历史至今汇总表.mp4
├─111-转运完成历史至今汇总表.mp4
├─112-dws td表首日数据加载脚本.mp4
├─113-dws td表每日数据加载脚本.mp4
├─114-运单相关统计.mp4
├─115-运输相关统计.mp4
├─116-历史至今运单统计.mp4
├─117-运单综合统计.mp4
├─118-各类型货物运单统计.mp4
├─119-城市分析.mp4
├─12-事务型事实表不足01.mp4
├─120-机构分析.mp4
├─121-班次分析.mp4
├─122-线路分析.mp4
├─123-司机分析.mp4
├─124-卡车分析.mp4
├─125-快递综合统计.mp4
├─126-各省份快递统计.mp4
├─127-各城市快递统计.mp4
├─128-各机构快递统计.mp4
├─129-ads数据加载脚本.mp4
├─13-事务型事实表不足02.mp4
├─130-mysql建表.mp4
├─131-hdfs导数据到Mysql案例.mp4
├─132-datax导数据配置文件模板.mp4
├─133-datax导ads数据到mysql.mp4
├─134-dolphinscheduler简介.mp4
├─135-dolphinscheduler部署说明.mp4
├─136-dolphinscheduler安装.mp4
├─137-dolphinscheduler启动停止脚本说明.mp4
├─138-安全中心配置.mp4
├─139-配置工作流.mp4
├─14-周期快照事实表.mp4
├─140-工作流调度.mp4
├─141-参数.mp4
├─142-参数优先级.mp4
├─143-引用依赖资源.mp4
├─144-告警.mp4
后续省略数百条目录