课程介绍(A000474)：
智慧学成项目是对在线教育业务进行大数据统计分析的系统，采用企业级ETL规范化流程、数据仓库建模思想，按课程、用户等不同维度进行数据分析。采用Hadoop、Spark技术栈开发，提供数据仓库、ETL、离线及实时分析等解决方案。
课程目录：
文件目录：
| 博学谷-基于大数据的智慧学成项目课程, |
| │ └─08.阶段八 智慧学成项目, |
| │ ├─01.第一章 智慧学成-项目介绍环境搭建, |
| │ │ 01-项目介绍-学习目标&项目背景和概述_mp4, |
| │ │ 02-项目介绍-业务流程_mp4, |
| │ │ 03-项目介绍-功能模块_mp4, |
| │ │ 04-项目介绍-技术架构_mp4, |
| │ │ 05-环境搭建-学习目标&CDH组件介绍_mp4, |
| │ │ 06-环境搭建-CDH环境搭建_mp4, |
| │ │ 07-环境搭建-配置hosts_mp4, |
| │ │ 08-环境搭建-配置Maven_mp4, |
| │ │ 09-环境搭建-IDEA环境配置_mp4, |
| │ │ 10-环境搭建-导入Scala基础工程&基础工程介绍_mp4, |
| │ │ 11-环境搭建-wordcount代码编写及idea代码测试_mp4, |
| │ │ 12-环境搭建-wordcount任务提交到集群执行_mp4, |
| │ │ 13-Zeppelin简介、Zeppelin调式Spark程序_mp4, |
| │ │ 14-Hue简介、Hue操作hive及hdfs_mp4, |
| │ │ 15-数据仓库-学习目标、数据仓库介绍_mp4, |
| │ │ 16-数据仓库-数据仓库的特点_mp4, |
| │ │ 17-数据仓库-维度分析_mp4, |
| │ │ 18-数据仓库-数据仓库建模_mp4, |
| │ │ 19-数据仓库-Hive创建数据仓库_mp4, |
| │ │ |
| │ ├─02.第二章 智慧学成-数据仓库与ETL, |
| │ │ 01-ETL-学习目标_mp4, |
| │ │ 02-ETL-ETL介绍_mp4, |
| │ │ 03-ETL-课程访问量需求分析-_mp4, |
| │ │ 04-ETL-采集系统介绍_mp4, |
| │ │ 05-ETL-采集系统搭建_mp4, |
| │ │ 06-ETL-采集系统-测试采集课程访问量_mp4, |
| │ │ 07-ETL-NiFi介绍_mp4, |
| │ │ 08-ETL-快速入门_mp4, |
| │ │ 09-ETL-维度数据采集-维度介绍-_mp4, |
| │ │ 10-ETL-维度数据采集-导入学成在线业务数据_mp4, |
| │ │ 11-ETL-维度数据采集-导入NiFi源码&执行采集_mp4, |
| │ │ 12-ETL-维度数据采集-注意事项-NiFi采集乱码处理_mp4, |
| │ │ 13-ETL-维度数据采集-区域维度原文件上传HDFS&spark读取文件_mp4, |
| │ │ 14-ETL-维度数据采集-区域维度原文件数据与实体映射_mp4, |
| │ │ 15-ETL-维度数据采集-区域维度字段关联及区域维度数据入库_mp4, |
| │ │ 16-ETL-维度数据采集-区域维度-注意事项：winutils配置_mp4, |
| │ │ |
| │ ├─03.第三章 智慧学成-课程分析, |
| │ │ ├─1.数据清洗, |
| │ │ │ 01-ETL-数据清洗-课程访问量事实表字段介绍&清洗逻辑介绍_mp4, |
| │ │ │ 02-ETL-数据清洗-课程访问量清洗-获取维度数据&原始数据_mp4, |
| │ │ │ 03-ETL-数据清洗-课程访问量清洗-过滤机器人&关联维度_mp4, |
| │ │ │ 04-ETL-数据清洗-课程访问量清洗-去重&保存到数据仓库_mp4, |
| │ │ │ 05-ETL-数据清洗-课程访问量清洗-测试_mp4, |
| │ │ │ 06-ETL-数据清洗-课程访问量清洗-使用NiFi生产数据并测试_mp4, |
| │ │ │ 07-课程分析-学习目标_mp4, |
| │ │ │ 08-课程分析-课程访问量分析-功能概述&统计分析步骤_mp4, |
| │ │ │ 09-课程分析-课程访问量分析-步骤1：读取课程访问量事实表数据_mp4, |
| │ │ │ 10-课程分析-课程访问量分析-步骤2：课程访问量统计求和_mp4, |
| │ │ │ 11-课程分析-课程访问量分析-步骤3：课程访问量统计结果保存数据仓库_mp4, |
| │ │ │ 12-课程分析-课程访问量分析-使用NiFi将课程访问量分析结果同步到MySQl_mp4, |
| │ │ │ 13-课程分析-课程访问量分析-集成测试概述_mp4, |
| │ │ │ 14-课程分析-课程访问量分析-集成测试-数据清洗统计分析NiFi调度_mp4, |
| │ │ │ 15-课程分析-课程访问量分析-集成测试-联动（清洗、统计分析、同步到业务库）配置并测试_mp4, |
| │ │ │ 16-业务报表系统搭建-Web前端使用说明&Yapi使用说明_mp4, |
| │ │ │ 17-业务报表系统搭建-使用业务后台接口展示业务报表_mp4, |
| │ │ │ |
| │ │ ├─2.课程分析, |
| │ │ │ 01-课程分析-课程购买量-需求分析_mp4, |
| │ │ │ 02-课程分析-课程购买量-采集字段及存储分析_mp4, |
| │ │ │ 03-课程分析-课程购买量-MySQL采集注意事项_mp4, |
| │ │ │ 04-课程分析-课程购买量-NiFi采集MySQL配置_mp4, |
| │ │ │ 05-课程分析-课程购买量-测试NiFi采集MySQL_mp4, |
| │ │ │ 06-课程分析-课程购买量-NiFi生产订单数据保存到MySQL&并进行实时采集_mp4, |
| │ │ │ 07-课程分析-课程购买量-数据清洗-DWD（事实表）结构分析_mp4, |
| │ │ │ 08-课程分析-课程购买量-数据清洗-用户维度采集_mp4, |
| │ │ │ 09-课程分析-课程购买量-DWD代码-维度数据获取_mp4, |
| │ │ │ 10-课程分析-课程购买量-DWD代码-事实表数据封装_mp4, |
| │ │ │ 11-课程分析-课程购买量-DWD代码-保存到数据仓库_mp4, |
| │ │ │ 12-课程分析-课程购买量-DWD代码-测试清洗入库_mp4, |
| │ │ │ 13-课程分析-课程购买量-DWM层结构分析_mp4, |
| │ │ │ 14-课程分析-课程购买量-DWM代码-轻度聚合封装数据_mp4, |
| │ │ │ 15-课程分析-课程购买量-DWM代码-保存到数据仓库&测试入库_mp4, |
| │ │ │ 16-课程分析-课程购买量-统计分析_mp4, |
| │ │ │ 17-课程分析-课程购买量-使用NiFi将业务数据从数据仓库同步到MySQL_mp4, |
| │ │ │ 18-课程分析-课程购买量-集成测试-概述&NiFi调度数据清洗分析任务_mp4, |
| │ │ │ 19-课程分析-课程购买量-集成测试-联动配置&整流程测试_mp4, |
| │ │ │ |
| │ │ └─3.热门学科排名, |
| │ │ 01-热门学科排名-需求分析_mp4, |
| │ │ 02-热门学科排名-业务报表系统字段分析_mp4, |
| │ │ 03-热门学科排名-采集字段及存储分析_mp4, |
| │ │ 04-热门学科排名-NiFi采集用户选课数据&测试_mp4, |
| │ │ 05-热门学科排名-NiFi生产用户选课数据保存到MySQL&并进行实时采集_mp4, |
| │ │ 06-热门学科排名-用户选课DWD层字段说明&清洗分析_mp4, |
| │ │ 07-热门学科排名-用户选课-DWD代码-获取维度数据&用户选课原始数据_mp4, |
| │ │ 08-热门学科排名-用户选课-DWD代码-事实表数据封装&保存到数据仓库_mp4, |
| │ │ 09-热门学科排名-用户选课-DWD代码-测试清洗入库_mp4, |
| │ │ 10-热门学科排名-统计分析概述&课程分类维度采集_mp4, |
| │ │ 11-热门学科排名-统计分析-销售量-周-统计分析步骤_mp4, |
| │ │ 12-热门学科排名-统计分析-销售量-周-代码-获取周区间日期_mp4, |
| │ │ 13-热门学科排名-统计分析-销售量-周-代码-根据日期获取数据并计算涨幅_mp4, |
| │ │ 14-热门学科排名-统计分析-销售量-周-代码-维度关联&保存到数据仓库_mp4, |
| │ │ 15-热门学科排名-统计分析-销售量-周-代码-抽取工具类&测试入库_mp4, |
| │ │ 16-热门学科排名-统计分析-销售量-月-统计分析步骤及代码编写_mp4, |
| │ │ 17-热门学科排名-统计分析-销售量-月-测试入库_mp4, |
| │ │ 18-热门学科排名-统计分析-学生人数-周-统计分析步骤_mp4, |
| │ │ 19-热门学科排名-统计分析-学生人数-周-代码-获取周区间&获取数据&计算涨幅_mp4, |
| │ │ 20-热门学科排名-统计分析-学生人数-周-代码-维度关联&保存到数据仓库_mp4, |
| │ │ 21-热门学科排名-统计分析-学生人数-周-代码-抽取工具类&测试入库_mp4, |
| │ │ 22-热门学科排名-统计分析-学生人数-月-统计分析步骤&代码编写_mp4, |
| │ │ 23-热门学科排名-统计分析-学生人数-月-测试入库_mp4, |
| │ │ 24-热门学科排名-统计分析-销售额-周-统计分析步骤&代码编写_mp4, |
| │ │ 25-热门学科排名-统计分析-销售额-周-测试入库_mp4, |
| │ │ 26-热门学科排名-统计分析-销售额-月-统计分析步骤&代码编写_mp4, |
| │ │ 27-热门学科排名-统计分析-销售额-月-测试入库_mp4, |
| │ │ 28-热门学科排名-统计分析-使用NiFi将业务数据从数据仓库同步到MySQL_mp4, |
| │ │ 29-热门学科排名-集成测试-配置NiFi调度数据清洗分析任务_mp4, |
| │ │ 30-热门学科排名-集成测试-测试NiFi调度数据清洗分析_mp4, |
| │ │ 31-热门学科排名-集成测试-联动配置&测试_mp4, |
| │ │ 32-热门学科排名-集成测试-报表系统Web展示_mp4, |
| │ │ |
| │ ├─04.第四章 智慧学成-平板看台, |
| │ │ 01-实时分析-学习目标_mp4, |
| │ │ 02-实时分析-平台看板需求分析&实时分析应用场景_mp4, |
| │ │ 03-实时分析-实时分析技术方案_mp4, |
| │ │ 04-实时分析-指标与维度分析&数据存储分析_mp4, |
| │ │ 05-实时分析-今日访问量-概述&数据采集_mp4, |
| │ │ 06-实时分析-今日访问量-统计分析逻辑_mp4, |
| │ │ 07-实时分析-今日访问量-代码-redis获取kafka的offset_mp4, |
| │ │ 08-实时分析-今日访问量-代码-SparkStreaming获取kafka中的数据_mp4, |
| │ │ 09-实时分析-今日访问量-代码-去重计算实时访问量&保存redis_mp4, |
| │ │ 10-实时分析-今日访问量-代码-redis中保存当前offset进度_mp4, |
| │ │ 11-实时分析-今日访问量-代码-测试_mp4, |
| │ │ 12-实时分析-今日访问量-NiFi生产数据&测试_mp4, |
| │ │ 13-实时分析-新增用户量-概述&数据采集_mp4, |
| │ │ 14-实时分析-新增用户量-统计分析逻辑_mp4, |
| │ │ 15-实时分析-新增用户量-代码-实时计算新增用户量_mp4, |
| │ │ 16-实时分析-新增用户量-代码-测试_mp4, |
| │ │ 17-实时分析-新增用户量-NiFi生产数据&测试_mp4, |
| │ │ 18-实时分析-今日购买量-概述&数据采集_mp4, |
| │ │ 19-实时分析-今日购买量-统计分析逻辑&代码_mp4, |
| │ │ 20-实时分析-今日购买量-代码-测试_mp4, |
| │ │ 21-实时分析-今日购买量-NiFi生产数据&测试_mp4, |
| │ │ 22-实时分析-集成测试-NiFi调度配置_mp4, |
| │ │ 23-实时分析-集成测试-测试&web展示_mp4, |
| │ │ |
| │ ├─05.第五章 智慧学成-即时查询, |
| │ │ 01即时查询-学习目标_mp4, |
| │ │ 02即时查询-需求分析&技术方案_mp4, |
| │ │ 03即时查询-技术方案-代码演示-保存-代码_mp4, |
| │ │ 04即时查询-技术方案-代码演示-保存-测试_mp4, |
| │ │ 05即时查询-技术方案-代码演示-查询-代码&测试_mp4, |
| │ │ 06即时查询-采集分析&存储分析_mp4, |
| │ │ 07即时查询-数据采集-用户学习采集_mp4, |
| │ │ 08即时查询-数据采集-课程视频维度采集_mp4, |
| │ │ 09即时查询-统计分析-概述&步骤1统计逻辑&中间表介绍_mp4, |
| │ │ 10即时查询-统计分析-步骤1：代码-获取原始数据_mp4, |
| │ │ 11即时查询-统计分析-步骤1：代码-注册udf函数_mp4, |
| │ │ 12即时查询-统计分析-步骤1：代码-关联相关维度&统计学习时长_mp4, |
| │ │ 13即时查询-统计分析-步骤1：代码-测试_mp4, |
| │ │ 14即时查询-统计分析-步骤2：概述_mp4, |
| │ │ 15即时查询-统计分析-步骤2：代码_mp4, |
| │ │ 16即时查询-统计分析-步骤2：测试_mp4, |
| │ │ 17即时查询-统计分析-使用hbase注意事项_mp4, |
| │ │ 18即时查询-统计分析-NiFi生产数据-配置_mp4, |
| │ │ 19即时查询-统计分析-NiFi生产数据-测试&代码测试_mp4, |
| │ │ 20即时查询-集成测试-配置_mp4, |
| │ │ 21即时查询-集成测试-测试&web展示_mp4, |
| │ │ |
| │ ├─06.第六章 智慧学成-系统集成测试, |
| │ │ 01系统集成测试-学习目标&概述_mp4, |
| │ │ 02系统集成测试-代码重新打包-代码修改_mp4, |
| │ │ 03系统集成测试-代码重新打包-上传NiFi容器_mp4, |
| │ │ 04系统集成测试-NiFi采集-清洗-统计分析-概述&清理业务数据_mp4, |
| │ │ 05系统集成测试-NiFi采集-清洗-统计分析-即时查询_mp4, |
| │ │ 06系统集成测试-NiFi采集-清洗-统计分析-离线分析-课程访问量_mp4, |
| │ │ 07系统集成测试-NiFi采集-清洗-统计分析-离线分析-课程购买量_mp4, |
| │ │ 08系统集成测试-NiFi采集-清洗-统计分析-离线分析-热门学科排名_mp4, |
| │ │ 09系统集成测试-NiFi采集-清洗-统计分析-实时分析_mp4, |
| │ │ 10系统集成测试-NiFi采集-清洗-统计分析-web展示_mp4, |
| │ │ |
| │ └─07.第七章 智慧学成-项目就业指导, |
| │ 01项目就业指导-就业指导概述&项目功能模块_mp4, |
| │ 02项目就业指导-技术构架&技术栈-1_mp4, |
| │ 03项目就业指导-技术构架&技术栈-2_mp4, |
| │ 04项目就业指导-数据仓库是如何设计的？_mp4, |
| │ 05项目就业指导-数据采集是如何实现的 ？_mp4, |
| │ 06项目就业指导-ETL是如何做的？_mp4, |
| │ 07项目就业指导-离线分析是如何实现的？_mp4, |
| │ 08项目就业指导-同比分析在项目的应用？_mp4, |
| │ 09项目就业指导-实时分析是如何做的？_mp4, |
| │ 10项目就业指导-如何从海量数据查询想的数据？_mp4, |
| │ 11项目就业指导-项目中任务调度是如何做的？_mp4, |
-
朋友圈不定时发福利（开通会员免费获取资源）
-
微信号
5702701
点击我自动复制
付费资源
© 版权声明
本站所有资源均来自互联网收集, 本站大数据爬虫负责收集不承担任何版权问题。所有资源均不出售，只免费分享给本站等级用户！如有内容侵犯到任何版权问题, 请发送版权相关证明与本站客服,一经核实将及时予与删除并致以最深的歉意。
THE END
会员专属
暂无评论内容