简介
本套课程:基于大数据的智慧学成项目,本课程目前共包括七大章节完整版,从环境搭建到数据仓库、系统集成、数据统计清洗分析等,适合Java程序开发人员想提高开发实战经验,或者对大数据感兴趣的同学学习,课程包括培训视频与数据资料包,课程共计36.85G。文章底部附下载地址。
课程介绍:
智慧学成项目是对在线教育业务进行大数据统计分析的系统,采用企业级ETL规范化流程、数据仓库建模思想,按课程、用户等不同维度进行数据分析。采用Hadoop、Spark技术栈开发,提供数据仓库、ETL、离线及实时分析等解决方案。
课程适合目标人群
·熟悉悉Java语言,拥有3-5年Java开发经验;
·有大数据基础开发经验,但缺乏项目实战经验;
·希望积累综合项目经验并扩充技术栈的开发者;
·对大数据感兴趣,希望掌握更多前沿技术。
课程文件目录:V-3151:基于大数据的智慧学成项目课程 [36.85]
01.第一章 智慧学成-项目介绍环境搭建 [497.66M]
01-项目介绍-学习目标&项目背景和概述.mp4 [40.92M]
02-项目介绍-业务流程.mp4 [38.97M]
03-项目介绍-功能模块.mp4 [49.15M]
04-项目介绍-技术架构.mp4 [47.56M]
05-环境搭建-学习目标&CDH组件介绍.mp4 [23.24M]
06-环境搭建-CDH环境搭建.mp4 [41.88M]
07-环境搭建-配置hosts.mp4 [15.19M]
08-环境搭建-配置Maven.mp4 [17.37M]
09-环境搭建-IDEA环境配置.mp4 [21.81M]
10-环境搭建-导入Scala基础工程&基础工程介绍.mp4 [16.82M]
11-环境搭建-wordcount代码编写及idea代码测试.mp4 [34.21M]
12-环境搭建-wordcount任务提交到集群执行.mp4 [27.25M]
13-Zeppelin简介、Zeppelin调式Spark程序.mp4 [21.75M]
14-Hue简介、Hue操作hive及hdfs.mp4 [18.08M]
15-数据仓库-学习目标、数据仓库介绍.mp4 [12.81M]
16-数据仓库-数据仓库的特点.mp4 [14.90M]
17-数据仓库-维度分析.mp4 [13.93M]
18-数据仓库-数据仓库建模.mp4 [25.15M]
19-数据仓库-Hive创建数据仓库.mp4 [16.68M]
02.第二章 智慧学成-数据仓库与ETL [408.05M]
01-ETL-学习目标.mp4 [14.56M]
02-ETL-ETL介绍.mp4 [28.87M]
03-ETL-课程访问量需求分析-.mp4 [34.55M]
04-ETL-采集系统介绍.mp4 [5.25M]
05-ETL-采集系统搭建.mp4 [36.90M]
06-ETL-采集系统-测试采集课程访问量.mp4 [8.04M]
07-ETL-NiFi介绍.mp4 [20.39M]
08-ETL-快速入门.mp4 [22.47M]
09-ETL-维度数据采集-维度介绍-.mp4 [5.07M]
10-ETL-维度数据采集-导入学成在线业务数据.mp4 [8.00M]
11-ETL-维度数据采集-导入NiFi源码&执行采集.mp4 [23.94M]
12-ETL-维度数据采集-注意事项-NiFi采集乱码处理.mp4 [12.22M]
13-ETL-维度数据采集-区域维度原文件上传HDFS&spark读取文件.mp4 [20.69M]
14-ETL-维度数据采集-区域维度原文件数据与实体映射.mp4 [21.89M]
15-ETL-维度数据采集-区域维度字段关联及区域维度数据入库.mp4 [80.08M]
16-ETL-维度数据采集-区域维度-注意事项:winutils配置.mp4 [65.14M]
03.第三章 智慧学成-课程分析 [1.62G]
1.数据清洗 [494.18M]
01-ETL-数据清洗-课程访问量事实表字段介绍&清洗逻辑介绍.mp4 [19.59M]
02-ETL-数据清洗-课程访问量清洗-获取维度数据&原始数据.mp4 [38.14M]
03-ETL-数据清洗-课程访问量清洗-过滤机器人&关联维度.mp4 [42.47M]
04-ETL-数据清洗-课程访问量清洗-去重&保存到数据仓库.mp4 [24.22M]
05-ETL-数据清洗-课程访问量清洗-测试.mp4 [53.98M]
06-ETL-数据清洗-课程访问量清洗-使用NiFi生产数据并测试.mp4 [55.81M]
07-课程分析-学习目标.mp4 [11.71M]
08-课程分析-课程访问量分析-功能概述&统计分析步骤.mp4 [6.79M]
09-课程分析-课程访问量分析-步骤1:读取课程访问量事实表数据.mp4 [16.46M]
10-课程分析-课程访问量分析-步骤2:课程访问量统计求和.mp4 [19.22M]
11-课程分析-课程访问量分析-步骤3:课程访问量统计结果保存数据仓库.mp4 [35.62M]
12-课程分析-课程访问量分析-使用NiFi将课程访问量分析结果同步到MySQl.mp4 [16.48M]
13-课程分析-课程访问量分析-集成测试概述.mp4 [7.69M]
14-课程分析-课程访问量分析-集成测试-数据清洗统计分析NiFi调度.mp4 [34.36M]
15-课程分析-课程访问量分析-集成测试-联动(清洗、统计分析、同步到业务库)配置并测试.mp4 [30.58M]
16-业务报表系统搭建-Web前端使用说明&Yapi使用说明.mp4 [42.13M]
17-业务报表系统搭建-使用业务后台接口展示业务报表.mp4 [38.93M]
2.课程分析 [477.38M]
01-课程分析-课程购买量-需求分析.mp4 [40.93M]
02-课程分析-课程购买量-采集字段及存储分析.mp4 [19.77M]
03-课程分析-课程购买量-MySQL采集注意事项.mp4 [10.62M]
04-课程分析-课程购买量-NiFi采集MySQL配置.mp4 [7.38M]
05-课程分析-课程购买量-测试NiFi采集MySQL.mp4 [44.21M]
06-课程分析-课程购买量-NiFi生产订单数据保存到MySQL&并进行实时采集.mp4 [38.06M]
07-课程分析-课程购买量-数据清洗-DWD(事实表)结构分析.mp4 [9.11M]
08-课程分析-课程购买量-数据清洗-用户维度采集.mp4 [7.96M]
09-课程分析-课程购买量-DWD代码-维度数据获取.mp4 [9.91M]
10-课程分析-课程购买量-DWD代码-事实表数据封装.mp4 [42.61M]
11-课程分析-课程购买量-DWD代码-保存到数据仓库.mp4 [9.93M]
12-课程分析-课程购买量-DWD代码-测试清洗入库.mp4 [37.31M]
13-课程分析-课程购买量-DWM层结构分析.mp4 [11.79M]
14-课程分析-课程购买量-DWM代码-轻度聚合封装数据.mp4 [43.25M]
15-课程分析-课程购买量-DWM代码-保存到数据仓库&测试入库.mp4 [24.88M]
16-课程分析-课程购买量-统计分析.mp4 [39.22M]
17-课程分析-课程购买量-使用NiFi将业务数据从数据仓库同步到MySQL.mp4 [12.16M]
18-课程分析-课程购买量-集成测试-概述&NiFi调度数据清洗分析任务.mp4 [39.22M]
19-课程分析-课程购买量-集成测试-联动配置&整流程测试.mp4 [29.06M]
3.热门学科排名 [688.34M]
01-热门学科排名-需求分析.mp4 [54.36M]
02-热门学科排名-业务报表系统字段分析.mp4 [14.59M]
03-热门学科排名-采集字段及存储分析.mp4 [9.97M]
04-热门学科排名-NiFi采集用户选课数据&测试.mp4 [19.68M]
05-热门学科排名-NiFi生产用户选课数据保存到MySQL&并进行实时采集.mp4 [20.59M]
06-热门学科排名-用户选课DWD层字段说明&清洗分析.mp4 [6.70M]
07-热门学科排名-用户选课-DWD代码-获取维度数据&用户选课原始数据.mp4 [16.60M]
08-热门学科排名-用户选课-DWD代码-事实表数据封装&保存到数据仓库.mp4 [16.79M]
09-热门学科排名-用户选课-DWD代码-测试清洗入库.mp4 [28.98M]
10-热门学科排名-统计分析概述&课程分类维度采集.mp4 [41.01M]
11-热门学科排名-统计分析-销售量-周-统计分析步骤.mp4 [8.18M]
12-热门学科排名-统计分析-销售量-周-代码-获取周区间日期.mp4 [12.97M]
13-热门学科排名-统计分析-销售量-周-代码-根据日期获取数据并计算涨幅.mp4 [38.89M]
14-热门学科排名-统计分析-销售量-周-代码-维度关联&保存到数据仓库.mp4 [31.78M]
15-热门学科排名-统计分析-销售量-周-代码-抽取工具类&测试入库.mp4 [16.49M]
16-热门学科排名-统计分析-销售量-月-统计分析步骤及代码编写.mp4 [23.96M]
17-热门学科排名-统计分析-销售量-月-测试入库.mp4 [16.36M]
18-热门学科排名-统计分析-学生人数-周-统计分析步骤.mp4 [6.38M]
19-热门学科排名-统计分析-学生人数-周-代码-获取周区间&获取数据&计算涨幅.mp4 [40.38M]
20-热门学科排名-统计分析-学生人数-周-代码-维度关联&保存到数据仓库.mp4 [20.94M]
21-热门学科排名-统计分析-学生人数-周-代码-抽取工具类&测试入库.mp4 [18.66M]
22-热门学科排名-统计分析-学生人数-月-统计分析步骤&代码编写.mp4 [15.34M]
23-热门学科排名-统计分析-学生人数-月-测试入库.mp4 [13.66M]
24-热门学科排名-统计分析-销售额-周-统计分析步骤&代码编写.mp4 [29.33M]
25-热门学科排名-统计分析-销售额-周-测试入库.mp4 [14.34M]
26-热门学科排名-统计分析-销售额-月-统计分析步骤&代码编写.mp4 [14.96M]
27-热门学科排名-统计分析-销售额-月-测试入库.mp4 [32.32M]
28-热门学科排名-统计分析-使用NiFi将业务数据从数据仓库同步到MySQL.mp4 [18.97M]
29-热门学科排名-集成测试-配置NiFi调度数据清洗分析任务.mp4 [22.09M]
30-热门学科排名-集成测试-测试NiFi调度数据清洗分析.mp4 [17.43M]
31-热门学科排名-集成测试-联动配置&测试.mp4 [34.81M]
32-热门学科排名-集成测试-报表系统Web展示.mp4 [10.83M]
本套课程来自vipc6.com.jpg [16.77K]
更多课程:VIPC6.COM.url [0.12K]
课程说明与解压密码.txt [0.37K]
本套课程来自vipc6.com.jpg [16.77K]
更多课程:VIPC6.COM.url [0.12K]
课程说明与解压密码.txt [0.37K]
04.第四章 智慧学成-平板看台 [509.01M]
01-实时分析-学习目标.mp4 [15.65M]
02-实时分析-平台看板需求分析&实时分析应用场景.mp4 [13.94M]
03-实时分析-实时分析技术方案.mp4 [4.82M]
04-实时分析-指标与维度分析&数据存储分析.mp4 [12.66M]
05-实时分析-今日访问量-概述&数据采集.mp4 [11.36M]
06-实时分析-今日访问量-统计分析逻辑.mp4 [5.65M]
07-实时分析-今日访问量-代码-redis获取kafka的offset.mp4 [39.84M]
08-实时分析-今日访问量-代码-SparkStreaming获取kafka中的数据.mp4 [25.08M]
09-实时分析-今日访问量-代码-去重计算实时访问量&保存redis.mp4 [65.01M]
10-实时分析-今日访问量-代码-redis中保存当前offset进度.mp4 [34.50M]
11-实时分析-今日访问量-代码-测试.mp4 [60.64M]
12-实时分析-今日访问量-NiFi生产数据&测试.mp4 [44.14M]
13-实时分析-新增用户量-概述&数据采集.mp4 [19.00M]
14-实时分析-新增用户量-统计分析逻辑.mp4 [5.05M]
15-实时分析-新增用户量-代码-实时计算新增用户量.mp4 [16.42M]
16-实时分析-新增用户量-代码-测试.mp4 [14.32M]
17-实时分析-新增用户量-NiFi生产数据&测试.mp4 [14.50M]
18-实时分析-今日购买量-概述&数据采集.mp4 [19.92M]
19-实时分析-今日购买量-统计分析逻辑&代码.mp4 [20.69M]
20-实时分析-今日购买量-代码-测试.mp4 [9.70M]
21-实时分析-今日购买量-NiFi生产数据&测试.mp4 [17.12M]
22-实时分析-集成测试-NiFi调度配置.mp4 [20.84M]
23-实时分析-集成测试-测试&web展示.mp4 [18.19M]
05.第五章 智慧学成-即时查询 [471.96M]
01即时查询-学习目标.mp4 [11.69M]
02即时查询-需求分析&技术方案.mp4 [13.65M]
03即时查询-技术方案-代码演示-保存-代码.mp4 [37.50M]
04即时查询-技术方案-代码演示-保存-测试.mp4 [19.72M]
05即时查询-技术方案-代码演示-查询-代码&测试.mp4 [51.66M]
06即时查询-采集分析&存储分析.mp4 [12.09M]
07即时查询-数据采集-用户学习采集.mp4 [23.55M]
08即时查询-数据采集-课程视频维度采集.mp4 [14.26M]
09即时查询-统计分析-概述&步骤1统计逻辑&中间表介绍.mp4 [10.93M]
10即时查询-统计分析-步骤1:代码-获取原始数据.mp4 [17.34M]
11即时查询-统计分析-步骤1:代码-注册udf函数.mp4 [12.47M]
12即时查询-统计分析-步骤1:代码-关联相关维度&统计学习时长.mp4 [36.28M]
13即时查询-统计分析-步骤1:代码-测试.mp4 [21.31M]
14即时查询-统计分析-步骤2:概述.mp4 [4.86M]
15即时查询-统计分析-步骤2:代码.mp4 [24.56M]
16即时查询-统计分析-步骤2:测试.mp4 [30.29M]
17即时查询-统计分析-使用hbase注意事项.mp4 [22.76M]
18即时查询-统计分析-NiFi生产数据-配置.mp4 [9.13M]
19即时查询-统计分析-NiFi生产数据-测试&代码测试.mp4 [31.17M]
20即时查询-集成测试-配置.mp4 [39.06M]
21即时查询-集成测试-测试&web展示.mp4 [27.69M]
06.第六章 智慧学成-系统集成测试 [207.22M]
01系统集成测试-学习目标&概述.mp4 [31.18M]
02系统集成测试-代码重新打包-代码修改.mp4 [37.74M]
03系统集成测试-代码重新打包-上传NiFi容器.mp4 [33.43M]
04系统集成测试-NiFi采集-清洗-统计分析-概述&清理业务数据.mp4 [10.25M]
05系统集成测试-NiFi采集-清洗-统计分析-即时查询.mp4 [22.72M]
06系统集成测试-NiFi采集-清洗-统计分析-离线分析-课程访问量.mp4 [14.68M]
07系统集成测试-NiFi采集-清洗-统计分析-离线分析-课程购买量.mp4 [19.16M]
08系统集成测试-NiFi采集-清洗-统计分析-离线分析-热门学科排名.mp4 [22.00M]
09系统集成测试-NiFi采集-清洗-统计分析-实时分析.mp4 [6.22M]
10系统集成测试-NiFi采集-清洗-统计分析-web展示.mp4 [9.84M]
07.第七章 智慧学成-项目就业指导 [154.86M]
01项目就业指导-就业指导概述&项目功能模块.mp4 [40.93M]
02项目就业指导-技术构架&技术栈-1.mp4 [20.56M]
03项目就业指导-技术构架&技术栈-2.mp4 [8.62M]
04项目就业指导-数据仓库是如何设计的?.mp4 [16.69M]
05项目就业指导-数据采集是如何实现的 ?.mp4 [4.08M]
06项目就业指导-ETL是如何做的?.mp4 [12.34M]
07项目就业指导-离线分析是如何实现的?.mp4 [22.64M]
08项目就业指导-同比分析在项目的应用?.mp4 [3.68M]
09项目就业指导-实时分析是如何做的?.mp4 [7.16M]
10项目就业指导-如何从海量数据查询想的数据?.mp4 [4.28M]
11项目就业指导-项目中任务调度是如何做的?.mp4 [13.88M]
暂无评论内容