论坛元老
 
- 威望
- 0
- 贡献
- 67
- 热心值
- 0
- 金币
- 4126
- 注册时间
- 2020-8-31
|
课程介绍』
城市中每时每刻都会产生海量数据,应用数据挖掘、机器学习和可视化技术,分析出的数据可以改进城市规划,缓解交通拥堵,抓捕罪犯,利于大数据为交通决策提供辅助。智慧交通卡口分析项目就是基于海量数据挖据出问题卡口,问题通道,分析主干道拥堵情况,为决策者决策提供辅助。
『课程目录』:
01-Spark 数据处理流程
02-模拟数据
03-将数据导入Hive
04-卡扣监控01
05_项目-卡扣流量监控02
06_卡扣监控代码
07_topN卡扣详细信息
08_车辆高速通过的TOPN卡扣
09_车辆轨迹
10_随机抽取车辆
11_随机抽取车辆02
12-随机抽取车辆03
13_卡扣流量转换率
14-实时统计车辆速度
15_动态改变广播变量
16_资源调优+并行度调优
17_代码调优
18_数据本地化级别
19_数据本地化调优+内存调优
20_解决数据倾斜01
21_解决数据倾斜02
22_统计区域道路车辆
23_UDAF 统计道路卡扣车辆
24-复习
一套比较简单的spark的视频
|
|