新闻话题实时统计分析系统,高老师rubin,新闻话题实时统计分析系统
课程简介:
新闻话题实时统计分析系统以搜狗实验室的用户查询日志为基础,模拟生成用户查询日志,通过Flume将日志进行实时采集、汇集,分析并进行存储。利用Spark Streaming实时统计分析前20名流量最高的新闻话题,并在前端页面实时显示结果。
课程目标:
1、搭建Flume,Kafka,zookeeper
2、快速上手Spark
3、跑通大数据流程
4、搭建Spring Boot工程实时显示Spark分析出来的数据
5、能够把开发的Spark代码,和Spring Boot代码正确部署到服务器 适用人群:大数据初学者,及想将大数据与Web开发整合的开发者