Skip to content

基于Spark2.x新闻网大数据实时分析可视化系统项目

Notifications You must be signed in to change notification settings

ying0216/News_Spark

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

6 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

基于Spark2.x新闻网大数据实时分析可视化系统项目

一、业务需求分析

  • 捕获用户浏览日志信息
  • 实时分析前20名流量最高的新闻话题
  • 实时统计当前线上已曝光的新闻话题
  • 统计哪个时段用户浏览量最高

二、系统架构图设计

image

三、系统数据流程设计

image

四、集群资源规划设计

image

五、步骤详解

具体请参考博客

About

基于Spark2.x新闻网大数据实时分析可视化系统项目

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Scala 45.2%
  • Java 33.8%
  • HTML 21.0%