banner
NEWS LETTER

基于Python+Spark的气象数据分析系统的设计与实现

Scroll down

基于Python+Spark的气象数据分析系统的设计与实现

两个方向:

​ 1、只爬长沙及下辖区的天气数据

​ a.一次性爬完放到数据库中,前端传递参数到后端——城市、年、月——后端获取到参数传递给函数,进行数据的获取、根据传递的条件进行筛选数据,返回数据给spark进行数据分析、数据分析后传入mysql中,调用可视化函数从mysql中读取数据进行可视化,将结果转换为json格式传递给前端页面进行展示

​ 2、爬所有城市的数据

​ 麻烦的很——滚

其他文章
cover
ajax
  • 24/08/13
  • 15:13