## 可视化效果
没有合适的资源?快使用搜索试试~ 我知道了~
温馨提示
基于Spark对全国历史气象数据的分析 用PySpark处理数据 将所有文件读为一个****RDD rdd = sc.wholeTextFiles("file:///" + os.getcwd() + "/china/") **数据清洗 ** 去除字母, -9999等无效数据 进行计算、排序等操作 计算出最大值,最小值,平均值,并按照年份排序。最终得出各个站点以及全国每年的主要气象数据的统计结果。 将结果存入数据库中 得出的结果和stations.txt文件中站点的主要信息分别存入MySQL数据库中。 数据可视化 主要运用了Python的第三方库matplotlib和pyecharts
资源推荐
资源详情
资源评论
收起资源包目录
BigData-Spark-master.zip (61个子文件)
BigData-Spark-master
答辩.pdf 1.64MB
data
china_stations.txt 19KB
readme.txt 31B
.history
README_20200518070517.md 76B
README_20200518070957.md 84B
README_20200518073517.md 107B
README_20200518070510.md 66B
README_20200518070949.md 77B
README_20200518070417.md 32B
README_20200518070457.md 33B
README_20200518070522.md 83B
README_20200518071009.md 86B
README_20200518072849.md 102B
README_20200518073947.md 104B
README_20200518074657.md 110B
README_20200518074700.md 116B
README_20200518070955.md 79B
README_20200518073538.md 102B
README_20200518070507.md 54B
README_20200518073539.md 102B
README_20200518070520.md 82B
README_20200518070459.md 36B
README_20200518074705.md 134B
README_20200518074701.md 119B
README_20200518070523.md 83B
README_20200518073949.md 107B
README_20200518070515.md 75B
README_20200518071001.md 83B
README_20200518070503.md 48B
README_20200518071003.md 86B
README_20200518070509.md 60B
README_20200518072126.md 101B
README_20200518070953.md 78B
code
readme_20200518070417.txt 30B
readme_20200518071204.txt 32B
readme_20200518071207.txt 32B
readme_20200518071146.txt 30B
README_20200518070450.md 33B
README_20200518072125.md 101B
README_20200518072121.md 95B
.idea
vcs.xml 180B
misc.xml 288B
BigData.iml 284B
inspectionProfiles
Project_Default.xml 3KB
profiles_settings.xml 174B
modules.xml 266B
.gitignore 176B
charts
全国2018年各气象站最高气温分布图(单位_℃).png 189KB
全国2018年各气象站最低气温分布图(单位_℃).png 190KB
data_info.png 359KB
全国2018年各气象站降水量分布图(单位_mm).png 204KB
全国历年气温变化曲线.png 87KB
全国历年平均降水量变化曲线.png 77KB
全国2018年各气象站平均气温分布图(单位_℃).png 198KB
README.md 19B
code
show.py 3KB
show_map.py 6KB
stations_to_mysql.py 1KB
year_all_stations.py 4KB
year_china.py 5KB
readme.txt 32B
共 61 条
- 1
资源评论
博士僧小星
- 粉丝: 1740
- 资源: 5850
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功