基于spark框架的滴滴出行大数据分析平台设计与实现.doc

随着共享经济模式被越来越多市民接受，滴滴出行给很多市民提供了方便，不仅低碳环保，而且有利于城市交通，但在不同时段不同区域也存在供需矛盾，给城市管理者智慧管理带来了挑战。本系统旨在应用大数据先进IT技术，分析挖掘出租车运营数据，开发设计一套出行大数据分析系统，为运营管理者提供决策支持，以提升城市管理水平。 本文系统地阐述了整个滴滴出行大数据分析系统的功能及实现。基于Spark分布式大数据计算框架，采用PySpark API进行数据分析， WEB后台开发采用Python Flask WEB开发框架，前端使用EChart JS库对分析结果进行可视化展示，构建了滴滴出行大数据分析系统。