# DsSpark(大型电商Spark项目,分析用户点击行为,购买行为和搜索行为)
该项目是基于Java开发的spark电商项目分析
本项目主要用于互联网电商企业中,使用Spark技术开发的大数据统计分析平台,对电商网站的各种用户行为(访问行为、购物行为、广告点击行为等)进行复杂的分析。用统计分析出来的数据,辅助公司中的PM(产品经理)、数据分析师以及管理人员分析现有产品的情况,并根据用户行为分析结果持续改进产品的设计,以及调整公司的战略和业务。最终达到用大数据技术来帮助提升公司的业绩、营业额以及市场占有率的目标。
本项目使用了Spark技术生态栈中最常用的三个技术框架,Spark Core、Spark SQL和Spark Streaming,进行离线计算和实时计算业务模块的开发。实现了包括用户访问session分析、页面单跳转化率统计、热门商品离线统计、广告流量实时统计4个业务模块。
在项目中,重点介绍符合实际企业项目中的性能调优、troubleshooting以及数据倾斜等知识和技术,同时以企业级大数据项目开发流程贯穿每个业务模块的讲解,涵盖了项目开发全流程,包括需求分析、方案设计、数据设计、编码实现、测试以及性能调优等环节,全面还原真实大数据项目的开发流程
没有合适的资源?快使用搜索试试~ 我知道了~
温馨提示
软件开发设计:应用软件开发、系统软件开发、移动应用开发、网站开发C++、Java、python、web、C#等语言的项目开发与学习资料 硬件与设备:单片机、EDA、proteus、RTOS、包括计算机硬件、服务器、网络设备、存储设备、移动设备等 操作系统:LInux、树莓派、安卓开发、微机操作系统、网络操作系统、分布式操作系统等。此外,还有嵌入式操作系统、智能操作系统等。 网络与通信:数据传输、信号处理、网络协议、网络与通信硬件、网络安全网络与通信是一个非常广泛的领域,它涉及到计算机科学、电子工程、数学等多个学科的知识。 云计算与大数据:包括云计算平台、大数据分析、人工智能、机器学习等,云计算是一种基于互联网的计算方式,通过这种方式,共享的软硬件资源和信息可以按需提供给计算机和其他设备。
资源推荐
资源详情
资源评论
收起资源包目录
该项目是基于Java开发的spark电商项目分析.zip (61个子文件)
cm
pom.xml 3KB
DsSparkProblem.iml 80B
src
main
resources
my.properties 497B
java
com
dianshang
utils
SparkUtils.java 2KB
ParamUtils.java 1KB
ValidUtils.java 6KB
MockData.java 5KB
ConfigurationManager.java 5KB
Constants.java 3KB
NumberUtils.java 527B
StringUtils.java 2KB
DateUtils.java 4KB
dao
ISessionRandomExtractDAO.java 328B
IPageSplitConvertRateDAO.java 256B
IAdProvinceTop3DAO.java 271B
IAdBlacklistDAO.java 414B
ISessionAggrStatDAO.java 314B
IAdStatDAO.java 233B
IAreaTop3ProductDAO.java 276B
factory
DAOFactory.java 2KB
ITop10SessionDAO.java 223B
IAdClickTrendDAO.java 256B
impl
AreaTop3ProductDAOImpl.java 1KB
AdUserClickCountDAOImpl.java 4KB
AdClickTrendDAOImpl.java 3KB
Top10SessionDAOImpl.java 668B
SessionRandomExtractDAOImpl.java 879B
AdBlacklistDAOImpl.java 1KB
SessionDetailDAOImpl.java 2KB
PageSplitConvertRateDAOImpl.java 673B
AdProvinceTop3DAOImpl.java 2KB
TaskDAOImpl.java 3KB
AdStatDAOImpl.java 2KB
SessionAggrStatDAOImpl.java 1KB
Top10CategoryDAOImpl.java 677B
ISessionDetailDAO.java 445B
ITop10CategoryDAO.java 213B
ITaskDAO.java 271B
IAdUserClickCountDAO.java 567B
spark
CategorySortKey.java 3KB
SessionAggrStatAccumulator.java 4KB
UserVisitSessionAnalyzeSpark.java 63KB
model
AggrStatAccumulatorModel.java 5KB
AdStatQueryResult.java 194B
AdClickTrendQueryResult.java 296B
AdUserClickCountQueryResult.java 435B
jdbc
JDBCHelper.java 8KB
domain
AreaTop3Product.java 1KB
AdProvinceTop3.java 692B
SessionRandomExtract.java 998B
AdClickTrend.java 798B
SessionAggrStat.java 4KB
Top10Session.java 743B
PageSplitConvertRate.java 444B
Top10Category.java 888B
AdUserClickCount.java 673B
SessionDetail.java 2KB
Task.java 1KB
AdStat.java 806B
AdBlacklist.java 253B
README.md 1KB
共 61 条
- 1
资源评论
妄北y
- 粉丝: 9604
- 资源: 1万+
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功