分享
Spark Streaming实时流式大数据处理实战
电子书推荐
-
-
spark大数据处理技术 评分:
《Spark大数据处理技术》以Spark 0.9版本为基础进行编写，是一本全面介绍Spark及Spark生态圈相关技术的书籍，是国内首本深入介绍Spark原理和架构的技术书籍。主要内容有Spark基础功能介绍及内部重要模块分析，包括部署模式、调度框架、存储管理以及应用监控；同时也详细介绍了Spark生态圈中其他的软件和模块，包括SQL处理引擎Shark和Spark SQL、流式处理引擎Spark Streaming、图计算框架Graphx以及分布式内存文件系统Tachyon。《Spark大数据处理技术》从概念和原理上对Spark核心框架和生态圈做了详细的解读，并对Spark的应用现状和未来发展做了一定的介绍，旨在为大数据从业人员和Spark爱好者提供一个更深入学习的平台。, 《Spark大数据处理技术》适合任何大数据、Spark领域的从业人员阅读，同时也为架构师、软件开发工程师和大数据爱好者展现了一个现代大数据框架的架构原理和实现细节。相信通过学习《Spark大数据处理技术》，读者能够熟悉和掌握Spark这一当前流行的大数据框架，并将其投入到生产实践中去。
上传时间：2017-11 大小：39.16MB
5.77MBSpark大数据处理技术.pdf
2018-02-22Spark大数据处理技术PDF 高清带目录完整版 夏俊鸾黄洁程浩等人著作 学习大数据值的经典入门图书
46.9MBSpark大数据处理技术、应用与性能优化高清完整版PDF
2017-12-22Spark大数据处理：技术、应用与性能优化高清完整版PDF
- 38.93MB
Spark大数据处理技术PDF 高清带目录完整版 夏俊鸾黄洁程浩等
2017-11-19Spark大数据处理技术PDF 高清带目录完整版 夏俊鸾黄洁程浩等人著作 学习大数据值得拥有
- 5.84MB
Spark大数据处理 技术 应用与性能优化 完整版 pdf
2019-01-14Spark大数据处理 技术、应用与性能优化，书是转换来的pdf 格式稍显凌乱
127BSpark大数据处理技术
2019-07-23资源名称：Spark大数据处理技术内容简介：《Spark大数据处理技术》以Spark 0.9版本为基础进行编写，是一本全面介绍Spark及Spark生态圈相关技术的书籍，是国内首本深入介绍Spark原理和架构的技术书籍。主要内容有...
5.92MBspark 大数据处理技术
2017-11-16spark 大数据处理技术spark 大数据处理技术spark 大数据处理技术spark 大数据处理技术
- 49.27MB
Spark 大数据处理技术
2017-11-04Spark 大数据处理技术 Spark 大数据处理技术 Spark 大数据处理技术
- 3.87MB
Spark大数据处理 技术、应用与性能优化_PDF电子书下载 带书签目录 高清完整版 simple.pdf
2018-02-14Spark大数据处理 技术、应用与性能优化_PDF电子书下载 带书签目录 高清完整版 simple.pdf
- 51.14MB
spark大数据处理技术应用与优化
2018-10-17spark大数据处理技术应用与优化
1.20MB大数据技术实践——Spark词频统计
2021-08-23本次作业要完成在Hadoop平台搭建完成的基础上，利用Spark组件完成文本词频统计的任务，目标是学习Scala语言，理解Spark编程思想，基于Spark 思想，使用IDEA编写SparkWordCount程序，并能够在spark-shell中执行代码和分析执行过程。
37.57MBSpark大数据处理技术 带标签 完整版
2017-11-12Spark大数据处理技术 这本书讲解的很全面， 很适合学习，但大部分网上下载的都是零碎不完整的，这本是经过优化整理，压缩后的完整的版本。
- 45.41MB
Spark大数据处理技术 应用与性能优化 高清带目录 .pdf
2017-12-24Spark大数据处理 技术 应用与性能优化 .pdf 高清带目录
- 3.86MB
《Spark大数据处理 技术、应用与性能优化》PDF
2018-09-01《Spark大数据处理 技术、应用与性能优化》
155KBspark大数据处理技术、 应用与性能优化
2018-10-10spark大数据处理技术、 应用与性能优化 spark工作机制 spark调度与任务分配模块
- 7.21MB
Spark大数据处理技术应用与性能优化大数据技术丛书-高清文字版
2019-06-30Spark大数据处理技术应用与性能优化大数据技术丛书-高清文字版
- 174.64MB
spark大作业.zip
2021-11-132、了解大数据处理的基本流程； 3、熟悉数据预处理方法； 4、熟悉在不同类型数据库之间进行数据相互导入导出； 5、熟悉使用R语言进行可视化分析； 6、熟悉使用Eclipse或IntelliJ Idea编写Java程序操作HBase数据库 ...
- 19.13MB
高分毕业设计 基于Hadoop+Kafka+Spark大数据平台的新闻日志分析处理及可视化系统源码+部署文档+全部数据资料.
2024-04-23【资源说明】 高分毕业设计 基于Hadoop+Kafka+Spark大数据平台的新闻日志分析处理及可视化系统源码+部署文档+全部数据资料. 【备注】 1、该项目是高分毕业设计项目源码，已获导师指导认可通过，答辩评审分达到95分 2、该资源内项目代码都经过mac/window10/11/linux测试运行成功，功能ok的情况下才上传的，请放心下载使用！ 3、本项目适合计算机相关专业(如软件工程、计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载使用，也可作为毕业设计、课程设计、作业、项目初期立项演示等，当然也适合小白学习进阶。 4、如果基础还行，可以在此代码基础上进行修改，以实现其他功能，也可直接用于毕设、课设、作业等。 欢迎下载，沟通交流，互相学习，共同进步！
- 2.4MB
Scala-升级版.docx
2021-10-14Scala快速入门（适合为学Spark学习Scala的同学）Word文档
2.90MB基于spark的图书推荐系统
2023-06-15推荐系统是一种信息过滤系统，能够自动预测用户对特定产品或服务的偏好，并向其提供个性化的推荐。它通常基于用户的历史行为、个人喜好、兴趣和偏好等，通过数据挖掘和机器学习算法，在大数据的支持下生成个性化的推荐内容，从而提高用户购买率和满意度。推荐系统广泛应用于电子商务、社交媒体、新闻资讯、音乐、电影等领域。推荐系统的作用是根据用户的历史行为和偏好，为用户推荐个性化的内容，以满足用户的需求和兴趣。 在推荐系统架构中，离线计算部分主要使用 Hadoop、Spark、Hive 等大数据处理技术，将海量历史数据进行离线处理，构建出推荐模型。在线计算部分则使用 Flask、Django 或 Tornado 等 Web 应用框架，将推荐模型部署到 Web 服务器上，实现实时推荐服务。
- 743KB
大数据期末课设~基于spark的气象数据处理与分析
2022-12-14大数据期末课设~基于spark的气象数据处理与分析 完整版Word 可以拿来直接交作业
- 550KB
全国职业技能大赛大数据赛项十套赛题（shtd）
2023-01-16使用Scala编写spark工程代码，将MySQL的shtd_store库中表user_info、sku_info、base_province、base_region、order_info、order_detail的数据增量抽取到Hive的ods库中对应表user_info、sku_info、base_province、base_region、order_info、order_detail中。 1、 抽取shtd_store库中user_info的增量数据进入Hive的ods库中表user_info。根据ods.user_info表中operate_time或create_time作为增量字段(即MySQL中每条数据取这两个时间中较大的那个时间作为增量字段去和ods里的这两个字段中较大的时间进行比较)，只将新增的数据抽入，字段名称、类型不变，同时添加静态分区，分区字段类型为String，且值为当前比赛日的前一天日期（分区字段格式为yyyyMMdd）。使用hive cli执行show partitions ods.user_info命令，将结果截图粘贴至对应报告中；
- 69B
大数据全套教程完整版
2019-01-09大数据基础到精通完整版， 涵盖技术点：python 基础 java基础，mysql,oracle,ssm框架，linux,hadoop,hbase,zookeeper,flume,scala,spark。资源宝贵，速度下载
- 26.74MB
全国2014-2018年空气质量csv数据集文件数据
2019-06-23全国2014-2018年空气质量csv数据集文件数据，包含字段time（时间），city（城市），AQI，PM2.5，PM10，SO2，NO2，CO，O3，primary_pollutant（主要污染物），共计55万条数据。
- 0B
spark-3.3.1-bin-3.0.0-cdh6.3.2.tgz
2022-11-23spark 3.3.1 使用 cdh 6.3.2 的hadoop版本。可以直接兼容并配合文档进行cdh spark-sql的使用。 具体查看https://editor.csdn.net/md/?articleId=127997188
- 1.1MB
Spark气象监测数据分析：代码整合，包括预处理，分析，数据可视化
2023-09-17【内容概要】 通过完整的气象监测数据处理与分析项目,了解Spark大数据分析的整体流程。代码涵盖数据工程、统计分析、机器学习预测建模等内容。可以学习如何使用Spark PySpark API处理大规模数据。 【适合人群】 具备一定Python编程基础,需要处理分析大规模数据的研发人员。 【能学到什么】 1. Spark数据处理:缺失值处理、降噪、特征工程等数据预处理技术 2. 统计分析:分组聚合、相关性分析、异常检测等统计方法 3. 机器学习:时间序列预测模型设计、集成学习提升效果 4. 微服务:模型API和Docker部署,提供后端服务 【学习建议】 项目代码完整覆盖了大数据分析全流程。在学习过程中,需要结合代码注释和文档,了解设计思路和背后的原理。同时调试并运行示例代码,加深理解。欢迎提出改进意见。
- 9.26MB
基于hadoop和echarts的教育大数据可视化系统
2023-05-04在线教育平台现在是教育体系的重要组成部分，在当前大数据时代的背景下，促进教育机构建立统一平台、统一资源管理的数字化教学系统。如何评估系统平台的健康程度、学生的学习体验和在线课程的质量对于课程的教师和学校的管理人员都是非常重要的，这是进行数据分析的主要目的。可视化是一个重要的途径，它能够帮助大数据获得完整的数据图表并挖掘数据的价值，大数据分析离不开可视化这一工具的推动。 基于hadoop和echarts的教育大数据可视化系统，以B/S模式开发。通过Hadoop中Sqoop进行数据导入转换。以MapReduce构建数据分析，数据分析维度包括每日登录人数分析、平均学习时长分析、学习行为次数分析、每日活跃情况分析和分时段学习人数分析。最终使用ECharts可视化工具来对在线教育平台在学习过程中产生的数据进行可视化大屏展现,让更多人感受到可视化大数据的魅力。
- 1.71MB
python爬虫爬取股票评论，调用百度AI进行语义分析， matlab数据处理，股票涨跌和评论的关系
2019-03-22python爬虫爬取股票评论， 调用百度AI进行语义分析， matlab数据处理， excel作图 股票涨跌和评论的关系
