没有合适的资源?快使用搜索试试~
我知道了~
文库首页
大数据
spark
Spark性能优化指南.pdf
Spark性能优化指南.pdf
Spark
性能调优
shuffle
Spark性能调优
需积分: 9
7 下载量
44 浏览量
2021-04-07
08:20:07
上传
评论
收藏
6.82MB
PDF
举报
温馨提示
立即下载
Spark性能优化指南.pdf
资源推荐
资源评论
spark性能优化手册
浏览:163
spark优化,spark优化,spark优化,spark优化,spark优化
Spark性能优化指南——基础篇
浏览:85
在大数据计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作,应用范围与前景非常广泛。在美团?大众点评,已经有很多同学在各种项目中尝试使用Spark。大多数同学(包括笔者在内),最初开始尝试使用Spark的原因很简单,主要就是为了让大数据计算作业的执行速度更快、性能
Spark性能优化基础篇
浏览:197
美团Spark性能优化基础篇,详细讲解Spark性能优化技术
Spark性能优化:开发调优篇
浏览:181
Spark性能优化的第一步,就是要在开发Spark作业的过程中注意和应用一些性能优化的基本原则。开发调优,就是要让大家了解以下一些Spark基本开发原则,包括:RDD lineage设计、算子的合理使用、特殊操作的优化等。在开发过程中,时时刻刻都应该注意以上原则,并将这些原则根据具体的业务以及实际的应用场景,灵活地运用到自己的Spark作业中。通常来说,我们在开发一个Spark作业时,首先是基于某
Spark性能优化:数据倾斜调优
浏览:161
继《Spark性能优化:开发调优篇》和《Spark性能优化:资源调优篇》讲解了每个Spark开发人员都必须熟知的开发调优与资源调优之后,本文作为《Spark性能优化指南》的高级篇,将深入分析数据倾斜调优与shuffle调优,以解决更加棘手的性能问题。有的时候,我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜,此时Spark作业的性能会比期望差很多。数据倾斜调优,就是使用各种技术方案解决不同类
Spark性能优化指南——基础篇 -.pdf
浏览:131
Spark性能优化指南——基础篇 -.pdf Spark性能优化指南——基础篇 -.pdf Spark性能优化指南——基础篇 -.pdf
ApacheSpark设计与实现.pdf+ApacheSpark源码剖析.pdf+Spark原著中文版.pdf
浏览:98
4星 · 用户满意度95%
ApacheSpark设计与实现.pdf+ApacheSpark源码剖析.pdf+Spark原著中文版.pdf
7.SparkStreaming(上)--SparkStreaming原理介绍.pdf
浏览:182
1.Spark及其生态圈简介.pdf 2.Spark编译与部署(上)--基础环境搭建.pdf 2.Spark编译与部署(下)--Spark编译安装.pdf 2.Spark编译与部署(中)--Hadoop编译安装.pdf 3.Spark编程模型(上)--概念及SparkShell实战....
Spark性能优化指南——高级篇
浏览:98
Spark性能优化指南——高级篇 Spark性能优化指南——高级篇
9.SparkGraphX介绍及实例.pdf
浏览:12
1.Spark及其生态圈简介.pdf 2.Spark编译与部署(上)--基础环境搭建.pdf 2.Spark编译与部署(下)--Spark编译安装.pdf 2.Spark编译与部署(中)--Hadoop编译安装.pdf 3.Spark编程模型(上)--概念及SparkShell实战....
Spark性能优化研究.pptx
浏览:56
spark
8.SparkMLlib(下)--SparkMLlib实战.pdf
浏览:53
1.Spark及其生态圈简介.pdf 2.Spark编译与部署(上)--基础环境搭建.pdf 2.Spark编译与部署(下)--Spark编译安装.pdf 2.Spark编译与部署(中)--Hadoop编译安装.pdf 3.Spark编程模型(上)--概念及SparkShell实战....
2.Spark编译与部署(下)--Spark编译安装.pdf
浏览:35
1.Spark及其生态圈简介.pdf 2.Spark编译与部署(上)--基础环境搭建.pdf 2.Spark编译与部署(下)--Spark编译安装.pdf 2.Spark编译与部署(中)--Hadoop编译安装.pdf 3.Spark编程模型(上)--概念及SparkShell实战....
6.SparkSQL(下)--Spark实战应用.pdf
浏览:47
1.Spark及其生态圈简介.pdf 2.Spark编译与部署(上)--基础环境搭建.pdf 2.Spark编译与部署(下)--Spark编译安装.pdf 2.Spark编译与部署(中)--Hadoop编译安装.pdf 3.Spark编程模型(上)--概念及SparkShell实战....
高性能并发业务Spark(1).pdf
浏览:67
高性能并发业务Spark(1).pdf
基于Spark SQL结构化数据文件的推荐系统性能优化研究.pdf
浏览:96
基于Spark SQL结构化数据文件的推荐系统性能优化研究.pdf
Learning Spark.pdf
浏览:114
Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning Spark.pdf Learning .
Spark 编程指南简体中文版.pdf
浏览:2
Spark 编程指南简体中文版
Scala-升级版.docx
浏览:126
Scala快速入门(适合为学Spark学习Scala的同学)Word文档
基于spark的图书推荐系统
浏览:24
5星 · 资源好评率100%
推荐系统是一种信息过滤系统,能够自动预测用户对特定产品或服务的偏好,并向其提供个性化的推荐。它通常基于用户的历史行为、个人喜好、兴趣和偏好等,通过数据挖掘和机器学习算法,在大数据的支持下生成个性化的推荐内容,从而提高用户购买率和满意度。推荐系统广泛应用于电子商务、社交媒体、新闻资讯、音乐、电影等领域。推荐系统的作用是根据用户的历史行为和偏好,为用户推荐个性化的内容,以满足用户的需求和兴趣。 在推荐
大数据期末课设~基于spark的气象数据处理与分析
浏览:31
5星 · 资源好评率100%
大数据期末课设~基于spark的气象数据处理与分析 完整版Word 可以拿来直接交作业
全国职业技能大赛大数据赛项十套赛题(shtd)
浏览:86
使用Scala编写spark工程代码,将MySQL的shtd_store库中表user_info、sku_info、base_province、base_region、order_info、order_detail的数据增量抽取到Hive的ods库中对应表user_info、sku_info、base_province、base_region、order_info、order_detail中。
大数据全套教程完整版
浏览:79
4星 · 用户满意度95%
大数据基础到精通完整版, 涵盖技术点:python 基础 java基础,mysql,oracle,ssm框架,linux,hadoop,hbase,zookeeper,flume,scala,spark。资源宝贵,速度下载
全国2014-2018年空气质量csv数据集文件数据
浏览:121
4星 · 用户满意度95%
全国2014-2018年空气质量csv数据集文件数据,包含字段time(时间),city(城市),AQI,PM2.5,PM10,SO2,NO2,CO,O3,primary_pollutant(主要污染物),共计55万条数据。
spark-3.3.1-bin-3.0.0-cdh6.3.2.tgz
浏览:200
5星 · 资源好评率100%
spark 3.3.1 使用 cdh 6.3.2 的hadoop版本。可以直接兼容并配合文档进行cdh spark-sql的使用。 具体查看https://editor.csdn.net/md/?articleId=127997188
高分毕业设计 基于Hadoop+Kafka+Spark大数据平台的新闻日志分析处理及可视化系统源码+部署文档+全部数据资料.
浏览:31
【资源说明】 高分毕业设计 基于Hadoop+Kafka+Spark大数据平台的新闻日志分析处理及可视化系统源码+部署文档+全部数据资料. 【备注】 1、该项目是高分毕业设计项目源码,已获导师指导认可通过,答辩评审分达到95分 2、该资源内项目代码都经过mac/window10/11/linux测试运行成功,功能ok的情况下才上传的,请放心下载使用! 3、本项目适合计算机相关专业(如软件工程、计科
Spark气象监测数据分析:代码整合,包括预处理,分析,数据可视化
浏览:148
【内容概要】 通过完整的气象监测数据处理与分析项目,了解Spark大数据分析的整体流程。代码涵盖数据工程、统计分析、机器学习预测建模等内容。可以学习如何使用Spark PySpark API处理大规模数据。 【适合人群】 具备一定Python编程基础,需要处理分析大规模数据的研发人员。 【能学到什么】 1. Spark数据处理:缺失值处理、降噪、特征工程等数据预处理技术 2. 统计分析:分组聚合、
基于hadoop和echarts的教育大数据可视化系统
浏览:84
在线教育平台现在是教育体系的重要组成部分,在当前大数据时代的背景下,促进教育机构建立统一平台、统一资源管理的数字化教学系统。如何评估系统平台的健康程度、学生的学习体验和在线课程的质量对于课程的教师和学校的管理人员都是非常重要的,这是进行数据分析的主要目的。可视化是一个重要的途径,它能够帮助大数据获得完整的数据图表并挖掘数据的价值,大数据分析离不开可视化这一工具的推动。 基于hadoop和echar
评论
收藏
内容反馈
立即下载
资源评论
资源反馈
评论星级较低,若资源使用遇到问题可联系上传者,3个工作日内问题未解决可申请退款~
联系上传者
评论
Kungs8
粉丝: 6056
资源:
12
私信
上传资源 快速赚钱
我的内容管理
展开
我的资源
快来上传第一个资源
我的收益
登录查看自己的收益
我的积分
登录查看自己的积分
我的C币
登录后查看C币余额
我的收藏
我的下载
下载帮助
前往需求广场,查看用户热搜
最新资源
Git进阶技巧:提升团队协作效率个人学习笔记.md
Unity常用快捷键及中英文互译
基于树莓派的多功能寝室监控系统python源码+项目说明.zip
Git入门指南:轻松掌握版本控制个人学习笔记.md
Android4.4真机移植过程笔记
HM2305-VB一款P-Channel沟道SOT23的MOSFET晶体管参数介绍与应用说明
个人整理,C4D软件快捷键大全
基于SSM的“航空机票预订系统”的设计与实现.zip
MYSQL5.7数据库安装包
HM2305B-VB一款P-Channel沟道SOT23的MOSFET晶体管参数介绍与应用说明
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功