下载 >  开发技术 >  Java > SparkStreaming原理介绍

SparkStreaming原理介绍 评分:

Spark Streaming 是 Spark 核心 API 的一个扩展,可以实现高吞吐量的、具备容错机制的 实时流数据的处理。支持从多种数据源获取数据,包括 Kafk、Flume、Twitter、ZeroMQ、Kinesis 以及 TCP sockets,从数据源获取数据之后,可以使用诸如 map、reduce、join 和 window 等 高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统,数据库和现场仪表盘。 在“One Stack rule them all”的基础上,还可以使用 Spark 的其他子框架,如集群学习、图 计算等,对流数据进行处理。
2018-01-29 上传大小:966KB
想读
分享
收藏 举报
7.SparkStreaming(上)--SparkStreaming原理介绍.pdf

1.Spark及其生态圈简介.pdf 2.Spark编译与部署(上)--基础环境搭建.pdf 2.Spark编译与部署(下)--Spark编译安装.pdf 2.Spark编译与部署(中)--Hadoop编译安装.pdf 3.Spark编程模型(上)--概念及SparkShell实战.pdf 3.Spark编程模型(下)--IDEA搭建及实战.pdf 4.Spark运行架构.pdf 5.Hive(上)--Hive介绍及部署.pdf 5.Hive(下)--Hive实战.pdf 6.SparkSQL(上)--SparkSQL简介.pdf 6.SparkSQL(下)--Spark实战应用.pdf 6.

立即下载
sparkstreaming

本文详细的介绍了sparkstreaming的基本概念,如何使用等问题

立即下载
Spark学习笔记

由基础到深入理解spark技术,分析架构原理及源码分析,sparksql sparkstreaming等等

立即下载
Spark Streaming解析

SparkStreaming学习文档,21000字,详细介绍技术,以及应用,代码编写,分析原理,以及拓展

立即下载
sparkStreaming消费数据不丢失

sparkStreaming消费数据不丢失,sparkStreaming消费数据不丢失

立即下载
Spark最佳实践

Spark最佳实践,无水印,前四章介绍spark,后四章分别介绍SparkSQL、SparkStreaming、SparkGraphX、SparkMLlib

立即下载
spark streaming 大型电商 项目实战

spark streaming 大型电商 项目实战,包括架构,遇到的问题及解决方案

立即下载
SparkStreaming与Stom比较

SparkStreaming与Stom比较

立即下载
SparkStreaming

随着大数据的快速发展,业务场景越来越复杂,离线式的批处理框架 MapReduce 已经不能满足业务,大量的场景需要实时的数据处理结果来进行分析,决策。例如实时的用户推荐,在 618 这样的刺激环境下普通历史数据的推荐已经不能满足场景,就需要采集前分钟,甚至式前几秒的数据进行分析。实时计算适用于这种对历史数据依赖不强,短时间内变化较大的数据。用户行为分析,舆情分析,等等不断随环境和时间实时变化的数据都可能用到实时计算。

立即下载
Flink,Storm,Spark Streaming三种流框架的对比分析

Flink,Storm,Spark Streaming三种流框架的对比分析。比较清晰明确

立即下载
Spark Streaming.docx

Spark集群按照,SparkSql调用,SparkStreaming实时流计算

立即下载
2018-Spark Streaming实时流处理项目

非常适合做实时大数据开发的同学进行项目开发

立即下载
基于 Flume+Kafka+Spark Streaming 实现实时监控输出日志的报警系统的 Spark Streaming 程序代码

基于 Flume+Kafka+Spark Streaming 实现实时监控输出日志的报警系统的 Spark Streaming 程序代码,博客链接: https://blog.csdn.net/linge1995/article/details/81326146

立即下载
Kafka集成Spark Streaming并写入数据到HBase

使用方法: 请使用eclipse的maven导入方式导入,代码在http://blog.csdn.net/q79969786/article/details/42793487有介绍

立即下载
Scala代码积累之spark streaming kafka 数据存入到hive源码实例

Scala代码积累之spark streaming kafka 数据存入到hive源码实例,Scala代码积累之spark streaming kafka 数据存入到hive源码实例。

立即下载
sparkstreaming实时流处理项目实战笔记

sparkstreaming实时流处理项目实战笔记,对某课网实战项目的总结

立即下载
spark与sparkStreaming经典视频教程

spark与sparkStreaming经典视频教程,学习spark和sparkStreaming非常经典得课程,提供代码,环境,本人之前购买得教程,分享给大家,同时欢迎大家和我一起交流

立即下载
spark streaming技术内幕与源码剖析

streaming技术内幕与源码剖析

立即下载
spark core、spark sql以及spark streaming 的Scala、java项目混合框架

包中构建了Java以及Scala混合框架的maven打包框架以及关于spark core,spark sql 、spark streaming的一些典型案例或者算子使用。其来源于哔哩哔哩 spark 90小时的学习视频的案例。其中有部分关于hdfs的文件读写,使用者需搭建hadoop框架。

立即下载
SparkStreaming预研报告

写的非常好,早了好久才找到。SparkStreaming预研报告

立即下载

热点文章

img

spring mvc+mybatis+mysql+maven+bootstrap 整合实现增删查改简单实例.zip

资源所需积分/C币 当前拥有积分 当前拥有C币
5 0 0
点击完成任务获取下载码
输入下载码
为了良好体验,不建议使用迅雷下载
img

SparkStreaming原理介绍

会员到期时间: 剩余下载个数: 剩余C币: 剩余积分:0
为了良好体验,不建议使用迅雷下载
VIP下载
您今日下载次数已达上限(为了良好下载体验及使用,每位用户24小时之内最多可下载20个资源)

积分不足!

资源所需积分/C币 当前拥有积分
您可以选择
开通VIP
4000万
程序员的必选
600万
绿色安全资源
现在开通
立省522元
或者
购买C币兑换积分 C币抽奖
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 4 45
为了良好体验,不建议使用迅雷下载
确认下载
img

资源所需积分/C币 当前拥有积分 当前拥有C币
3 0 0
为了良好体验,不建议使用迅雷下载
VIP和C币套餐优惠
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 4 45
您的积分不足,将扣除 10 C币
为了良好体验,不建议使用迅雷下载
确认下载
下载
您还未下载过该资源
无法举报自己的资源

兑换成功

你当前的下载分为234开始下载资源
你还不是VIP会员
开通VIP会员权限,免积分下载
立即开通

你下载资源过于频繁,请输入验证码

您因违反CSDN下载频道规则而被锁定帐户,如有疑问,请联络:webmaster@csdn.net!

举报

  • 举报人:
  • 被举报人:
  • *类型:
    • *投诉人姓名:
    • *投诉人联系方式:
    • *版权证明:
  • *详细原因: