没有合适的资源?快使用搜索试试~ 我知道了~
kafka-consumer-channel:允许将Flume用作高速通用Kafka消费者
共5个文件
java:1个
license:1个
md:1个
需积分: 14 2 下载量 74 浏览量
2021-05-15
07:56:14
上传
评论
收藏 12KB ZIP 举报
温馨提示
Flume的“ Kafka消费者”渠道 这是Flume的非常高吞吐量的通道,可将Flume用作高速可靠的Kafka用户。 它走多快? 当通过10GigE连接从1个经纪人Kafka群集消耗1000个字节的事件时,它的时钟速率约为360 MB / s,并附有单个Null Sink(最快的接收器)。 使用较慢的接收器,它将以接收器可以运行的最快速度运行。 相反,当Kafka Source配置有Memory通道和Null接收器时,可以提供大约150 MB / s的速度。 但是,要从Flume代理崩溃进行可靠的恢复,将需要文件通道。 对于单个磁盘,文件通道只能提供大约40 MB / s的速度。 为什么可靠? 该频道依赖于Kafka保留消耗事件的能力。 万一接收器的交付尝试失败或Flume进程崩溃,我们仍然可以从Kafka撤回此类“飞行中”事件,并在以后的某个时间点交付它们。 它提供“至少一
资源推荐
资源详情
资源评论
收起资源包目录
kafka-consumer-channel-master.zip (5个子文件)
kafka-consumer-channel-master
.gitignore 8B
README.md 4KB
pom.xml 2KB
LICENSE 11KB
src
main
java
com
github
roshan
KonsumerChannel.java 12KB
共 5 条
- 1
资源评论
KINSLAUGHTER
- 粉丝: 29
- 资源: 4758
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功