没有合适的资源?快使用搜索试试~ 我知道了~
akka-kafka-processor:Akka 集群与 kafka 流一起工作
共47个文件
scala:24个
conf:14个
xml:4个
需积分: 16 0 下载量 131 浏览量
2021-07-02
02:25:25
上传
评论
收藏 51KB ZIP 举报
温馨提示
自动扩展 (AWS) 集群以处理来自 kafka 集群的主题: 工作项目...... 主要职责: 验证新主题 注册新工人(节点) 向工作人员询问负载、内存使用情况和网络 使用节点信息决定向何处发送新作业 工人主管 保存kafka提供的数据如何分区的配置。 例如,如果消息有一个日期字段,它可以按小时或按目录分区(如 /date/client/product)划分消息 休息 api 以配置主题。 例如:(MaxMessageInFlight,如何分区) 动态更改配置,停止工作程序,并从偏移量开始新配置 应该通知集群是否在大量使用 如果需要,显示启动新实例。 如果可以,应该关闭实例 应该能够为特定主题注册一个工作人员(例如,如果某个主题已经发送到 s3,我们应该能够注册一个节点并请求相同的主题,以便工作人员可以将其保存在 cassandra 上) master 应该能够从崩溃中恢复 在
资源推荐
资源详情
资源评论
收起资源包目录
akka-kafka-processor-master.zip (47个子文件)
akka-kafka-processor-master
.gitignore 650B
project
plugins.sbt 346B
build.properties 18B
Build.scala 3KB
src
multi-jvm
resources
kafka.conf 758B
master.conf 0B
worker.conf 836B
logback.xml 2KB
logback-test.xml 2KB
reference.conf 1KB
application.conf 3KB
scala
sample
multinode
MultiNodeSample.scala 8KB
STMultiNodeSpec.scala 535B
main
resources
kafka.conf 732B
worker.conf 838B
logback.xml 2KB
reference.conf 1KB
application.conf 3KB
scala
com
github
kuhnen
ProcessorApp.scala 1KB
cluster
ClusterListener.scala 1KB
ClusterManager.scala 2KB
ClusterConfig.scala 649B
Init.scala 3KB
MessageReceiver.scala 5KB
master
WorkersCoordinator.scala 5KB
kafka
KafkaTopicWatcherActor.scala 2KB
Master.scala 8KB
worker
executor
AkkaKafkaConsumer.scala 698B
PlainTextTopicActor.scala 330B
kafka
Consumer.scala 2KB
KafkaWorker.scala 3KB
test
resources
kafka.conf 774B
master.conf 0B
worker.conf 836B
logback-bk.xml 2KB
reference.conf 1KB
application.conf 2KB
scala
com
github
kuhnen
acceptance
ClusterSpec.scala 895B
CommonSpecs.scala 2KB
unit
master
MasterSpec.scala 2KB
WorkesCoordinatorSpec.scala 5KB
util
kafka
KafkaUtil.scala 811B
master
kafka
ZKSpec.scala 1KB
worker
WorkerSpec.scala 3KB
sample
multinode
STMultiNodeSpec.scala 535B
README.md 2KB
build.sbt 1KB
共 47 条
- 1
资源评论
狛绝的追随者
- 粉丝: 23
- 资源: 4611
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功