kafka 35道面试题和答案.docx
需积分: 0 50 浏览量
2023-06-15
19:12:56
上传
评论
收藏 26KB DOCX 举报
解释下 Kafka 中位移(offset)的作用
标准答案：在 Kafka 中，每个主题分区下的每条消息都被赋予了一个唯一的 ID 数值，用于标识它
在分区中的位置。这个 ID 数值，就被称为位移，或者叫偏移量。一旦消息被写入到分区日志，它
的位移值将不能被修改。
答完这些之后，你还可以把整个面试方向转移到你希望的地方：
1、如果你深谙 Broker 底层日志写入的逻辑，可以强调下消息在日志中的存放格式
2、如果你明白位移值一旦被确定不能修改，可以强调下“Log Cleaner 组件都不能影响位移值”这件
事情
3、如果你对消费者的概念还算熟悉，可以再详细说说位移值和消费者位移值之间的区别
阐述下 Kafka 中的领导者副本(Leader Replica)和追随者副本(Follower Replica)的区别
推荐的答案：Kafka 副本当前分为领导者副本和追随者副本。只有 Leader 副本才能对外提供读写服
务,响应 Clients 端的请求。Follower 副本只是采用拉(PULL)的方式，被动地同步 Leader 副本中的数
据，并且在 Leader 副本所在的 Broker 宕机后，随时准备应聘 Leader 副本。
加分点：
1、强调 Follower 副本也能对外提供读服务。自 Kafka 2.4 版本开始，社区通过引入新的 Broker 端参
数，允许 Follower 副本有限度地提供读服务。
2、强调 Leader 和 Follower 的消息序列在实际场景中不一致。通常情况下，很多因素可能造成
Leader 和 Follower 之间的不同步，比如程序问题，网络问题，broker 问题等，短暂的不同步我们可
以关注(秒级别)，但长时间的不同步可能就需要深入排查了，因为一旦 Leader 所在节点异常，可能
直接影响可用性。
注意：之前确保一致性的主要手段是高水位机制(HW)，但高水位值无法保证 Leader 连续变更场景
下的数据一致性，因此，社区引入了 Leader Epoch 机制，来修复高水位值的弊端。
如何设置 Kafka 能接收的最大消息的大小?
对于 SRE 来讲，该题简直是送分题啊，但是，最大消息的设置通常情况下有生产者端，消费者端
broker 端和 topic 级别的参数，我们需要正确设置，以保证可以正常的生产和消费。
Broker端参数:message. max. bytes,max. message. bytes(topic级别),replica. fetch. max. bytes(否则 follow
会同步失败)
Consumer 端参数:fetch. message. max. bytes
监控 Kafka 的框架都有哪些?
对于 SRE 来讲，依然是送分题。但基础的我们要知道，Kafka 本身是提供了 JMX (Java Management
Extensions)的,我们可以通过它来获取到 Kafka 内部的一些基本数据。
1、Kafka Manager:更多是 Kafka 的管理,对于 SRE 非常友好,也提供了简单的瞬时指标监控。
剩余11页未读，继续阅读
资源评论
