首页 > 其他 > 详细

kafka 调参笔记

时间:2019-08-27 13:42:56      阅读:90      评论:0      收藏:0      [点我收藏+]

 

config/server.properties

 

 

log.dirs

解释:kafka 日志文件保存目录

默认值:安装目录下或/tmp下

设置值:/mnt/data1/kafka/logs 

 

 

num.partitions

解释:topic 默认分区数

默认值:1

设置值:1 (创建 topic 时再定制指定)

 

 

replica.lag.time.max.ms=30000

解释:ISR 认定不同步超时时间

默认值:10000 ms

设置值:30000 ms

 

producer.properties

consumer.properties

topic/partitions 数量

对 topic T,设 producer 吞吐 = a mb/s,consuemer 吞吐 = b mb/s,追求吞吐 = t mb/s:

追求partition数量 = max (t/a, t/b)

设集群 broker 数量 = n, 复制因子 = r

partition数量 <= 100 * n * r

单个partition的leader数 <= 100

 

 

kafka 调参笔记

原文:https://www.cnblogs.com/PigeonNoir/p/11417717.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!