当前位置: 首页 > 图灵资讯 > 技术篇> kafka 监控系列kafka manager

kafka 监控系列kafka manager

来源:图灵教育
时间:2023-06-12 09:22:40

Kafka在雅虎内部被许多团队使用,媒体团队使用它进行实时分析,可以处理高达20Gbps(压缩数据)的峰值带宽。  为了简化开发者和服务工程师维护Kafka集群的工作,建立了基于Web工具的Kafka管理器,称为 Kafka Manager。这种管理工具可以很容易地发现分布在集群中的topic分布不均匀,或者分区在整个集群中分布不均匀。它支持管理多个集群,选择副本,重新分配副本,创建Topic。同时,这种管理工具也是一种很好的工具,可以快速浏览集群。  该软件是用Scala语言编写的。目前(2015年2月3日)雅虎已经开源于Kafka Manager工具。Kafka集群管理工具主要支持以下功能:  1、管理几个不同的集群;  2、很容易检查集群的状态(topics, brokers, 副本的分布, 分区分布);  3、选择副本;  4、产生分区分配(Generate partition assignments)基于集群的当前状态;  5、分区重新分配。  以下是集群管理工具的截图:

如果你想及时了解Spark、与Hadop或Hbase相关的文章,欢迎关注微信公众账号: iteblog_hadoop

如果你想及时了解Spark、与Hadop或Hbase相关的文章,欢迎关注微信公众账号: iteblog_hadoop