Kafka Manager部署和使用_大脑补丁的博客-CSDN博客_kafka manager
Kafka Manager部署和使用
大脑补丁
于 2018-07-24 20:24:14 发布
15981
收藏
15
分类专栏：
Kafka
文章标签：
Kafka
kafka  manager
部署
kafka监控
kafka manager使用
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/x541211190/article/details/81191608
版权
Kafka
专栏收录该内容
5 篇文章
1 订阅
订阅专栏
一.前言：
新版kafka监控平台的哪家强?对比kafka Manager和kafka Monitor 之后，最终还是选择了Kafka Manager。
因为kafka Manager支持对Kafka的主题的增删改查操作，和消费者对数据的消费情况。而kafka Monitor对kafka新版(1.0版后),支持不太好，比如在Kafka1.1版中，用代码创建的Topic，地址没有直接绑定zookeeper，而是通过的bootstrap.server指定的Broker地址，间接绑定到zookeeper，在Kafka Monitor中却查看不到这些Topic，果断放弃了使用kafka Monitor。
最新版的kafka manager(cmak)请移步《新版kafka Manager(CMAK)安装部署教程》
二.Kafka Manager在Centos上部署
1.下载
①选择版本
截止到2018年8月，最新版为1.3.3.18。获取下载地址：
在centos中的usr/local下：
weget https://github.com/yahoo/kafka-manager/archive/1.3.3.18.tar.gz
②下载完后解压：
tar -zxfv 1.3.3.18.tar.gz
2.编译
①修改镜像，提高下载速度：
cd ~
mkdir .sbt
vim repositories
按i,并将下面的镜像地址拷贝进去
[repositories]
local
aliyun: http://maven.aliyun.com/nexus/content/groups/public
typesafe: http://repo.typesafe.com/typesafe/ivy-releases/, [organization]/[module]/(scala_[scalaVersion]/)(sbt_[sbtVersion]/)[revision]/[type]s/[artifact](-[classifier]).[ext], bootOnly
然后按Esc,输入:wq repositories
②编译
对下载下来的代码进行编译，需借助Play框架。
进入刚才解压后的目录kafka-manager-1.3.3.18,然后执行命令：
./sbt clean dist
注：若出现sbt的错误，可能是没有安装sbt,需要安装一下：
yum install sbt
然后重新执行
./sbt clean dist
在编译的过程中，日志中有warn可以，但不要有error。有错误则检查解决。
3.运行
将编译好的Kafka Manager，运行起来。
①解压
创建目录：
在taget目录中运行会出现jar包混淆的错误，所以尽量拷贝到/user/local/下，这样不受影响。
cd /user/local/
mkdir kafkaManager
进入编译目录/usr/local/kafka-manager-1.3.3.18/target/universal，将kafka-manager-1.3.3.18.zip 拷贝到刚创建的文件夹中： /user/local/kafkaManager：
cd /user/local/kafkaManager
mv /usr/local/kafka-manager-1.3.3.18/target/universal/kafka-manager-1.3.3.18.zip /user/local/kafkaManager
然后解压.zip文件：
unzip kafka-manager-1.3.3.18.zip
若提示没有unzip命令，安装一下：yum install unzip
②配置zookeeper地址
cd ./kafka-manager-1.3.3.18/conf
vim application.conf
将kafka-manager.zkhosts="localhost:2181"此行中的localhost,改为你的Zookeeper服务器的IP地址，保存退出即可。
③启动
进入bin 文件夹，然后运行
cd /usr/local/kafkaManager/kafka-manager-1.3.3.18/bin
nohup ./kafka-manager &
解释：这样运行会让kafkaManager在后台运行了，如果想查看运行日志,看看有没有报错，可以执行：
cd /usr/local
tail -100 nohup.out
三.使用
1.启动
成功运行后，通过访问kafka Manager所在服务器的IP:9000端口,即可使用了。
如：10.10.10.10:9000
一定是kafka Manager所在服务器IP地址，不是上面配置文件中的ZK的IP地址。端口默认是9000。
如果想修改运行端口，先杀死上面的进程或者删除/usr/local/kafkaManager/kafka-manager-1.3.3.18/RUNNING_PID文件后，执行：
./kafka-manager -Dconfig.file=/path/to/application.conf -Dhttp.port=9001
2.配置cluster
创建一个cluster：
将Cluster Zookeeper Hosts地址配置为Zookeeper地址，和配置文件中的地址保持一致，全部打钩，保存。
查看topic详情和消费信息:
本文相关的Kafka 系列教程：
教程内容《Centors下搭建Zookeeper v3.6.3集群（支持kafka集群）教程》Zookeeper集群配置《Centors下搭建Kafka集群教程（v2.7.1）》kafka 集群配置《新版kafka Manager(CMAK)安装部署教程》最新版kafka manager的下载和安装
大脑补丁
关注
关注
点赞
15
收藏
打赏
评论
Kafka Manager部署和使用
一.前言： 新版kafka监控平台的哪家强?对比kafka Manager和kafka Monitor 之后，最终还是选择了Kafka Manager。因为kafka Manager支持对Kafka的主题的增删改查操作，和消费者对数据的消费情况。而kafka Monitor对kafka新版(1.0版后),支持不太好，比如在Kafka1.1版中，用代码创建的Topic，地址没有直接绑定...
复制链接
扫一扫
专栏目录
kafka-manager-2.0.0.2.zip
07-11
kafka-manager-2.0.0.2.zip
kafkaManager用于监控kafka消息队列的broker、分区、数据等信息
Kafka Manager的简介以及安装使用
hailunw的专栏
07-03
618
简介
Kafka Manager 是 Yahoo 推出的 Kafka 管理工具，支持：
管理多个集群
轻松检查集群状态 (topics, brokers, replica distribution, partition distribution)
执行复制选举
生成分区指派，基于集群的状态
分区的重新指派
该项目基于 Play Framework 框架开发。
安装配置以及使用
...
参与评论
您还未登录，请先
登录
后发表或查看评论
卡夫卡经理插件「Kafka Manager Plugin」-crx插件
03-10
这个扩展将计入卡夫卡经理的消费者
该扩展将在kafka管理器中计算消费者。
支持语言:English
『Kafka』在Docker中快速部署Kafka及其管理平台搭建
最新发布
老陈聊架构
10-24
130
📣读完这篇文章里你能收获到，在Docker中快速部署Kafka，在Docker中快速部署Zookeeper，搭建Kafka管理平台，Kafka部署测试
Kafka Manager的使用
Widsom的博客
07-08
8402
Kafka Manager的使用
1.安装
Kafka Manager是雅虎开发的一个基于Web的kafka管理工具。具有非常强大的功能。
kafka manager项目地址：https://github.com/yahoo/kafka-manager
下载编译kafka manager
# 从git上下载Kafka manager源码
git clone https://githu...
kafka manager的使用，kafka manager页面参数说明
热门推荐
每个人都是一道菜。。。
02-25
2万+
kafka-manager是kafka集群管理工具，由雅虎开源，用户可以在Web界面执行一些简单的集群管理操作。具体支持以下内容(从githup上kafka-manager项目的readme得到功能列表)：
- Manage multiple clusters
- Easy inspection of cluster state (topics, consumers, offsets, br...
Kafka可视化管理工具kafka-manager部署安装和使用-已更名为CMAK
沮丧的南瓜
09-05
8946
一、kafka-manager 简介
为了简化开发者和服务工程师维护Kafka集群的工作，yahoo构建了一个叫做Kafka管理器的基于Web工具，叫做 Kafka Manager。
这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀，或者是分区在整个集群分布不均匀的的情况。
它支持管理多个集群、选择副本、副本重新分配以及创建Topic。同时，这个管理工具也是一个非常好的可以快速浏览这个集群的工具，有如下功能：
1.管理多个kafka集群
2.便捷的检查kafka集群状态(topics,br
Kafka集群管理工具kafka-manager的安装使用
baidu_35692846的博客
12-09
1722
一.kafka-manager简介
kafka-manager是目前最受欢迎的kafka集群管理工具，最早由雅虎开源，用户可以在Web界面执行一些简单的集群管理操作。具体支持以下内容：
管理多个集群
轻松检查群集状态（主题，消费者，偏移，代理，副本分发，分区分发）
运行首选副本选举
使用选项生成分区分配以选择要使用的代理
运行分区重新分配（基于生成的分配）
使用可选主题配置创建主题（0.8.1.1具有与0.8.2+不同的配置）
删除主题（仅支持0.8.2+并记住在代理配​​置中设置d..
Kafka 监控工具之 Kafka Manager
SmartSi
05-10
1425
1. 安装Kafka
如果你还没有安装 Kafka 可以参考博文Kafka 安装与启动进行安装。
2. Kafka Manager简介
Kafka Manager 是一个用于管理 Apache Kafka 的工具。其提供了如下功能:
管理多个集群。
轻松检查群集状态（Topic，消费者，偏移量，Broker，副本分发，分区分发）。
运行首选副本选举。
使用选项生成分区分配以选择要使用的 Broker。
分区重新分配。
使用可选 Topic 配置创建主题（0.8.1.1版本与0.8.2+版本配置不同）。
kafka配置Kafka manager
weixin_44063491的博客
06-15
880
kafka配置Kafka manager
麒麟系统下kafka-manager部署以及详细使用方法
lcm_linux的博客
11-25
716
一、kafka-manager 简介
为了简化开发者和服务工程师维护Kafka集群的工作，yahoo构建了一个叫做Kafka管理器的基于Web工具，叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀，或者是分区在整个集群分布不均匀的的情况。它支持管理多个集群、选择副本、副本重新分配以及创建Topic。同时，这个管理工具也是一个非常好的可以快速浏览...
系统运维系列 之Kafka查询不到正在消费的的消费组信息
langxiaolin的博客
11-20
3339
1 问题背景
【怪怪怪】
目前消费者组正常消费，但是通过kafka manager监测不到consumer组的消费信息；前期出现的问题是一台Kafka的服务器down掉，连接不上集群，是不是和这个现象有关系呢？
2 排查思路
【期待解决】
2.1 详细解析 kafka manager 的使用
在添加Clusters时需要注意几个参数问题：
Enable JMX Polling：
是否开启 JMX 轮训，该部分直接影响部分 kafka broker 和 topic 监控指标指标的获取，例如每秒流入的消息数，每
kafka集群管理工具kafka-manager部署安装
coding_1994的博客
05-04
3019
一、kafka-manager 简介
为了简化开发者和服务工程师维护Kafka集群的工作，yahoo构建了一个叫做Kafka管理器的基于Web工具，叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀，或者是分区在整个集群分布不均匀的的情况。它支持管理多个集群、选择副本、副本重新分配以及创建Topic。同时，这个管理工具也是一个非常好的可以快速浏览这个集群的工具，有如下功能：
1.管理多个kafka集群
2.便捷的检查kafka集群状态(t...
Kafka教程(三)Kafka-manager安装
qiaoshan12138的博客
11-10
1676
Kafka-manager安装
想要查看和管理Kafka，完全使用命令并不方便，我们可以使用雅虎开源的Kafka-manager，GitHub地址如下：
Kafka界面管理工具-kafkamanager
小程序员的大梦想
02-24
4349
在上一篇文章《Linux安装Kafka》中，已经介绍了如何在Linux安装Kafka，以及Kafka的启动/关闭和创建发话题并产生消息和消费消息。这篇文章就介绍介绍Kafka管理界面(kafka-manager)的安装和使用
kafka-manager 是雅虎开源的apache-kafka管理工具，是用Scala写，所以在web页面进行操作即可。
♛ 1 下载
下载地址：https://gi...
kafka图形化管理工具kafka-manager
wh柒八九的博客
01-13
636
本文来说下kafka图形化管理工具kafka-manager
文章目录概述
概述
Kafka可视化管理工具-CMAK（kafka-manager）
huofuman960209的博客
05-19
4872
一、简介
为了简化开发者和服务工程师维护Kafka集群的工作，yahoo构建了一个叫做Kafka管理器的基于Web工具，叫做 Kafka Manager（已改名为 cmak）。
这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀，或者是分区在整个集群分布不均匀的的情况。
它支持管理多个集群、选择副本、副本重新分配以及创建Topic。同时，这个管理工具也是一个非常好的可以快速浏览这个集群的工具，有如下功能：
1.管理多个kafka集群
2.便捷的检查kafka集群状态(topics,
kafka安装部署
m0_46192647的博客
03-11
1万+
一、安装kafka
下载kafka两种方式
（1）、手动下载 下载地址：Apache Kafka
（2）、也可以用命令下载（直接下载到服务器哦！）：
将安装包下载到/opt/monitor/kafka文件夹下面
下载命令：
wget http://mirrors.hust.edu.cn/apache/kafka/2.0.0/kafka_2.12-2.0.0.tgz
手动下载移动到/opt/monitor/kafka目录下也可以
二、解压kafka
tar -xzvf kafk
kafka-manager(cmak)安装及使用
dhaibo1986的专栏
11-04
2308
1.软件下载
kafka-manager 工具目前改名为cmak,下载地址为：https://github.com/yahoo/CMAK/releases/tag/3.0.0.5
现在下载最新版本的cmak文件：
cmak-3.0.0.5.zip
将该文件下载并放置到/opt/software目录。
此外，根据官网描述，要求jdk版本为jdk11。
jdk-11.0.13_linux-x64_bin.tar.gz
下载路径https://www.oracle.com/java/technologies/do
Kafka 概述
weixin_55609829的博客
07-21
86
Kafka 概述消息列队（MQ)为什么需要消息队列（MQ）使用消息队列的好处消息队列的两种模式kafka简介Kafka 定义Kafka 简介Kafka 的特性kafka系统架构
消息列队（MQ)
为什么需要消息队列（MQ）
主要原因是由于在高并发环境下，同步请求来不及处理，请求往往会发生阻塞。比如大量的请求并发访问数据库，导致行锁表锁，最后请求线程会堆积过多，从而触发 too many connection 错误，引发雪崩效应。
我们使用消息队列，通过异步处理请求，从而缓解系统的压力。消息队列常应用于异步处
“相关推荐”对你有帮助么？
非常没帮助
没帮助
一般
有帮助
非常有帮助
提交
©️2022 CSDN
皮肤主题：编程工作室
设计师：CSDN官方博客
返回首页
大脑补丁
CSDN认证博客专家
CSDN认证企业博客
码龄10年
暂无认证
139
原创
1870
周排名
2671
总排名
115万+
访问
等级
6767
积分
6323
粉丝
861
获赞
609
评论
2901
收藏
私信
关注
热门文章
Java数组转List的三种方式及对比
292736
RESTful介绍和使用教程
85806
Windows Server2008服务器ping不通问题解决
52091
将SQLServer表直接导入Oracle数据库（图文教程）
51339
Java定时器（实现每月1号、每日、每15分钟自动执行任务）
45930
分类专栏
Java
23篇
多线程编程
17篇
InfluxDB
6篇
Kafka
5篇
开发工具
9篇
设计模式
21篇
Redis
4篇
HBase
7篇
Spring Cloud
2篇
开源技术
1篇
Git
4篇
Android
16篇
Python
11篇
Linux
3篇
React Native
1篇
PHP
1篇
WebService
Mysql
5篇
SqlServer
1篇
服务器
2篇
Oracle
2篇
Scala
1篇
最新评论
Java导入Excel工具类使用教程
weixin_42088747:
比心楼主
Java之Excel导出工具类使用教程
weixin_42088747:
比心楼主
Freemarker导出复杂Excel图文教程
大脑补丁:
能帮上你就好~
Freemarker整合poi导出带有图片的Excel教程
weixin_42088747:
太棒了楼主
Freemarker导出复杂Excel图文教程
weixin_42088747:
楼主太棒了，比心
您愿意向朋友推荐“博客详情页”吗？
强烈不推荐
不推荐
一般般
推荐
强烈推荐
提交
最新文章
Linux系统InfluxDB数据和日志目录迁移教程
Mysql用户权限教程与实用案例
RedisUtils工具类
2022年5篇
2021年8篇
2020年32篇
2019年6篇
2018年37篇
2017年50篇
2016年1篇
目录
目录
分类专栏
Java
23篇
多线程编程
17篇
InfluxDB
6篇
Kafka
5篇
开发工具
9篇
设计模式
21篇
Redis
4篇
HBase
7篇
Spring Cloud
2篇
开源技术
1篇
Git
4篇
Android
16篇
Python
11篇
Linux
3篇
React Native
1篇
PHP
1篇
WebService
Mysql
5篇
SqlServer
1篇
服务器
2篇
Oracle
2篇
Scala
1篇
目录
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
打赏作者
大脑补丁
你的鼓励将是我创作的最大动力
¥2
¥4
¥6
¥10
¥20
输入1-500的整数
余额支付
(余额：-- )
扫码支付
扫码支付：¥2
获取中
扫码支付
您的余额不足，请更换扫码支付或充值
打赏作者
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额
抵扣说明：
1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。 2.余额无法直接购买下载，可以购买VIP、C币套餐、付费专栏及课程。
余额充值