失眠网 > 大数据Kafka（六）：❤️安装Kafka-Eagle❤️

大数据Kafka（六）：❤️安装Kafka-Eagle❤️

时间：2020-02-14 15:04:01

全网最详细的大数据Kafka文章系列，强烈建议收藏加关注！
新文章都已经列出历史文章目录，帮助大家回顾前面的知识重点。

系列历史文章

安装Kafka-Eagle

一、Kafka-eagle基本介绍

二、开启Kafka JMX端口

JMX接口

开启Kafka JMX

三、安装Kafka-Eagle

1、安装JDK，并配置好JAVA_HOME

2、将kafka_eagle上传，并解压到 /export/server目录中

3、配置 kafka_eagle 环境变量

4、配置 kafka_eagle。使用vi打开conf目录下的system-config.properties

5、配置JAVA_HOME

6、修改Kafka eagle可执行权限

7、启动 kafka_eagle

8、访问Kafka eagle

系列历史文章

大数据Kafka（十二）：❤️Kafka配额限速机制❤️

大数据Kafka（十一）：❤️Kafka的消费者负载均衡机制和数据积压问题❤️

大数据Kafka（十）：kafka生产者数据分发策略

大数据Kafka（九）：kafka消息存储及查询机制原理

大数据Kafka（八）：Kafka如何保证数据不丢失

大数据Kafka（七）：Kafka的分片和副本机制

大数据Kafka（六）：❤️安装Kafka-Eagle❤️

大数据Kafka（五）：❤️Kafka的java API编写❤️

大数据Kafka（四）：❤️kafka的shell命令使用❤️

大数据Kafka（三）：❤️Kafka的集群搭建以及shell启动命令脚本编写❤️

大数据Kafka（二）：❤️Kafka特点总结和架构❤️

大数据Kafka（一）：❤️消息队列和Kafka的基本介绍❤️

安装Kafka-Eagle

一、Kafka-eagle基本介绍

在开发工作中，当业务前提不复杂时，可以使用Kafka命令来进行一些集群的管理工作。但如果业务变得复杂，例如：我们需要增加group、topic分区，此时，我们再使用命令行就感觉很不方便，此时，如果使用一个可视化的工具帮助我们完成日常的管理工作，将会大大提高对于Kafka集群管理的效率，而且我们使用工具来监控消费者在Kafka中消费情况。早期，要监控Kafka集群我们可以使用Kafka Monitor以及Kafka Manager，但随着我们对监控的功能要求、性能要求的提高，这些工具已经无法满足。 Kafka Eagle是一款结合了目前大数据Kafka监控工具的特点，重新研发的一块开源免费的Kafka集群优秀的监控工具。它可以非常方便的监控生产环境中的offset、lag变化、partition分布、owner等。

二、开启Kafka JMX端口

JMX接口

JMX(Java Management Extensions)是一个为应用程序植入管理功能的框架。JMX是一套标准的代理和服务，实际上，用户可以在任何Java应用程序中使用这些代理和服务实现管理。很多的一些软件都提供了JMX接口，来实现一些管理、监控功能。

开启Kafka JMX

在启动Kafka的脚本前，添加：

cd ${KAFKA_HOME}export JMX_PORT=9988nohup bin/kafka-server-start.sh config/server.properties &

三、安装Kafka-Eagle

1、安装JDK，并配置好JAVA_HOME

2、将kafka_eagle上传，并解压到 /export/server目录中

cd /export/software/tar -xvzf kafka-eagle-bin-1.4.6.tar.gz -C ../server/cd /export/server/kafka-eagle-bin-1.4.6/ tar -xvzf kafka-eagle-web-1.4.6-bin.tar.gzcd /export/server/kafka-eagle-bin-1.4.6/kafka-eagle-web-1.4.6

3、配置 kafka_eagle 环境变量

vim /etc/profile

export KE_HOME=/export/server/kafka-eagle-bin-1.4.6/kafka-eagle-web-1.4.6export PATH=$PATH:$KE_HOME/bin

source /etc/profile

4、配置 kafka_eagle。使用vi打开conf目录下的system-config.properties

vim conf/system-config.properties

# 修改第4行，配置kafka集群别名kafka.eagle.zk.cluster.alias=cluster1# 修改第5行，配置ZK集群地址cluster1.zk.list=node1:2181,node2:2181,node3:2181# 注释第6行#cluster2.zk.list=xdn10:2181,xdn11:2181,xdn12:2181# 修改第32行，打开图标统计kafka.eagle.metrics.charts=truekafka.eagle.metrics.retain=30# 注释第69行，取消sqlite数据库连接配置#kafka.eagle.driver=org.sqlite.JDBC#kafka.eagle.url=jdbc:sqlite:/hadoop/kafka-eagle/db/ke.db#kafka.eagle.username=root#kafka.eagle.password=www.kafka-# 修改第77行，开启myskafka.eagle.driver=com.mysql.jdbc.Driverkafka.eagle.url=jdbc:mysql://node1:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNullkafka.eagle.username=rootkafka.eagle.password=123456