您的位置: 首页  >  文章  >  kafka集群搭建注意事项

kafka集群搭建注意事项

分类: 文章 • 2024-10-02 18:09:58

配置好zookeeper之后，关闭防火墙

# systemctl stop firewalld.service        //关闭firewall
#systemctl disable firewalls.service          //开机禁用
#firewall-cmd  --state                   //查看防火墙的状态（关闭是not    running）

注：
2888端口号是zookeeper服务之间通信的端口。
3888端口是zookeeper与其他应用程序通信的端口。
2181端口是zookeeper客户端请求接口。
防火墙必须放开这三个端口，zk才能正常启动

启动zk服务

在bin目录下，三台依次启动

# sh zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /home/260206/software/zookeeper/zookeeper-3.4.13/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED

查看状态

# sh zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /home/260206/software/zookeeper/zookeeper-3.4.13/bin/../conf/zoo.cfg
Error contacting service. It is probably not running.

Error contacting service. It is probably not running.

zookeeper无法正常启动

首先，zookeeper无法启动的几种原因：

  1. 防火墙未关闭，但按照上文查看防火墙状态，显示的是not running，已关闭
  2. zookeeper的端口被占用，打开终端，输入# netstat -apn | grep 2181，如无输出，则未被占用，若有输出，则可以看到占用端口的进程号，kill -9 +进程号，即可。
  3. zookeeper_server.pid中的内容没有被清空。在你zookeeper的conf目录下，找到zoo.cfg文件，查看此文件中你配置的dataDir的路径，将里面zookeeper_server.pid清空即可。
  4. 查看你的zookeeper文件夹的conf目录下是否有zoo.cfg和zoo_sample.cfg,(一般zookeeper下载下来的压缩包解压后只有zoo_sample.cfg，一般都重命名，mv命令就可以)，但有些可能是将zoo_sample.cfg文件复制了一份，复件名为zoo.cfg，所以两个文件会同时存在，而两个文件是不能同时存在的，且默认读取的是zoo.cfg，所以要删掉zoo_sample.cfg。
  5. data下的myid必须是和zoo.cfg文件下的服务名是一一对应的。

如果以上都解决了，启动还是会报错。那么去查看解压之后文件夹bin目录下的zookeeper.out文件，查看执行日志，能够更清楚的知道错在哪里。
kafka集群搭建注意事项

踩的坑

开启kafka时，

1、报如图错误：

kafka集群搭建注意事项
查看了好几次，zookeeper的zoo.cfg配置文件没有问题，kafka的server.properties文件也按照步骤配置，并没有发现问题，网上搜的办法也试了，还是没有办法解决这个错误
解决办法

  1. 在kafka的配置文件server.properties的zookeeper.connect后前几个ip：2181的后面加上127.0.0.1:2181;
  2. 配置主机名（hostname）:
    在最后面加上你的三台虚拟机的ip与主机名
    kafka集群搭建注意事项

2、权限不够，无法开启，报错如图

kafka集群搭建注意事项
kafka集群搭建注意事项
解决办法
查看报错信息中没有权限的文件目录，发现报错文件的用户名与用户组不是root,但改成root后，普通用户状态下查看kafka的开启状态，kafka是未开启状态，root用户下是如下状态：
kafka集群搭建注意事项
利用如下方法将kafka的安装目录的属组改为普通用户即可。
用来更改某个目录或文件的用户名和用户组的命令-chown
查看属组用命令：ll
chown 用户名:用户组文件路径（绝对路径/相对路径）

chown root:root /temp/logs

就是把temp下的logs的用户名和用户组改成root和root（只修改了logs的属组）.

chown -R root:root /temp/logs

就是把temp下的logs下的所有文件的属组都改成root和root。

相关推荐