Kafka安装(windows)

1 安装zookeeper

1、 下载安装包
http://zookeeper.apache.org/releases.html#download
https://www.apache.org/dyn/closer.cgi/zookeeper/

一定要认准bin版,apache-zookeeper-3.5.5-bin

如果没有使用bin版本,在运行时可能会报:错误: 找不到或无法加载主类 org.apache.zookeeper.server.quorum.QuorumPeerMain

2、 解压并进入ZooKeeper目录,比如:C:\Workspace\kafka\apache-zookeeper-3.5.5-bin\conf

3、 将“zoo_sample.cfg”重命名为“zoo.cfg”

4、 打开“zoo.cfg”找到并编辑dataDir=C:\Workspace\kafka\zookeeper_data

5、 添加系统变量:ZOOKEEPER_HOME=C:\Workspace\kafka\apache-zookeeper-3.5.5-bin

6、 编辑Path系统变量,添加路径:%ZOOKEEPER_HOME%\bin

7、 在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)

8、 打开新的cmd,输入“zkServer“,运行Zookeeper

9、 命令行提示如下:说明本地Zookeeper启动成功

Kafka安装(windows)

image.png

2 安装Kafka

1、 下载安装包

http://kafka.apache.org/downloads
注意要下载二进制版本 Binary downloads

2、 解压并进入Kafka目录,C:\Workspace\kafka\kafka_2.12-2.3.0

3、 进入config目录找到文件server.properties并打开

4、 找到并编辑log.dirs=C:\Workspace\kafka\kafka_2.12-2.3.0\kafka-logs

5、 找到并编辑zookeeper.connect=localhost:2181

6、 Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181

7、 进入Kafka安装目录D:\Kafka\kafka_2.12-0.11.0.0,按下Shift+右键,选择“打开命令窗口”选项,打开命令行,输入:

.\bin\windows\kafka-server-start.bat .\config\server.properties

Kafka安装(windows)

如果出现

Windows CMD命令行解释器【输入行太长。 命令语法不正确】

这是一个很少见的错误,我在全网搜,大多都是在%CLASSPATH%改成"%CLASSPATH%",但我发现kafka已经帮我们做了这一步了。那为什么我还会报这个错呢?
Kafka安装(windows)

参考:https://support.microsoft.com/zh-cn/help/830473/command-prompt-cmd-exe-command-line-string-limitation

  • 使用较短的文件夹和文件的名称。
  • 减少文件夹树的深度。

注意:不要关了这个窗口,启用Kafka前请确保ZooKeeper实例已经准备好并开始运行

3 测试

1、 创建主题,进入Kafka安装目录C:\Workspace\kafka\kafka_2.12-2.3.0\,按下Shift+右键,选择“打开命令窗口”选项,打开命令行,输入:

.\bin\windows\kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

Kafka安装(windows)

image.png

查看主题输入:
.\bin\windows\kafka-topics.bat --list --zookeeper localhost:2181

Kafka安装(windows)

image.png


2、 创建生产者,进入Kafka安装目录D:\Kafka\kafka_2.12-0.11.0.0,按下Shift+右键,选择“打开命令窗口”选项,打开命令行,输入:
.\bin\windows\kafka-console-producer.bat --broker-list localhost:9092 --topic test

Kafka安装(windows)

image.png

 

注意:不要关了这个窗口

3、 创建消费者,进入Kafka安装目录D:\Kafka\kafka_2.12-0.11.0.0,按下Shift+右键,选择“打开命令窗口”选项,打开命令行,输入:
.\bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning

Kafka安装(windows)

image.png

 

Kafka安装(windows)

左边生产什么,右边就消费什么

 

4、 大功告成



作者:河的左岸
链接:https://www.jianshu.com/p/fc27649a8030
来源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。