win10下Kafka的下载安装和测试
分类:
文章
•
2024-03-27 15:31:16
下载
- kafak是多节点broker集群式的程序组件,所以需要zookeeper来管理集群原数据,这里只需开启kafka就行。
点击进入kafka下载页
需要注意的是,
- 新版本的kafka里面自带zookeeper,所以只需要下载kafka就行,进到kafka目录里先启动zookeeper,再启动kafka,如果有单独的zookeeper,一样先启动zookeeper就行,但是kafka自带的zookeeper不需要再次输入命令启动了。
- 下载无脑安装好之后,就是测试。
- 打开cmd,cd到你的kafka/bin/windows目录,比如我的是E:\Kafka\kafka_2.11-2.3.1\bin\windows,这里面有命令脚本文件,bat是win脚本,sh是linux脚本。
cd /d E:\Kafka\kafka_2.11-2.3.1\bin\windows
- 那我就在cmd里面 cd /d E:\Kafka\kafka_2.11-2.3.1\bin\windows
- 进去了之后,先启动zookeeper,此cmd窗口不要关:
zookeeper-server-start.bat …\config\zookeeper.properties
- 然后启动kafka,此cmd窗口不要关:
kafka-server-start.bat …\config\server.properties
然后测试,先前的zookeeper和kafka进程不要关,再开三个cmd窗口,一个创建主题,一个模拟生产者(push)发消息,一个模拟消费者接受(pull)消息 .
- 我这里是cd /d E:\Kafka\kafka_2.11-2.3.1 ,然后执行,创建了名称为test1的topic
./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test1
- 然后输入查看topic 列表的命令看是否有:
cd /d E:\Kafka\kafka_2.11-2.3.1\bin\windows
kafka-topics --list --zookeeper localhost:2181
- 之后用第四个cmd窗口,进入到 :
cd /d E:\Kafka\kafka_2.11-2.3.1\bin\windows执行
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test1
不要关闭
- 然后用第五个cmd窗口,进入到 :
cd /d E:\Kafka\kafka_2.11-2.3.1\bin\windows执行
bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test1–from-beginning
最后,在第四个生产者窗口输入,你会看到第五个接收窗口接收到信息,可能并不是及时的,毕竟串行的队列数据结构,暂存的作用,来应对并发流量削峰嘛。