centos kafka配置步骤

711
2025/2/18 21:32:07
栏目: 智能运维
开发者测试专用服务器限时活动,0元免费领,库存有限,领完即止! 点击查看>>

在CentOS上配置Kafka的步骤如下:

1. 安装JDK

首先,需要安装JDK。可以使用以下命令安装JDK 1.8:

sudo yum install java-1.8.0-openjdk-devel -y

安装完成后,验证JDK是否安装成功:

java -version

2. 下载并解压Kafka

从Apache Kafka官网下载所需的Kafka版本,然后解压到指定目录。例如,下载Kafka 3.5.2版本:

wget https://downloads.apache.org/kafka/3.5.2/kafka_2.12-3.5.2.tgz
tar -zxvf kafka_2.12-3.5.2.tgz -C /usr/local/kafka
cd /usr/local/kafka

3. 配置Zookeeper

Kafka依赖Zookeeper,因此需要先配置Zookeeper。编辑config/zookeeper.properties文件,设置数据目录和客户端端口等参数:

dataDir=/usr/local/kafka/zookeeper
clientPort=2181

然后启动Zookeeper服务:

nohup /usr/local/kafka/bin/zookeeper-server-start.sh config/zookeeper.properties &

4. 配置Kafka

编辑Kafka的config/server.properties文件,设置以下关键参数:

  • broker.id: 每个Kafka broker的唯一标识。
  • listeners: Kafka监听的地址和端口。
  • advertised.listeners: Kafka对外暴露的地址和端口。
  • log.dirs: Kafka日志文件的存储路径。
  • zookeeper.connect: Zookeeper的地址和端口。

例如:

broker.id=0
listeners=PLAINTEXT://your_server_ip:9092
advertised.listeners=PLAINTEXT://your_server_ip:9092
log.dirs=/usr/local/kafka/kafka-logs
zookeeper.connect=localhost:2181

5. 启动Kafka服务

使用以下命令启动Kafka服务:

nohup /usr/local/kafka/bin/kafka-server-start.sh config/server.properties &

6. 验证Kafka配置

创建一个测试主题并验证Kafka是否正常工作:

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
bin/kafka-topics.sh --list --zookeeper localhost:2181
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

以上步骤应该可以帮助你在CentOS上成功配置Kafka。请注意,这里的your_server_ip需要替换为你的服务器实际IP地址。

辰迅云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>

推荐阅读: centos怎么修改只读文件