在Ubuntu上安装Apache Kafka的步骤如下:
Kafka依赖于Java运行时环境,推荐安装OpenJDK 8或11。
sudo apt update
sudo apt install openjdk-11-jdk # 或 openjdk-8-jdk
验证安装:
java -version
Kafka需要Zookeeper来管理集群的元数据。你可以从Apache官网下载Zookeeper的安装包,并解压到指定目录。
wget https://downloads.apache.org/zookeeper/zookeeper-3.8.0/zookeeper-3.8.0.tar.gz
tar -xzf zookeeper-3.8.0.tar.gz
sudo mv zookeeper-3.8.0 /usr/local/zookeeper
配置Zookeeper:
cd /usr/local/zookeeper
sudo cp config/zoo.cfg /usr/local/zookeeper/conf/
sudo mkdir -p /usr/local/zookeeper/data
sudo mkdir -p /usr/local/zookeeper/log
编辑zoo.cfg
文件:
dataDir=/usr/local/zookeeper/data
clientPort=2181
启动Zookeeper:
cd /usr/local/zookeeper/bin
./zkServer.sh start
验证Zookeeper是否启动成功:
./zkServer.sh status
下载Kafka的安装包,并解压到指定目录。例如,下载Kafka 3.5.2版本:
wget https://downloads.apache.org/kafka/3.5.2/kafka_2.12-3.5.2.tgz
tar -xzf kafka_2.12-3.5.2.tgz
sudo mv kafka_2.12-3.5.2 /usr/local/kafka
配置Kafka:
cd /usr/local/kafka
sudo mkdir -p /usr/local/kafka/logs
sudo cp config/server.properties /usr/local/kafka/config/
编辑server.properties
文件:
broker.id=0
listeners=PLAINTEXT://:9092
log.dirs=/usr/local/kafka/logs
zookeeper.connect=localhost:2181
启动Kafka:
cd /usr/local/kafka/bin
./kafka-server-start.sh config/server.properties
验证Kafka是否启动成功:
netstat -tulnp | grep 9092
创建一个测试Topic:
./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
列出所有Topic以确认新Topic已创建:
./kafka-topics.sh --list --zookeeper localhost:2181
启动生产者发送消息:
./kafka-console-producer.sh --broker-list localhost:9092 --topic test
启动消费者接收消息:
./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
以上步骤应该可以帮助你在Ubuntu系统上成功安装和配置Kafka。如果在安装过程中遇到问题,请检查日志文件以获取更多信息。