Docker搭建Kafka集群

小半 • 2023年1月9日下午3:59 • 技术随笔 • 阅读 285

前言

这是基于docker-compose，单机版的部署方式，适合于功能测试。

Docker镜像选型

wurstmeister/kafkahttps://github.com/wurstmeister/kafka-docker/

特点：docker hub star数最多，版本更新到 Kafka 2.0 ，zookeeper与kafka分开于不同镜像。

安装过程

假设docker、docker-compose等工具已经安装。

1、下载zookeeper和 kafka 镜像:

docker pull wurstmeister/zookeeper docker pull wurstmeister/kafka

2、用户目录下创建一个docker-compose.yml文件

vi docker-compose.yml

内容如下：

version: '2'
services:
  zookeeper:
    image: wurstmeister/zookeeper
    ports:
      - "2181:2181"
  kafka:
    image: wurstmeister/kafka
    ports:
      - "9092"
    environment:
      KAFKA_ADVERTISED_HOST_NAME: 10.0.3.5
      KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181
    volumes:
      - /var/run/docker.sock:/var/run/docker.sock

注：KAFKA_ADVERTISED_HOST_NAME是本机地址，可通过ifconfig -a 查看本机地址

3、启动docker-compose

docker-compose up -d

[root@kafka ~]# docker-compose up -d
Creating network "root_default" with the default driver
Creating root_kafka_1     ... done
Creating root_zookeeper_1 ... done

4、启动多个kafka 节点，比如3个

docker-compose scale kafka=3

root@kafka ~]# docker-compose scale kafka=3
WARNING: The scale command is deprecated. Use the up command with the --scale flag instead.
Starting root_kafka_1 ... done
Creating root_kafka_2 ... done
Creating root_kafka_3 ... done

5、查看容器状态

[root@VM_0_10_centos docker-compose-files]# docker ps
CONTAINER ID        IMAGE                    COMMAND                  CREATED             STATUS              PORTS                                                NAMES
7b29e8087795        wurstmeister/kafka       "start-kafka.sh"         18 minutes ago      Up 18 minutes       0.0.0.0:32796->9092/tcp                              docker-compose-files_kafka_3
ed8c1467a9cd        wurstmeister/kafka       "start-kafka.sh"         18 minutes ago      Up 18 minutes       0.0.0.0:32795->9092/tcp                              docker-compose-files_kafka_2
4216bd80c7b7        wurstmeister/kafka       "start-kafka.sh"         About an hour ago   Up 35 minutes       0.0.0.0:32791->9092/tcp                              docker-compose-files_kafka_1
1911aa37c082        wurstmeister/zookeeper   "/bin/sh -c '/usr/sb…"   About an hour ago   Up About an hour    22/tcp, 2888/tcp, 3888/tcp, 0.0.0.0:2181->2181/tcp   docker-compose-files_zookeeper_1

文章由极客之音整理，本文链接：https://www.bmabk.com/index.php/post/71341.html

Docker搭建Kafka集群

前言

Docker镜像选型

安装过程

相关推荐

分享到: