Совет переднего ряда: последние новостиdocker-compole.ymlПожалуйста, перейдите на github, чтобы получить его,READMEЕсть соответствующие шаги операции.Адрес на гитхабе:GitHub.com/JA Case l IU/…

недавно учусьKafka, При подготовке к тестированию состояния кластера слишком хлопотно открывать три виртуальные машины или открывать три разных номера портов в одной виртуальной машине (ну... в основном лень).

Подготовка окружающей среды

Компьютер с доступом в Интернет и виртуальная машина CentOS7

Зачем использовать виртуальную машину? Из-за используемого ноутбука IP-адрес будет меняться каждый раз, когда вы подключаетесь к сети, и вы должны постоянно изменять файл конфигурации, что слишком громоздко и неудобно для тестирования. (Этой проблемы можно избежать через виртуальную сеть Docker, которую не разбирали в ходе эксперимента)

Установка докера

Пропустите этот шаг, если Docker уже установлен

Docker поддерживает следующие версии CentOS:
CentOS 7 (64-разрядная версия): требуется, чтобы система была 64-разрядной, а версия ядра системы была 3.10 или более поздней.
CentOS 6.5 (64-разрядная версия) или более поздняя версия: требуется 64-разрядная система и версия ядра системы 2.6.32-431 или более поздняя.
CentOS поддерживает Docker только в ядре в релизной версии.

ням установить

Для Docker требуется система CentOS с версией ядра выше 3.10. Проверьте указанные выше предварительные условия, чтобы убедиться, что ваша версия CentOS поддерживает Docker.

# 查看内核版本
$ uname -a

#安装 Docker
$ yum -y install docker

#启动 Docker 后台服务
$ service docker start

# 由于本地没有hello-world这个镜像，所以会下载一个hello-world的镜像，并在容器内运行。
$ docker run hello-world

Установка скрипта

Войдите в Centos с правами sudo или root.
Убедитесь, что пакет yum обновлен до последней версии.

$ sudo yum update

Получите и выполните сценарий установки Docker.

$ curl -fsSL https://get.docker.com -o get-docker.sh
# 执行这个脚本会添加 docker.repo 源并安装 Docker。
$ sudo sh get-docker.sh

запустить докер

$ sudo systemctl start docker

# 验证 docker 是否安装成功并在容器中执行一个测试的镜像。
$ sudo docker run hello-world
$ docker ps

Зеркальное ускорение

Когда я начал настраивать источник домашнего зеркала, я отказался, но после его использования я обнаружил, что скорость загрузкиduang~поднялся сразу. Поэтому настоятельно рекомендуется настраивать отечественные зеркальные источники. открыть/создать/etc/docker/daemon.jsonфайл, добавьте следующее:

{
  "registry-mirrors": ["http://hub-mirror.c.163.com"]
}

Строительство кластера Zookeeper

Зеркало смотрителя зоопарка: смотритель зоопарка: 3.4

Подготовка зеркала

$ docker pull zookeeper:3.4

Найти зеркала можно наhub.docker.com/docker pull images:TAG // расшифровывается как pullTAGверсияimageзеркало

Создайте автономный контейнер Zookeeper

Сначала мы создаем автономный модуль самым простым способом.Zookeeperузел, а затем мы создаем другие узлы на основе этого примера.

$ docker run --name zookeeper -p 2181:2181 -d zookeeper:3.4

По умолчанию файл конфигурации в контейнере находится в,/conf/zoo.cfg, каталоги данных и журналов по умолчанию/dataа также/datalog, при необходимости вы можете сопоставить указанный выше каталог с хостом.Описание параметра

--name: указать имя контейнера

-p: назначить номер порта порту, предоставленному контейнером

-d: запустить контейнер в фоновом режиме и вывести идентификатор контейнера

Кластерная конструкция

других узловZookeeperМетод создания контейнера аналогичен созданию самостоятельного контейнера, но необходимо указать узлы отдельно.idИ измените многоузловую конфигурацию в файле, соответствующая команда создания выглядит следующим образом:

Создайте новую сеть докеров

$ docker network create zoo_kafka
$ docker network ls

Контейнер Zookeeper 1

$ docker run -d \
     --restart=always \
     -v /opt/docker/zookeeper/zoo1/data:/data \
     -v /opt/docker/zookeeper/zoo1/datalog:/datalog \
     -e ZOO_MY_ID=1 \
     -p 2181:2181 \
     -e ZOO_SERVERS="server.1=zoo1:2888:3888 server.2=zoo2:2888:3888 server.3=zoo3:2888:3888" \
     --name=zoo1 \
     --net=viemall-zookeeper \
     --privileged \
     zookeeper:3.4

Зоопарк контейнер 2

$ docker run -d \
     --restart=always \
     -v /opt/docker/zookeeper/zoo2/data:/data \
     -v /opt/docker/zookeeper/zoo2/datalog:/datalog \
     -e ZOO_MY_ID=2 \
     -p 2182:2181 \
     -e ZOO_SERVERS="server.1=zoo1:2888:3888 server.2=zoo2:2888:3888 server.3=zoo3:2888:3888" \
     --name=zoo2 \
     --net=viemall-zookeeper \
     --privileged \
     zookeeper:3.4

Зоопарк контейнер 3

$ docker run -d \
     --restart=always \
     -v /opt/docker/zookeeper/zoo3/data:/data \
     -v /opt/docker/zookeeper/zoo3/datalog:/datalog \
     -e ZOO_MY_ID=3 \
     -p 2183:2181 \
     -e ZOO_SERVERS="server.1=zoo1:2888:3888 server.2=zoo2:2888:3888 server.3=zoo3:2888:3888" \
     --name=zoo3 \
     --net=viemall-zookeeper \
     --privileged \
     zookeeper:3.4

Хотя этот метод также достигает того, чего мы хотим, шаги слишком громоздки, и его сложно поддерживать (поздняя стадия ленивого рака), поэтому мы используемdocker-composeспособ достижения.

docker-compose создает кластер zookeeper

Создайте новую сеть докеров

$ docker network create --driver bridge --subnet 172.23.0.0/25 --gateway 172.23.0.1  zoo_kafka
$ docker network ls

Напишите скрипт docker-compose.yml

Как использовать:

Установитьdocker-compose

# 获取脚本
$ curl -L https://github.com/docker/compose/releases/download/1.25.0-rc2/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose
# 赋予执行权限
$chmod +x /usr/local/bin/docker-compose

Создать в любом каталогеdocker-compose.ymlфайл, скопируйте следующее
Выполнение заказаdocker-compose up -d

сравнение команд

Заказ	объяснять
docker-compose up	запустить все контейнеры
docker-compose up -d	Запустите и запустите все контейнеры в фоновом режиме
docker-compose up --no-recreate -d	Не создавать заново остановленные контейнеры
docker-compose up -d test2	Запустите только контейнер test2
docker-compose stop	стоп-контейнер
docker-compose start	запустить контейнер
docker-compose down	остановить и уничтожить контейнер

docker-compose.ymlссылка на скачивание:GitHub.com/JA Case l IU/… docker-compose.ymlПодробности

version: '2'
services:
  zoo1:
    image: zookeeper:3.4 # 镜像名称
    restart: always # 当发生错误时自动重启
    hostname: zoo1
    container_name: zoo1
    privileged: true
    ports: # 端口
      - 2181:2181
    volumes: # 挂载数据卷
      - ./zoo1/data:/data
      - ./zoo1/datalog:/datalog 
    environment:
      TZ: Asia/Shanghai
      ZOO_MY_ID: 1 # 节点ID
      ZOO_PORT: 2181 # zookeeper端口号
      ZOO_SERVERS: server.1=zoo1:2888:3888 server.2=zoo2:2888:3888 server.3=zoo3:2888:3888 # zookeeper节点列表
    networks:
      default:
        ipv4_address: 172.23.0.11

  zoo2:
    image: zookeeper:3.4
    restart: always
    hostname: zoo2
    container_name: zoo2
    privileged: true
    ports:
      - 2182:2181
    volumes:
      - ./zoo2/data:/data
      - ./zoo2/datalog:/datalog
    environment:
      TZ: Asia/Shanghai
      ZOO_MY_ID: 2
      ZOO_PORT: 2181
      ZOO_SERVERS: server.1=zoo1:2888:3888 server.2=zoo2:2888:3888 server.3=zoo3:2888:3888
    networks:
      default:
        ipv4_address: 172.23.0.12

  zoo3:
    image: zookeeper:3.4
    restart: always
    hostname: zoo3
    container_name: zoo3
    privileged: true
    ports:
      - 2183:2181
    volumes:
      - ./zoo3/data:/data
      - ./zoo3/datalog:/datalog
    environment:
      TZ: Asia/Shanghai
      ZOO_MY_ID: 3
      ZOO_PORT: 2181
      ZOO_SERVERS: server.1=zoo1:2888:3888 server.2=zoo2:2888:3888 server.3=zoo3:2888:3888
    networks:
      default:
        ipv4_address: 172.23.0.13

networks:
  default:
    external:
      name: zoo_kafka

проверять

Из рисунка мы видим, что естьLeader,дваFlower, пока нашZookeeperКластер уже настроен

Строительство кластера Kafka

С вышеуказанным основанием перейдите кKafkaС кластером все еще проблема? На самом деле это всего лишь несколько переменных с разными значениями.

В приведенном выше примере вам не нужно много работать, чтобы получить один узелKafka, используйте его напрямуюdocker-composeСпособ развертывания трех узлов фактически одинаков.Как упоминалось выше, на самом деле некоторые атрибуты отличаются.На данный момент нам не нужно создавать новую сеть Docker, а использовать предыдущую для ее построения напрямую.ZookeeperСети, созданной при кластеризации, достаточно!