Cloud provider — VMware Cloud Director: подготовка окружения.

Список необходимых ресурсов VCD

• Organization
• VirtualDataCenter
• vApp
• StoragePolicy
• SizingPolicy
• Network
• EdgeRouter
• Catalog

Ресурсы Organization, VirtualDataCenter, StoragePolicy, SizingPolicy, EdgeRouter и Catalog должны быть предоставлены вашим поставщиком услуг VMware Cloud Director.

Network (внутренняя сеть) может быть настроена вашим поставщиком услуг VMware Cloud Director, либо вы можете настроить ее самостоятельно. Далее рассматривается настройка внутренней сети самостоятельно.

Права пользователя

Пользователь, под которым будет осуществляться доступ к API VMware Cloud Director, должен иметь следующие права:

• роль Organization Administrator с дополнительным правилом Preserve All ExtraConfig Elements During OVF Import and Export;
• правило Preserve All ExtraConfig Elements During OVF Import and Export должно быть продублировано в используемом Right Bundle пользователя.

Добавление сети

1. Перейдите на вкладку Networking и нажмите NEW:

   

2. Выберите необходимый Data Center:

   

3. На этапе Network type выберите Routed:

   

4. Присоедините EdgeRouter к сети:

   

5. Укажите имя сети и CIDR:

   

6. Не добавляйте Static IP Pools, поскольку будет использоваться DHCP:

   

7. Укажите адреса DNS-серверов:

   

Настройка DHCP

Для динамического заказа узлов включите DHCP-сервер для внутренней сети.

1. Перейдите на вкладку Networking и откройте созданную сеть:

   

2. В открывшемся окне выберите пункт IP Management -> DHCP -> Activate:

   

3. На вкладке General settings настройте параметры аналогично примеру:

   

4. Добавьте пул:

   

5. Укажите адреса DNS-серверов:

   

Добавление vApp

1. Перейдите на вкладку Data Centers -> vApps -> NEW -> New vApp:

   

2. Укажите имя и включите vApp:

   

Добавление сети к vApp

После создания vApp присоедините к ней созданную внутреннюю сеть.

1. Перейдите на вкладку Data Centers -> vApps и откройте необходимый vApp:

   

2. Перейдите на вкладку Networks и нажмите NEW:

   

3. В появившемся окне выберите тип Direct и выберите сеть:

   

Входящий трафик

Входящий трафик необходимо направить на edge router (порты 80, 443) при помощи правил DNAT на выделенный адрес во внутренней сети. Этот адрес поднимается при помощи MetalLB в L2-режиме на выделенных frontend-узлах.

Настройка правил DNAT/SNAT на edge gateway

1. Перейдите на вкладку Networking -> Edge Gateways, откройте edge gateway:

   

2. Перейдите на вкладку Services -> NAT:

   

3. Добавьте следующие правила:

   

   Первые два правила используются для входящего трафика, а третье — для доступа по SSH к узлу с control plane (без этого правила установка будет невозможна).

4. Чтобы виртуальные машины могли выходить в интернет, настройте правила SNAT, следуя примеру:

   

   Данное правило позволит виртуальным машинам из подсети 192.168.199.0/24 выходить в интернет.

Настройка firewall

После настройки DNAT настройте firewall. Сначала необходимо настроить наборы IP-адресов (IP sets).

1. Перейдите на вкладку Security -> IP Sets:

   

2. Создайте следующий набор IP (подразумевается, что адрес MetalLB будет .10 а адрес узла с control plane — .2):

   

   

   

3. Добавьте следующие правила firewall:

   

Шаблон виртуальной машины

В примере используется OVA-файл, предоставляемый Ubuntu, с двумя исправлениями. Исправления необходимы для корректного заказа CloudPermanent-узлов и для возможности подключать диски, созданные CSI.

Подготовка шаблона из OVA-файла

1. Скачайте OVA-файл:

   

2. Перейдите на вкладку Libraries -> Catalogs -> Каталог организации:

   

3. Выберите скачанный шаблон и загрузите его в каталог:

   

   

   

4. Создайте виртуальную машину из шаблона:

   

   

Для подключения к виртуальной машине выполните следующие шаги:

1. Запустите виртуальную машину.
2. Дождитесь получение IP-адреса.

3. Пробросьте порт 22 до виртуальной машины:

   

Войдите на виртуальную машину по SSH и выполните следующие команды:

rm /etc/netplan/99-netcfg-vmware.yaml
echo -e '\n[deployPkg]\nwait-cloudinit-timeout=1800\n' >> /etc/vmware-tools/tools.conf
echo 'disable_vmware_customization: true' > /etc/cloud/cloud.cfg.d/91_vmware_cust.cfg
dpkg-reconfigure cloud-init

В появившемся диалоговом окне оставьте галочку только у OVF: Reads data from OVF transports. Остальные пункты отключите:

Выполните оставшиеся команды:

truncate -s 0 /etc/machine-id
rm /var/lib/dbus/machine-id
ln -s /etc/machine-id /var/lib/dbus/machine-id
cloud-init clean --logs --seed
passwd -d ubuntu
passwd -d root
rm /home/ubuntu/.ssh/authorized_keys
history -c

shutdown -P now

Настройка шаблона в VCD

1. Выключите виртуальную машину и удалите все заполненные поля Guest Properties:

   

   

2. Cоздайте шаблон виртуальной машины:

   

   

3. В созданном шаблоне перейдите на вкладку Metadata и добавьте шесть полей:

   • guestinfo.metadata;
   • guestinfo.metadata.encoding;
   • guestinfo.userdata;
   • guestinfo.userdata.encoding;
   • disk.enableUUID;
   • guestinfo.hostname.

   

   

4. В панели управления vCenter для шаблона включите параметр disk.EnableUUID:

   

   

   

   

   

Использование хранилища

• VCD поддерживает CSI. Диски создаются как VCD Independent Disks.
• Guest property disk.EnableUUID должно быть разрешено для используемых шаблонов виртуальных машин.
• Deckhouse Kubernetes Platform поддерживает изменение размера дисков с версии v1.59.1.