Стадия жизненного цикла модуля: General Availability

Используйте модуль metallb для публикации Service типа LoadBalancer в кластерах bare metal без облачного балансировщика нагрузки. Модуль поддерживает режимы L2 и BGP.

Пример использования metallb в режиме L2 LoadBalancer

Включите модуль metallb.

Подготовьте приложение, которое хотите опубликовать:

d8 k create deploy nginx --image=nginx

Создайте MetalLoadBalancerClass:

apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerClass
metadata:
  name: ingress
spec:
  addressPool:
    - 192.168.2.100-192.168.2.150
  isDefault: false
  l2:
    # Сетевые интерфейсы, с которых анонсируются назначенные IP-адреса.
    interfaces:
      - eth1
  nodeSelector:
    # Выбирает узлы, на которых работает L2-балансировщик.
    node-role.kubernetes.io/loadbalancer: ""
  type: L2

В этом примере spec.nodeSelector выбирает узлы с лейблом node-role.kubernetes.io/loadbalancer. Убедитесь, что этот лейбл есть на узлах, которые должны анонсировать IP-адреса Service.

Если параметр spec.l2.interfaces не задан или содержит пустой список, назначенные IP-адреса анонсируются со всех сетевых интерфейсов выбранных узлов. Укажите интерфейсы, через которые необходимо анонсировать адреса.

Создайте Service с аннотацией и параметром loadBalancerClass:

apiVersion: v1
kind: Service
metadata:
  name: nginx-deployment
  annotations:
    network.deckhouse.io/l2-load-balancer-external-ips-count: "3"
spec:
  type: LoadBalancer
  # Выбирает MetalLoadBalancerClass с именем ingress.
  # Можно не указывать, если в кластере есть MetalLoadBalancerClass с isDefault: true
  # и не используется режим BGP LoadBalancer.
  loadBalancerClass: ingress
  ports:
    - port: 8000
      protocol: TCP
      targetPort: 80
  selector:
    app: nginx

В результате Service типа LoadBalancer получит указанное количество IP-адресов:

d8 k get svc

Пример вывода:

NAME                   TYPE           CLUSTER-IP      EXTERNAL-IP                                 PORT(S)          AGE
nginx-deployment       LoadBalancer   10.222.130.11   192.168.2.100,192.168.2.101,192.168.2.102   8000:30544/TCP   11s

При создании Service также можно указать определённые IP-адреса из пула, которые будут ему присвоены.

Назначенные адреса EXTERNAL-IP можно использовать в A-записях DNS для домена приложения. Проверьте, что приложение отвечает по этим адресам:

$ curl -s -o /dev/null -w "%{http_code}" 192.168.2.100:8000
200
$ curl -s -o /dev/null -w "%{http_code}" 192.168.2.101:8000
200
$ curl -s -o /dev/null -w "%{http_code}" 192.168.2.102:8000
200

Запуск speaker на узлах с пользовательскими taints

В режиме L2 LoadBalancer поды speaker работают как DaemonSet на узлах, выбранных параметром nodeSelector в MetalLoadBalancerClass. У них есть tolerations только для следующих taints, известных Deckhouse Platform (DP):

  • node-role.kubernetes.io/master;
  • node-role.kubernetes.io/control-plane;
  • node.deckhouse.io/etcd-arbiter;
  • dedicated.deckhouse.io и dedicated с любым значением;
  • DeletionCandidateOfClusterAutoscaler и ToBeDeletedByClusterAutoscaler.

Если на выбранном узле есть taint с другим ключом, speaker на нём не запускается и адреса с этого узла не анонсируются.

Чтобы speaker запускался на таких узлах, добавьте ключ taint в параметр customTolerationKeys в ModuleConfig global. Ключ должен совпадать с ключом taint на узлах, например, заданным в параметре spec.nodeTemplate.taints в NodeGroup. Это также разрешает запуск на таких узлах остальных системных компонентов (CNI, CSI, мониторинг):

apiVersion: deckhouse.io/v1alpha1
kind: ModuleConfig
metadata:
  name: global
spec:
  version: 3
  settings:
    modules:
      placement:
        customTolerationKeys:
          - dedicated.example.com

Проверьте, что поды speaker запущены на узлах с taint:

d8 k -n d8-metallb get pods -l app=l2lb-speaker -o wide

У speaker в режиме BGP LoadBalancer такие же tolerations, поэтому этот параметр действует и на него.

Пример использования metallb в режиме BGP LoadBalancer

Включите модуль metallb и создайте следующие объекты для режима BGP:

apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerPool
metadata:
  name: mypool
spec:
  addresses:
    - 192.168.219.100-192.168.219.200
---
apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerBGPPeer
metadata:
  name: myrouter
spec:
  peerAddress: 172.18.18.10
  peerASN: 64601
  myASN: 64600
  holdTime: 3s
---
apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerConfiguration
metadata:
  name: defaults
spec:
  mode: BGP
  nodeSelector:
    node-role.deckhouse.io/metallb: ""
  bgp:
    peerNames:
      - myrouter
  advertisements:
    - poolNames:
        - mypool

В этом примере spec.nodeSelector выбирает узлы с лейблом node-role.deckhouse.io/metallb. Убедитесь, что этот лейбл есть на узлах, на которых должны работать поды speaker.

Настройте BGP-пиринг на сетевом оборудовании.

Пример одновременного использования режимов L2 LoadBalancer и BGP LoadBalancer

Модуль может одновременно обслуживать сервисы в режиме L2 LoadBalancer и в режиме BGP LoadBalancer. Режимы обслуживаются разными наборами компонентов: l2lb-controller и l2lb-speaker в режиме L2 LoadBalancer, controller и speaker в режиме BGP LoadBalancer. Наборы работают независимо, но обрабатывают одни и те же сервисы и видят пулы адресов друг друга, поэтому совместная работа режимов возможна только в описанной ниже конфигурации.

Режим BGP LoadBalancer доступен в редакциях Enterprise, Ultimate или Certified Security Pro.

Описанная ниже конфигурация — единственный поддерживаемый вариант одновременной работы режимов L2 LoadBalancer и BGP LoadBalancer. При любом отступлении от неё (L2-сервис без spec.loadBalancerClass, MetalLoadBalancerClass с параметром isDefault: true, пересекающиеся пулы адресов, ручное создание объектов MetalLB) компоненты режимов конфликтуют друг с другом, что приводит к недоступности сервисов или исчерпанию пула режима L2 LoadBalancer.

Включите модуль и настройте оба режима:

apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerClass
metadata:
  name: ingress
spec:
  addressPool:
    - 192.168.2.100-192.168.2.150
  # Класс по умолчанию недопустим.
  isDefault: false
  l2:
    # Сетевые интерфейсы, с которых анонсируются назначенные IP-адреса.
    interfaces:
      - eth1
  nodeSelector:
    node-role.kubernetes.io/loadbalancer: ""
  type: L2
---
apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerPool
metadata:
  name: mypool
spec:
  # Адреса не пересекаются с пулом MetalLoadBalancerClass.
  addresses:
    - 192.168.219.100-192.168.219.200
---
apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerBGPPeer
metadata:
  name: myrouter
spec:
  peerAddress: 172.18.18.10
  peerASN: 64601
  myASN: 64600
  holdTime: 3s
---
apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerConfiguration
metadata:
  name: defaults
spec:
  mode: BGP
  nodeSelector:
    node-role.deckhouse.io/metallb: ""
  bgp:
    peerNames:
      - myrouter
  advertisements:
    - poolNames:
        - mypool

Создайте сервис режима L2 LoadBalancer с явно указанным MetalLoadBalancerClass:

apiVersion: v1
kind: Service
metadata:
  name: nginx-l2
  annotations:
    network.deckhouse.io/l2-load-balancer-external-ips-count: "2"
spec:
  type: LoadBalancer
  # Имя MetalLoadBalancerClass.
  loadBalancerClass: ingress
  ports:
    - port: 8000
      protocol: TCP
      targetPort: 80
  selector:
    app: nginx

Создайте сервис режима BGP LoadBalancer без spec.loadBalancerClass и с явно указанным пулом:

apiVersion: v1
kind: Service
metadata:
  name: nginx-bgp
  annotations:
    # Имя MetalLoadBalancerPool.
    network.deckhouse.io/load-balancer-pool: mypool
spec:
  type: LoadBalancer
  ports:
    - port: 8000
      protocol: TCP
      targetPort: 80
  selector:
    app: nginx

В результате сервису nginx-l2 будут присвоены два адреса из пула MetalLoadBalancerClass, а сервису nginx-bgp — один адрес из MetalLoadBalancerPool:

d8 k get svc

Пример вывода:

NAME        TYPE           CLUSTER-IP      EXTERNAL-IP                   PORT(S)          AGE
nginx-bgp   LoadBalancer   10.222.41.120   192.168.219.100               8000:31942/TCP   12s
nginx-l2    LoadBalancer   10.222.130.11   192.168.2.100,192.168.2.101   8000:30544/TCP   15s

Ограничения при одновременной работе режимов

Когда в кластере работают оба режима, действуют следующие ограничения:

  • Каждый сервис режима L2 LoadBalancer должен явно указывать MetalLoadBalancerClass в spec.loadBalancerClass. Сервисы без этого параметра обрабатывает контроллер режима BGP LoadBalancer, и сервис с несколькими адресами перестаёт принимать трафик до пересоздания (хотя узлы продолжают отвечать на ARP-запросы для его адресов).
  • Ни у одного MetalLoadBalancerClass не должен быть задан параметр isDefault: true. Иначе контроллер режима L2 LoadBalancer выделяет каждому сервису режима BGP LoadBalancer скрытый адрес из своего пула, и пул режима L2 LoadBalancer незаметно исчерпывается.
  • Сервис режима BGP LoadBalancer не должен указывать spec.loadBalancerClass и получает только один IPv4-адрес. Сервисы с несколькими адресами поддерживаются только в режиме L2 LoadBalancer.
  • Сервису режима BGP LoadBalancer указывайте пул аннотацией network.deckhouse.io/load-balancer-pool или адрес аннотацией network.deckhouse.io/load-balancer-ips. Контроллер режима BGP LoadBalancer видит и пулы MetalLoadBalancerClass, поэтому без аннотации может назначить сервису адрес из пула режима L2 LoadBalancer, который не анонсируется по BGP.
  • Адреса в MetalLoadBalancerPool не должны пересекаться с адресами в параметре addressPool MetalLoadBalancerClass. При пересечении компоненты speaker не применяют конфигурацию и сообщают об ошибке CIDR ... overlaps with already defined CIDR.
  • Перевести сервис из режима L2 LoadBalancer в режим BGP LoadBalancer можно только по процедуре перехода.
  • В логах контроллеров могут появляться сообщения вида PoolStatusController ... the object has been modified. На передачу трафика они не влияют.

Пример перехода с режима L2 LoadBalancer на режим BGP LoadBalancer

Во время перехода компоненты режима L2 LoadBalancer и компоненты режима BGP LoadBalancer работают в кластере одновременно, и действуют ограничения одновременной работы режимов. Оба контроллера могут обрабатывать одни и те же сервисы:

  • Контроллер режима BGP LoadBalancer обрабатывает все сервисы типа LoadBalancer, у которых не задан параметр spec.loadBalancerClass.
  • Контроллер режима L2 LoadBalancer обрабатывает сервисы, у которых в spec.loadBalancerClass указано имя MetalLoadBalancerClass. Если в кластере есть MetalLoadBalancerClass с параметром isDefault: true, контроллер режима L2 LoadBalancer обрабатывает и все остальные сервисы типа LoadBalancer.

В примерах ниже используется класс по умолчанию l2-default. Модуль создаёт класс с таким именем при преобразовании старого формата настроек модуля. В вашем кластере класс по умолчанию может называться иначе. Найдите его и используйте его имя вместо l2-default:

d8 k get metalloadbalancerclass -o custom-columns='NAME:.metadata.name,DEFAULT:.spec.isDefault'

Описанный ниже порядок действий — единственный поддерживаемый способ перехода с режима L2 LoadBalancer на режим BGP LoadBalancer. Включение режима BGP LoadBalancer без подготовки L2-сервисов, одновременное присутствие адреса в пулах обоих режимов и ручное создание объектов MetalLB (IPAddressPool, BGPAdvertisement и т. п.) приводят к недоступности сервисов.

Переход сопровождается кратковременной недоступностью: менее 1 секунды при пересоздании сервиса на шаге 1 и около 11 секунд на каждый сервис, переносимый в режим BGP LoadBalancer на шаге 4.

Перед началом работы

Убедитесь, что кластер и сеть соответствуют следующим требованиям:

  • В кластере используется редакция Enterprise, Ultimate или Certified Security Pro. В других редакциях режим BGP LoadBalancer недоступен.
  • Сетевое оборудование принимает от узлов BGP-анонсы /32 для адресов из подсети режима L2 LoadBalancer. Такой маршрут имеет более длинный префикс, поэтому маршрутизатор предпочтёт его маршруту в напрямую подключённую подсеть.
  • Клиенты переносимых сервисов находятся вне подсети режима L2 LoadBalancer, или сеть направляет их трафик к этим адресам через маршрутизатор. Клиенты из той же подсети определяют адрес сервиса по ARP и не обращаются к маршрутизатору. После переноса узлы перестают отвечать на ARP-запросы к этому адресу, и такие клиенты теряют доступ к сервису.

Шаг 1. Закрепление L2-сервисов за MetalLoadBalancerClass

Если включить режим BGP LoadBalancer, пока у L2-сервисов не задан spec.loadBalancerClass, контроллер режима BGP LoadBalancer начнёт их обрабатывать. Сервисы с несколькими адресами (аннотация network.deckhouse.io/l2-load-balancer-external-ips-count больше 1) при этом перестают принимать трафик: контроллер не может назначить сервису несколько IPv4-адресов и очищает его статус, хотя узлы продолжают отвечать на ARP-запросы для этих адресов. Отключение режима BGP LoadBalancer такие сервисы не восстанавливает, помогает только их пересоздание.

Найдите сервисы типа LoadBalancer, у которых не задан spec.loadBalancerClass (<none> в колонке CLASS):

d8 k get svc -A -o custom-columns='NAMESPACE:.metadata.namespace,NAME:.metadata.name,TYPE:.spec.type,CLASS:.spec.loadBalancerClass,EXTERNAL-IP:.status.loadBalancer.ingress[*].ip' | awk 'NR==1 || $3=="LoadBalancer"'

Пример вывода:

NAMESPACE   NAME               TYPE           CLASS    EXTERNAL-IP
default     nginx-deployment   LoadBalancer   <none>   192.168.2.100,192.168.2.101
default     web                LoadBalancer   <none>   192.168.2.120

Каждый сервис, который должен остаться в режиме L2 LoadBalancer, пересоздайте с явно указанным spec.loadBalancerClass. Изменить этот параметр у существующего сервиса нельзя. Чтобы сервис сохранил текущие адреса, перечислите их в аннотации network.deckhouse.io/load-balancer-ips.

Сохраните манифест сервиса в файл nginx-deployment.yaml:

apiVersion: v1
kind: Service
metadata:
  name: nginx-deployment
  namespace: default
  annotations:
    network.deckhouse.io/l2-load-balancer-external-ips-count: "2"
    network.deckhouse.io/load-balancer-ips: "192.168.2.100,192.168.2.101"
spec:
  type: LoadBalancer
  # Имя MetalLoadBalancerClass.
  loadBalancerClass: l2-default
  ports:
    - port: 8000
      protocol: TCP
      targetPort: 80
  selector:
    app: nginx

Удалите сервис и создайте его заново из сохранённого манифеста:

d8 k -n default delete svc nginx-deployment && d8 k apply -f nginx-deployment.yaml

Сервисам, которые будут переведены в режим BGP LoadBalancer, spec.loadBalancerClass не задавайте. Достаточно закрепить за ними текущий адрес аннотацией network.deckhouse.io/load-balancer-ips, пересоздавать их не требуется:

d8 k -n default annotate svc web network.deckhouse.io/load-balancer-ips=192.168.2.120

В режиме BGP LoadBalancer сервису назначается только один IPv4-адрес, поэтому переводить в этот режим можно только сервисы с одним адресом. Сервисы с несколькими адресами оставьте в режиме L2 LoadBalancer.

Шаг 2. Отключение выбора MetalLoadBalancerClass по умолчанию

Пока у MetalLoadBalancerClass задан параметр isDefault: true, контроллер режима L2 LoadBalancer обрабатывает и сервисы режима BGP LoadBalancer. Для каждого такого сервиса он выделяет адрес из пула MetalLoadBalancerClass и анонсирует его по ARP, хотя в статусе сервиса этот адрес не отображается. Такие скрытые адреса незаметно расходуют пул режима L2 LoadBalancer и могут привести к его исчерпанию. Сервисы с адресом, закреплённым аннотацией network.deckhouse.io/load-balancer-ips, этой проблеме не подвержены.

Задайте параметру isDefault значение false:

d8 k patch metalloadbalancerclass l2-default --type=merge -p '{"spec":{"isDefault":false}}'

Параметр влияет только на новые сервисы. Сервисы, которые уже были привязаны к MetalLoadBalancerClass по умолчанию, остаются привязанными к нему.

Адреса, выделенные в режиме L2 LoadBalancer, отображаются в виде объектов SDNInternalL2LBService с именем вида <имя сервиса>-<имя MetalLoadBalancerClass>-<номер>:

d8 k get sdninternall2lbservices -A

Если режим BGP LoadBalancer уже был включён ранее и в списке есть объекты для сервисов этого режима, значит эти сервисы успели получить скрытый адрес из пула режима L2 LoadBalancer до отключения isDefault. Отключение isDefault такой адрес не освобождает, так как сервис остаётся привязанным к MetalLoadBalancerClass. Укажите в аннотации network.deckhouse.io/load-balancer-ips такого сервиса его текущий адрес из пула режима BGP LoadBalancer. Этого адреса нет в пуле режима L2 LoadBalancer, поэтому контроллер режима L2 LoadBalancer освободит скрытый адрес, а адрес сервиса не изменится. Пример для сервиса web-bgp с адресом 192.168.219.100:

d8 k -n default annotate svc web-bgp network.deckhouse.io/load-balancer-ips=192.168.219.100

Шаг 3. Включение режима BGP LoadBalancer

Создайте MetalLoadBalancerPool, MetalLoadBalancerBGPPeer и MetalLoadBalancerConfiguration, как показано в примере для режима BGP LoadBalancer. Адреса в MetalLoadBalancerPool не должны пересекаться с адресами в параметре addressPool MetalLoadBalancerClass.

Убедитесь, что в модуле запущены компоненты обоих режимов:

d8 k -n d8-metallb get pods

Проверьте, что адреса L2-сервисов не изменились:

d8 k get svc -A

Пока оба режима работают одновременно, в логах контроллеров могут появляться сообщения вида PoolStatusController ... "l2-default": the object has been modified. На передачу трафика они не влияют.

Шаг 4. Перенос сервиса с одним адресом в режим BGP LoadBalancer

Переносите сервисы по одному. Одной командой d8 k apply уберите адрес сервиса из параметра addressPool MetalLoadBalancerClass и добавьте его в параметр addresses MetalLoadBalancerPool. Адрес не должен одновременно находиться в пулах обоих режимов: в этом случае компоненты speaker не смогут применить конфигурацию из-за пересечения пулов (CIDR "192.168.2.120/32" in pool "l2-default" overlaps with already defined CIDR).

Подготовьте файл с манифестами MetalLoadBalancerClass и MetalLoadBalancerPool. Возьмите текущие параметры обоих объектов из кластера и измените только списки адресов:

d8 k get metalloadbalancerclass l2-default -o yaml
d8 k get metalloadbalancerpool mypool -o yaml

Поместите MetalLoadBalancerClass в файле первым. d8 k apply применяет манифесты в порядке их следования, поэтому адрес будет исключён из пула режима L2 LoadBalancer до того, как попадёт в MetalLoadBalancerPool.

Пример переноса адреса 192.168.2.120, который входит в диапазон 192.168.2.100-192.168.2.150. Файл migrate-192.168.2.120.yaml:

apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerClass
metadata:
  name: l2-default
spec:
  addressPool:
    - 192.168.2.100-192.168.2.119
    - 192.168.2.121-192.168.2.150
  isDefault: false
  # Сохраните текущие значения параметров.
  l2:
    interfaces:
      - eth1
  nodeSelector:
    node-role.kubernetes.io/loadbalancer: ""
  type: L2
---
apiVersion: network.deckhouse.io/v1alpha1
kind: MetalLoadBalancerPool
metadata:
  name: mypool
spec:
  addresses:
    - 192.168.219.100-192.168.219.200
    - 192.168.2.120/32

Примените оба манифеста одной командой:

d8 k apply -f migrate-192.168.2.120.yaml

Контроллер режима L2 LoadBalancer освобождает адрес, после чего контроллер режима BGP LoadBalancer назначает его сервису и начинает анонсировать по BGP. Проверьте события сервиса:

d8 k -n default describe svc web

В событиях сервиса должны последовательно появиться ClearAssignment (адрес исключён из пула режима L2 LoadBalancer), IPAllocated (адрес назначен контроллером режима BGP LoadBalancer) и nodeAssigned с protocol "bgp" (адрес анонсируется по BGP).

Убедитесь, что на маршрутизаторе появился маршрут /32 к адресу сервиса через узлы кластера, а на ARP-запросы к этому адресу узлы больше не отвечают.

Дополнительные примеры настроек для Service

После настройки балансировщика используйте аннотации Service для управления назначением и совместным использованием IP-адресов.

Создание Service с присвоением определённых IP-адресов из пула

Чтобы назначить Service определённые адреса, перечислите их в аннотации network.deckhouse.io/load-balancer-ips. Если адресов больше одного, также задайте в аннотации network.deckhouse.io/l2-load-balancer-external-ips-count количество адресов, выделяемых из пула. Значение не должно быть меньше количества адресов в network.deckhouse.io/load-balancer-ips, иначе лишние адреса не назначаются.

apiVersion: v1
kind: Service
metadata:
  name: nginx-deployment
  annotations:
    # Количество адресов, которые будут выделены из пула, объявленного в MetalLoadBalancerClass.
    network.deckhouse.io/l2-load-balancer-external-ips-count: "3"
    # Список адресов из пула, объявленного в MetalLoadBalancerClass, которые будут выделены Service.
    network.deckhouse.io/load-balancer-ips: "192.168.2.102,192.168.2.103,192.168.2.104"
spec:
  type: LoadBalancer
  # Выбирает MetalLoadBalancerClass с именем ingress.
  # Можно не указывать, если в кластере есть MetalLoadBalancerClass с isDefault: true
  # и не используется режим BGP LoadBalancer.
  loadBalancerClass: ingress
  ports:
    - port: 8000
      protocol: TCP
      targetPort: 80
  selector:
    app: nginx

В результате Service типа LoadBalancer получит указанные IP-адреса:

d8 k get svc

Пример вывода:

NAME                   TYPE           CLUSTER-IP      EXTERNAL-IP                                 PORT(S)          AGE
nginx-deployment       LoadBalancer   10.222.130.11   192.168.2.102,192.168.2.103,192.168.2.104   8000:30544/TCP   11s

Создание Service с заданным IP-адресом

Чтобы назначить Service определённый IP-адрес, добавьте аннотацию network.deckhouse.io/load-balancer-ips:

apiVersion: v1
kind: Service
metadata:
  name: nginx
  annotations:
    network.deckhouse.io/load-balancer-ips: 192.168.2.105
spec:
  loadBalancerClass: ingress
  ports:
    - port: 80
      targetPort: 80
  selector:
    app: nginx
  type: LoadBalancer

Создание Service с общим IP-адресом

Чтобы несколько Service могли использовать один IP-адрес, добавьте к каждому из них аннотацию network.deckhouse.io/load-balancer-shared-ip-key. Значение аннотации — ключ совместного использования. Несколько Service могут использовать один IP-адрес при следующих условиях:

  • У них одинаковый ключ совместного использования.
  • У них не конфликтуют сочетания протокола и порта (например, TCP/53 и UDP/53 могут использовать один IP-адрес).
  • У них задан параметр externalTrafficPolicy: Cluster, или они указывают на один и тот же набор подов (то есть у них одинаковые селекторы подов).

Даже при выполнении перечисленных условий MetalLB не гарантирует назначение общего IP-адреса. Чтобы запросить конкретный общий адрес, задайте аннотацию network.deckhouse.io/load-balancer-ips в обоих Service.

Ниже приведён пример конфигурации двух Service, совместно использующих один IP-адрес:

apiVersion: v1
kind: Service
metadata:
  name: dns-service-tcp
  namespace: default
  annotations:
    network.deckhouse.io/load-balancer-shared-ip-key: "key-to-share-1.2.3.4"
spec:
  type: LoadBalancer
  loadBalancerClass: ingress
  ports:
    - name: dnstcp
      protocol: TCP
      port: 53
      targetPort: 53
  selector:
    app: dns
---
apiVersion: v1
kind: Service
metadata:
  name: dns-service-udp
  namespace: default
  annotations:
    network.deckhouse.io/load-balancer-shared-ip-key: "key-to-share-1.2.3.4"
spec:
  type: LoadBalancer
  loadBalancerClass: ingress
  ports:
    - name: dnsudp
      protocol: UDP
      port: 53
      targetPort: 53
  selector:
    app: dns

Назначение пула IP-адресов для Service в режиме BGP LoadBalancer

В режиме BGP LoadBalancer назначьте Service пул IP-адресов с помощью аннотации network.deckhouse.io/load-balancer-pool. Для режима L2 LoadBalancer используйте настройки MetalLoadBalancerClass, как показано в примере для режима L2 LoadBalancer.

apiVersion: v1
kind: Service
metadata:
  name: nginx
  annotations:
    network.deckhouse.io/load-balancer-pool: mypool
spec:
  ports:
    - port: 80
      targetPort: 80
  selector:
    app: nginx
  type: LoadBalancer