Deckhouse Kubernetes Platform на OpenStack

Введите лицензионный ключ

Ввести

Ниже сгенерированы рекомендованные настройки для установки Deckhouse Kubernetes Platform Enterprise Edition:

  • config.yml — файл первичной конфигурации кластера. Содержит параметры инсталлятора, параметры доступа облачного провайдера, описание ресурсов для создания после установки, и начальные параметры кластера.

Обратите внимание:

  • Так выделены параметры, обязательные для самостоятельного заполнения.
  • Так выделены параметры, которые вы возможно захотите изменить.
  • Если вы запускаете инсталлятор под Windows, то убедитесь, что кодировка создаваемого YAML-файла конфигурации UTF-8 (либо удалите примечания на русском языке).

Создайте файл config.yml.

1# Общие параметры кластера.
2# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/installing/configuration.html#clusterconfiguration
3apiVersion: deckhouse.io/v1
4kind: ClusterConfiguration
5clusterType: Cloud
6cloud:
7  provider: OpenStack
8  # Префикс объектов, создаваемых в облаке при установке.
9  # Возможно, захотите изменить.
10  prefix: cloud-demo
11# Адресное пространство Pod’ов кластера.
12podSubnetCIDR: 10.111.0.0/16
13# Адресное пространство для service’ов кластера.
14serviceSubnetCIDR: 10.222.0.0/16
15kubernetesVersion: "Automatic"
16clusterDomain: "cluster.local"
17---
18# Настройки первичной инициализации кластера Deckhouse.
19# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/installing/configuration.html#initconfiguration
20apiVersion: deckhouse.io/v1
21kind: InitConfiguration
22deckhouse:
23  imagesRepo: registry.deckhouse.ru/deckhouse/ee
24  # Строка с ключом для доступа к Docker registry (сгенерировано автоматически для вашего токена доступа).
25  registryDockerCfg: <YOUR_ACCESS_STRING_IS_HERE>
26---
27# Настройки модуля deckhouse.
28# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/deckhouse/configuration.html
29apiVersion: deckhouse.io/v1alpha1
30kind: ModuleConfig
31metadata:
32  name: deckhouse
33spec:
34  version: 1
35  enabled: true
36  settings:
37    bundle: Default
38    releaseChannel: Stable
39    logLevel: Info
40---
41# Глобальные настройки Deckhouse.
42# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/deckhouse-configure-global.html#%D0%BF%D0%B0%D1%80%D0%B0%D0%BC%D0%B5%D1%82%D1%80%D1%8B
43apiVersion: deckhouse.io/v1alpha1
44kind: ModuleConfig
45metadata:
46  name: global
47spec:
48  version: 2
49  settings:
50    modules:
51      # Шаблон, который будет использоваться для составления адресов системных приложений в кластере.
52      # Например, Grafana для %s.example.com будет доступна на домене 'grafana.example.com'.
53      # Домен НЕ ДОЛЖЕН совпадать с указанным в параметре clusterDomain ресурса ClusterConfiguration.
54      # Можете изменить на свой сразу, либо следовать шагам руководства и сменить его после установки.
55      publicDomainTemplate: "%s.example.com"
56---
57# Настройки модуля user-authn.
58# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/user-authn/configuration.html
59apiVersion: deckhouse.io/v1alpha1
60kind: ModuleConfig
61metadata:
62  name: user-authn
63spec:
64  version: 2
65  enabled: true
66  settings:
67    controlPlaneConfigurator:
68      dexCAMode: DoNotNeed
69    # Включение доступа к API-серверу Kubernetes через Ingress.
70    # https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/user-authn/configuration.html#parameters-publishapi
71    publishAPI:
72      enabled: true
73      https:
74        mode: Global
75        global:
76          kubeconfigGeneratorMasterCA: ""
77---
78# Настройки облачного провайдера.
79# https://deckhouse.io/products/kubernetes-platform/documentation/v1/modules/cloud-provider-openstack/cluster_configuration.html
80apiVersion: deckhouse.io/v1
81kind: OpenStackClusterConfiguration
82layout: Standard
83standard:
84  # Имя сети для внешнего взаимодействия.
85  externalNetworkName: *!CHANGE_EXT_NET*
86  # Адресация для внутренней сети узлов кластера.
87  internalNetworkCIDR: 192.168.198.0/24
88  # Список адресов рекурсивных DNS внутренней сети.
89  # Возможно, захотите изменить.
90  internalNetworkDNSServers:
91    - 8.8.8.8
92    - 8.8.4.4
93  # Флаг, который определяет необходимо ли настраивать SecurityGroups и AllowedAddressPairs на портах внутренней сети.
94  internalNetworkSecurity: true
95# параметры доступа к OpenStack API
96provider:
97  authURL: *!CHANGE_API_URL*
98  # Возможно, захотите изменить.
99  domainName: users
100  # Переменная OS_USER_DOMAIN_NAME из файла openrc.
101  password: *!CHANGE_PASSWORD*
102  # Возможно, захотите изменить.
103  region: RegionOne
104  # Возможно вам нужно указать tenantName вместо tenantID.
105  # https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/cloud-provider-openstack/cluster_configuration.html#openstackclusterconfiguration-provider-tenantname
106  # tenantName: PROJECT_NAME
107  tenantID: *!CHANGE_PROJECT_ID*
108  username: *!CHANGE_USERNAME*
109masterNodeGroup:
110  replicas: 1
111  # Массив используемых типов дисков.
112  volumeTypeMap:
113    # <availability zone>: <volume type>
114    # Возможно, захотите изменить.
115    DP1: dp1-high-iops
116  instanceClass:
117    # Используемый flavor.
118    # Возможно, захотите изменить.
119    flavorName: Standard-2-8-50
120    # Используемый образ виртуальной машины.
121    # Возможно, захотите изменить.
122    imageName: ubuntu-22-04-cloud-amd64
123    # Размер диска для корневой ФС.
124    rootDiskSize: 40
125# Публичная часть SSH-ключа для доступа к узлам облака.
126# Этот ключ будет добавлен пользователю на созданных узлах (имя пользователя зависит от используемого образа).
127sshPublicKey: *!CHANGE_SSH_KEY*
128---
129# Секция, описывающая параметры инстанс-класса для узлов c компонентами, обеспечивающими рабочую нагрузку.
130# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/cloud-provider-openstack/cr.html
131apiVersion: deckhouse.io/v1
132kind: OpenStackInstanceClass
133metadata:
134  name: worker
135spec:
136  # Используемый flavor для данного инстанс-класса.
137  # Возможно, захотите изменить.
138  flavorName: Standard-2-4-50
139  rootDiskSize: 30
140  # Используемый образ виртуальной машины.
141  # Возможно, захотите изменить.
142  imageName: ubuntu-22-04-cloud-amd64
143---
144# Секция, описывающая параметры группы узлов c компонентами, обеспечивающими рабочую нагрузку.
145# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/node-manager/cr.html#nodegroup
146apiVersion: deckhouse.io/v1
147kind: NodeGroup
148metadata:
149  name: worker
150spec:
151  cloudInstances:
152    classReference:
153      kind: OpenStackInstanceClass
154      name: worker
155    # Максимальное количество инстансов в каждой зоне (используется при масштабировании).
156    # Возможно, захотите изменить.
157    maxPerZone: 1
158    # Минимальное количество инстансов в каждой зоне. Чтобы запустить больше узлов, увеличьте maxPerZone или добавьте зоны.
159    minPerZone: 1
160    # Список зон, в которых создаются инстансы.
161    # Возможно, захотите изменить.
162    zones:
163    - DP1
164  disruptions:
165    approvalMode: Automatic
166  nodeType: CloudEphemeral
167---
168# Секция, описывающая параметры NGINX Ingress controller.
169# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/ingress-nginx/cr.html
170apiVersion: deckhouse.io/v1
171kind: IngressNginxController
172metadata:
173  name: nginx
174spec:
175  ingressClass: nginx
176  inlet: LoadBalancer
177  # Описывает, на каких узлах будет находиться Ingress-контроллер. Лейбл node.deckhouse.io/group: <NODE_GROUP_NAME> устанавливается автоматически.
178  nodeSelector:
179    node.deckhouse.io/group: worker
180---
181# Настройки RBAC и авторизации.
182# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/user-authz/cr.html#clusterauthorizationrule
183apiVersion: deckhouse.io/v1
184kind: ClusterAuthorizationRule
185metadata:
186  name: admin
187spec:
188  subjects:
189  - kind: User
190    name: admin@deckhouse.io
191  accessLevel: SuperAdmin
192  portForwarding: true
193---
194# Данные статического пользователя.
195# https://deckhouse.ru/products/kubernetes-platform/documentation/v1/modules/user-authn/cr.html#user
196apiVersion: deckhouse.io/v1
197kind: User
198metadata:
199  name: admin
200spec:
201  # E-mail пользователя.
202  email: admin@deckhouse.io
203  # Это хэш пароля ox8bjjvr78, сгенерированного при загрузке страницы "Быстрого Старта".
204  # Сгенерируйте свой или используйте этот, но только для тестирования
205  # echo "ox8bjjvr78" | htpasswd -BinC 10 "" | cut -d: -f2 | base64 -w0
206  # Возможно, захотите изменить.
207  password: 'JDJhJDEwJHU4dzBKdzczQWlDLmNhWnR5WE1HU2VxajFnRHJNQzFtRHFTSVNwcGZGR3ZBdHZZOHpHUmFT'

Для установки Deckhouse Kubernetes Platform используется образ контейнера, в который необходимо передать конфигурационные файлы и SSH-ключи доступа на master-узел (далее подразумевается что используется SSH-ключ ~/.ssh/id_rsa пользователя персонального компьютера, с которого выполняется установка).

Запустите установщик на персональном компьютере.

Linux / macOS Windows

Авторизуйтесь на персональном компьютере в container image registry:

1echo <LICENSE_TOKEN> | docker login -u license-token --password-stdin registry.deckhouse.ru

Запустите контейнер с установщиком:

1docker run --pull=always -it -v "$PWD/config.yml:/config.yml" -v "$HOME/.ssh/:/tmp/.ssh/" registry.deckhouse.ru/deckhouse/se-plus/install:stable bash

Авторизуйтесь на персональном компьютере в container image registry, введя лицензионный ключ на запрос пароля:

1docker login -u license-token registry.deckhouse.ru

Запустите контейнер с установщиком:

1docker run --pull=always -it -v "%cd%\config.yml:/config.yml" -v "%userprofile%\.ssh\:/tmp/.ssh/" registry.deckhouse.ru/deckhouse/se-plus/install:stable bash -c "chmod 400 /tmp/.ssh/id_rsa; bash"

Внутри контейнера выполните команду:

1dhctl bootstrap --ssh-user=ubuntu --ssh-agent-private-keys=/tmp/.ssh/id_rsa --config=/config.yml

В параметре --ssh-user укажите имя пользователя по умолчанию для выбранного образа виртуальной машины. Для предложенного в руководстве образа это ubuntu.

Если установка была прервана...

Если установка была прервана (не хватило квот, ошибки сети и т.п.), вы можете ее перезапустить. Установка корректно продолжится, никакие дублирующие ресурсы в облаке созданы не будут.

Если установка не может быть продолжена и вам нужно удалить созданные в облаке ресурсы, выполните следующую команду:

1dhctl bootstrap-phase abort --ssh-user=ubuntu --ssh-agent-private-keys=/tmp/.ssh/id_rsa --config=/config.yml

Процесс установки может занять от 5 до 30 минут, в зависимости от качества соединения.

По окончании установки инсталлятор выведет IP-адрес master-узла (он вам потребуется далее). Пример вывода:

1...
2┌ 🎈 ~ Common: Kubernetes Master Node addresses for SSH
3│ cloud-demo-master-0 | ssh ubuntu@1.2.3.4
4└ 🎈 ~ Common: Kubernetes Master Node addresses for SSH (0.00 seconds)

Почти все готово для полноценной работы Deckhouse Kubernetes Platform!

Для установки Deckhouse Kubernetes Platform используется образ контейнера, в который необходимо передать конфигурационные файлы и SSH-ключи доступа на master-узел (далее подразумевается что используется SSH-ключ ~/.ssh/id_rsa пользователя персонального компьютера, с которого выполняется установка).

Запустите установщик на персональном компьютере.

Linux / macOS Windows

Авторизуйтесь на персональном компьютере в container image registry:

1echo <LICENSE_TOKEN> | docker login -u license-token --password-stdin registry.deckhouse.ru

Запустите контейнер с установщиком:

1docker run --pull=always -it -v "$PWD/config.yml:/config.yml" -v "$HOME/.ssh/:/tmp/.ssh/" registry.deckhouse.ru/deckhouse/ee/install:stable bash

Авторизуйтесь на персональном компьютере в container image registry, введя лицензионный ключ на запрос пароля:

1docker login -u license-token registry.deckhouse.ru

Запустите контейнер с установщиком:

1docker run --pull=always -it -v "%cd%\config.yml:/config.yml" -v "%userprofile%\.ssh\:/tmp/.ssh/" registry.deckhouse.ru/deckhouse/ee/install:stable bash -c "chmod 400 /tmp/.ssh/id_rsa; bash"

Внутри контейнера выполните команду:

1dhctl bootstrap --ssh-user=ubuntu --ssh-agent-private-keys=/tmp/.ssh/id_rsa --config=/config.yml

В параметре --ssh-user укажите имя пользователя по умолчанию для выбранного образа виртуальной машины. Для предложенного в руководстве образа это ubuntu.

Если установка была прервана...

Если установка была прервана (не хватило квот, ошибки сети и т.п.), вы можете ее перезапустить. Установка корректно продолжится, никакие дублирующие ресурсы в облаке созданы не будут.

Если установка не может быть продолжена и вам нужно удалить созданные в облаке ресурсы, выполните следующую команду:

1dhctl bootstrap-phase abort --ssh-user=ubuntu --ssh-agent-private-keys=/tmp/.ssh/id_rsa --config=/config.yml

Процесс установки может занять от 5 до 30 минут, в зависимости от качества соединения.

По окончании установки инсталлятор выведет IP-адрес master-узла (он вам потребуется далее). Пример вывода:

1...
2┌ 🎈 ~ Common: Kubernetes Master Node addresses for SSH
3│ cloud-demo-master-0 | ssh ubuntu@1.2.3.4
4└ 🎈 ~ Common: Kubernetes Master Node addresses for SSH (0.00 seconds)

Почти все готово для полноценной работы Deckhouse Kubernetes Platform!