Модуль extended-monitoring

Модуль extended-monitoring расширяет возможности мониторинга кластера за счёт дополнительных экспортеров Prometheus, которые позволяют выявлять потенциальные проблемы до того, как они скажутся на работе сервисов.

Возможности модуля:

• расширенный сбор метрик;
• мониторинг контейнерных образов;
• сбор событий в кластере;
• контроль сертификатов.

Подробнее с настройками и примерами использования модуля можно ознакомиться в разделе документации модуля.

Архитектура модуля

Архитектура модуля extended-monitoring на уровне 2 модели C4 и его взаимодействия с другими компонентами Deckhouse Kubernetes Platform (DKP) изображены на следующей диаграмме:

Компоненты модуля

Модуль состоит из следующих компонентов:

1. Extended-monitoring-exporter — экспортер Prometheus, собирает и экспортирует метрики по свободному месту и inode на узлах, а также по объектам с лейблом extended-monitoring.deckhouse.io/enabled="" в неймспейсе. Подробнее с настройкой extended-monitoring метрик можно ознакомиться в разделе документации модуля. В модуле также содержатся Prometheus-правила, на основе которых Prometheus создает алерты. Это позволяет быстрее обнаруживать и диагностировать инциденты.

   Состоит из следующих контейнеров:

   • extended-monitoring-exporter — основной контейнер. Является разработкой компании «Флант»;
   • kube-rbac-proxy — сайдкар-контейнер с авторизующим прокси на основе Kubernetes RBAC для организации защищенного доступа к метрикам экспортера. Является Open Source-проектом.

2. Image-availability-exporter — экспортер Prometheus, который осуществляет мониторинг контейнерных образов запущенных в кластере подов. Image-availability-exporter добавляет метрики о недоступности образов в хранилищах образов контейнеров для всех типов рабочей нагрузки (Deployments, StatefulSets, DaemonSets, CronJobs). Модуль также содержит соответствующие Prometheus-правила, на основе которых Prometheus создает алерты. Это помогает заранее узнать о возможных проблемах с запуском или обновлением подов.

   Состоит из следующих контейнеров:

   • image-availability-exporter — основной контейнер. Является разработкой компании «Флант»;
   • kube-rbac-proxy — сайдкар-контейнер, обеспечивающий авторизованный доступа к метрикам экспортера. Подробно описан выше.

3. Events-exporter — экспортер Prometheus, который собирает события Kubernetes и отображает их в виде метрик, что позволяет отслеживать динамику изменений и быстрее реагировать на инциденты.

   Состоит из следующих контейнеров:

   • events-exporter — основной контейнер. Является разработкой компании «Флант»;
   • kube-rbac-proxy — сайдкар-контейнер, обеспечивающий авторизованный доступа к метрикам экспортера. Подробно описан выше.

4. X509-certificate-exporter — экспортер Prometheus, который обеспечивает контроль сертификатов:

   • Сканирует Secret’ы кластера и генерирует метрики об истечении срока действия x509-сертификатов;
   • Модуль также содержит соответствующие Prometheus-правила, на основе которых Prometheus создает алерты. Это позволяет не пропускать критические моменты и вовремя обновлять сертификаты, избегая простоя приложений из-за просроченных сертификатов.

   Состоит из следующих контейнеров:

   • x509-certificate-exporter — основной контейнер. Является Open Source-проектом;
   • kube-rbac-proxy — сайдкар-контейнер, обеспечивающий авторизованный доступа к метрикам экспортера. Подробно описан выше.

Взаимодействия модуля

Модуль взаимодействует со следующими компонентами:

1. Kube-apiserver:

   • следит за ресурсами API Kubernetes;
   • следит за событиями в кластере (ресурсами Events);
   • сканирует Secret’ы кластера;
   • выполняет авторизацию запросов на метрики.

2. Хранилище образов — проверяет доступность образов.

С модулем взаимодействуют следующие внешние компоненты:

1. Prometheus-main — собирает метрики с экспортеров модуля.

Дополнительные ресурсы

• Документация модуля extended-monitoring