Кластерная архитектура

Кластерная архитектура

Архитектурные концепции, лежащие в основе Kubernetes.

Кластер Kubernetes состоит из управляющего слоя и набора рабочих машин, называемых узлами, на которых запускаются контейнеризованные приложения. Для запуска подов в каждом кластере необходим хотя бы один рабочий узел.

На рабочих узлах размещаются поды, которые составляют рабочую нагрузку приложения. Управляющий слой управляет рабочими узлами и подами в кластере. В производственной среде управляющий слой обычно работает на нескольких компьютерах, а кластер обычно включает несколько узлов, что обеспечивает отказоустойчивость и высокую доступность.

На этой странице описываются различные компоненты, необходимые для полноценной работы кластера Kubernetes.

Управляющий слой (kube-apiserver, etcd, kube-controller-manager, kube-scheduler) и несколько узлов. На каждом узле работают kubelet и kube-proxy.

Рисунок 1. Компоненты кластера Kubernetes.

Об этой архитектуре

На рисунке 1 представлен пример типовой архитектуры кластера Kubernetes. Фактическое распределение компонентов может различаться в зависимости от конфигурации кластера и требований к нему.

На схеме на каждом узле работает компонент kube-proxy. На каждом узле необходим компонент сетевого прокси, чтобы API Service и связанные с ним функции были доступны в сети кластера. Однако некоторые сетевые плагины предоставляют собственную стороннюю реализацию проксирования. При использовании такого сетевого плагина запускать kube-proxy на узле не требуется.

Компоненты управляющего слоя

Компоненты управляющего слоя принимают решения, касающиеся всего кластера (например, о планировании), а также обнаруживают события в кластере и реагируют на них (например, запускают новый под, когда число реплик не соответствует значению поля replicas объекта Deployment).

Компоненты управляющего слоя могут работать на любой машине в кластере. Однако для простоты скрипты установки обычно запускают все компоненты управляющего слоя на одной машине и не запускают на ней пользовательские контейнеры. Пример настройки управляющего слоя, работающего на нескольких машинах, приведён в разделе Создание высокодоступных кластеров с помощью kubeadm.

kube-apiserver

API-сервер — компонент управляющего слоя Kubernetes, который делает доступным Kubernetes API. API-сервер — это фронтенд управляющего слоя Kubernetes.

Основной реализацией API-сервера Kubernetes является kube-apiserver. kube-apiserver предназначен для горизонтального масштабирования, то есть он масштабируется при развёртывании на множество инстансов. Вы можете запускать несколько экземпляров kube-apiserver и балансировать трафик между ними.

etcd

Консистентное и высокодоступное хранилище данных в формате «ключ-значение», которое используется как основное хранилище всех данных кластера Kubernetes.

Если ваш кластер Kubernetes использует etcd в качестве основного хранилища, убедитесь, что у вас настроено резервное копирование данных.

Вы можете найти подробную информацию о etcd в официальной документации.

kube-scheduler

Компонент управляющего слоя (control plane), который отслеживает недавно созданные поды без назначенного для них узла и выбирает узел, на котором они должны работать.

При планировании учитывается множество факторов, включая индивидуальные и общие требования к ресурсам, ограничения по железу/программному обеспечению/политикам, конфигурацию принадлежности (affinity) и непринадлежности (anti-affinity) узлов/подов, местонахождение данных, взаимодействие между рабочими нагрузками и дедлайны.

kube-controller-manager

Компонент управляющего слоя, который запускает процессы контроллера.

С логической точки зрения каждый контроллер представляет собой отдельный процесс. Но для упрощения все они скомпилированы в один бинарный файл и выполняются в одном процессе.

Существует множество типов контроллеров. Вот некоторые примеры:

  • Контроллер узла: обнаруживает отказы узлов и реагирует на них.
  • Контроллер заданий: отслеживает объекты Job, представляющие разовые задачи, и создаёт поды для выполнения этих задач до завершения.
  • Контроллер EndpointSlice: заполняет объекты EndpointSlice, обеспечивая связь между сервисами и подами.
  • Контроллер ServiceAccount: создаёт учётные записи ServiceAccount по умолчанию для новых пространств имён.

Это не исчерпывающий список.

cloud-controller-manager

Диспетчер облачных контроллеров (Cloud Controller Manager, CCM) — компонент управляющего слоя Kubernetes, встраивающий специфику облака в логику управления. Он позволяет связать кластер с API поставщика облачных услуг и отделить компоненты, взаимодействующие с этой облачной платформой, от компонентов, взаимодействующих только с вашим кластером.

Компонент cloud-controller-manager запускает только контроллеры, специфичные для вашего облачного провайдера. Если вы запускаете Kubernetes в собственной инфраструктуре или в учебной среде на своём компьютере, в кластере нет этого компонента.

Как и kube-controller-manager, компонент cloud-controller-manager объединяет несколько логически независимых контуров управления в один исполняемый файл, который запускается как один процесс. Его можно масштабировать горизонтально (запускать несколько копий), чтобы повысить производительность или устойчивость к сбоям.

Следующие контроллеры могут зависеть от облачного провайдера:

  • Контроллер узла: проверяет у облачного провайдера, был ли узел удалён из облака после того, как перестал отвечать.
  • Контроллер маршрута: настраивает маршруты в нижележащей облачной инфраструктуре.
  • Контроллер сервисов: создаёт, обновляет и удаляет балансировщики нагрузки облачного провайдера.

Компоненты узла

Компоненты узла работают на каждом узле, поддерживая работу подов и обеспечивая среду выполнения Kubernetes.

kubelet

Агент, работающий на каждом узле в кластере. Он следит за тем, чтобы контейнеры были запущены в поде.

Kubelet принимает набор PodSpecs, которые определяются разными способами и гарантируют работоспособность и исправность определённых в них контейнеров. Kubelet не отвечает за контейнеры, не созданные Kubernetes.

kube-proxy (необязательный компонент)

kube-proxy — сетевой прокси, работающий на каждом узле в кластере и реализующий часть концепции сервиса Kubernetes.

kube-proxy поддерживает сетевые правила на узлах. Эти правила разрешают сетевое взаимодействие с вашимии подами из сетевых сессий внутри и снаружи кластера.

kube-proxy использует уровень фильтрации пакетов операционной системы, если он доступен. В ином случае kube-proxy сам перенаправляет трафик.

Если вы используете сетевой плагин, который самостоятельно пересылает пакеты для сервисов и реализует поведение, аналогичное kube-proxy, то запускать kube-proxy на узлах кластера не требуется.

Среда выполнения контейнера

Фундаментальный компонент, который позволяет Kubernetes эффективно запускать контейнеры. Он отвечает за управление исполнением и жизненным циклом контейнеров в рамках Kubernetes.

Kubernetes поддерживает различные среды для запуска контейнеров: containerd, CRI-O и любые реализации Kubernetes CRI (Container Runtime Interface).

Дополнения

Дополнения используют ресурсы Kubernetes (DaemonSet, Деплоймент (Deployment) и другие) для реализации функций кластера. Поскольку эти функции действуют на уровне кластера, ресурсы дополнений, ограниченные пространством имён, размещаются в пространстве имён kube-system.

Ниже описаны некоторые дополнения; более широкий список доступных дополнений приведён в разделе Дополнения.

DNS

Хотя остальные дополнения не являются строго обязательными, во всех кластерах Kubernetes должен быть кластерный DNS, поскольку многие примеры зависят от него.

Кластерный DNS — это DNS-сервер, работающий в дополнение к другим DNS-серверам в вашей среде и обслуживающий DNS-записи для сервисов Kubernetes.

Контейнеры, запускаемые Kubernetes, автоматически используют этот DNS-сервер для поиска DNS-записей.

Веб-интерфейс (Dashboard)

Dashboard — это универсальный веб-интерфейс для кластеров Kubernetes. Он позволяет пользователям управлять приложениями, работающими в кластере, и самим кластером, а также устранять возникающие в них неполадки.

Мониторинг ресурсов контейнера

Мониторинг ресурсов контейнера сохраняет общие метрики контейнеров в виде временных рядов в централизованной базе данных и предоставляет интерфейс для их просмотра.

Логирование кластера

Механизм логирования кластера отвечает за сохранение логов контейнеров в централизованном хранилище с интерфейсом поиска и просмотра.

Сетевые плагины

Сетевые плагины — это программные компоненты, реализующие спецификацию сетевого интерфейса контейнеров (CNI). Они отвечают за выделение IP-адресов подам и обеспечивают их взаимодействие друг с другом в пределах кластера.

Варианты архитектуры

Хотя основные компоненты Kubernetes остаются неизменными, способы их развёртывания и управления ими могут различаться. Понимание этих различий необходимо для проектирования и сопровождения кластеров Kubernetes, отвечающих конкретным эксплуатационным требованиям.

Варианты развёртывания управляющего слоя

Компоненты управляющего слоя можно развернуть несколькими способами:

Традиционное развёртывание
Компоненты управляющего слоя работают непосредственно на выделенных физических или виртуальных машинах, часто в виде служб systemd.
Статические поды
Компоненты управляющего слоя развёртываются как статические поды, которыми управляет kubelet на определённых узлах. Это распространённый подход, используемый такими инструментами, как kubeadm.
Размещение внутри самого кластера
Управляющий слой работает в виде подов внутри самого кластера Kubernetes под управлением Deployment, StatefulSet или других примитивов Kubernetes.
Управляемые сервисы Kubernetes
Облачные провайдеры часто скрывают детали работы управляющего слоя, управляя его компонентами в рамках предоставляемого сервиса.

Особенности размещения рабочих нагрузок

Размещение рабочих нагрузок, включая компоненты управляющего слоя, может различаться в зависимости от размера кластера, требований к производительности и правил эксплуатации:

  • В небольших кластерах или кластерах для разработки компоненты управляющего слоя и пользовательские рабочие нагрузки могут работать на одних и тех же узлах.
  • В крупных производственных кластерах для компонентов управляющего слоя часто выделяют отдельные узлы, отделяя их от пользовательских рабочих нагрузок.
  • Некоторые организации запускают критически важные дополнения или инструменты мониторинга на узлах управляющего слоя.

Инструменты управления кластером

Такие инструменты, как kubeadm, kops и Kubespray, предлагают разные подходы к развёртыванию кластеров и управлению ими. Каждый из них использует свой способ размещения компонентов и управления ими.

Настройка и расширяемость

Архитектура Kubernetes предоставляет широкие возможности настройки:

  • Кастомные планировщики можно развернуть вместе со стандартным планировщиком Kubernetes или полностью заменить его.
  • Серверы API можно расширять с помощью CustomResourceDefinitions и агрегации API.
  • Облачные провайдеры могут тесно интегрироваться с Kubernetes с помощью cloud-controller-manager.

Гибкость архитектуры Kubernetes позволяет организациям адаптировать кластеры к своим потребностям, находя баланс между сложностью эксплуатации, производительностью и затратами на управление.

Что дальше

Узнайте больше о следующем:

Изменено September 23, 2026 at 8:58 PM PST: [ru] Update cluster architecture documentation (08ff7a893a)