История изменений

Добавлена поддержка Taint node.longhorn.io/member:NoSchedule в кластере Longhorn. Это позволяет администраторам запрещать размещение пользовательских Pod на узлах, входящих в кластер Longhorn, тем самым выделяя такие узлы исключительно для работы компонентов Longhorn и предотвращая запуск на них других нагрузок.

Добавлена новая конфигурация cloud-init для автоматического определения и настройки активного сетевого интерфейса на поддерживаемых ОС в zVirt и VMware.

Добавлена в Node Config Operator поддержка управления конфигурацией прокси-сервера, заданного при инициализации платформы.

Добавлена поддержка указания диапазона портов в Nova Console (новое поле - endPort) в правилах ingress CiliumNetworkPolicy.

Добавлена автоматическая валидация конфигурации Cilium перед обновлением.

Добавлена проверка файловой системы при IPI-установке кластера в nova-ctl. При нестандартной разметке дисков выводится предупреждение.

Добавлена кликабельная ссылка на URL ресурса в Nova Console в разделе Ingress

Исправлены следующие ошибки в Nova Console:

Исправлена ошибка некорректного применения конфигурации Registry через NodeConfig при использовании authConfig.

Исправлена ошибка, из-за которой в веб-интерфейсе резервного копирования нельзя было добавить дополнительный селектор меток при создании или восстановлении бэкапа.

Исправлена ошибка, из-за которой при установке кластера на ALSE 1.8.1 методом IPI не срабатывала валидация файловой системы, что приводило к сбою установки из-за нехватки места.

Обновлен Cilium CNI до версии 1.16.12.

Nova Console обновлена до версии 0.4.12

Добавлена поддержка динамического получения списка дисков из шаблона при IPI-развертывании в vSphere. nova-ctl формирует root-диск по параметрам манифеста, а остальные диски наследует из шаблона без последующего управления.

Исправлена проблема, из-за которой резервное копирование worker-узлов завершалось с ошибкой в кластере с минимальной конфигурацией

В интерфейсе Nova Console исправлен баг отображения BackupStorageLocation, когда у ресурса отсутствовал параметр Phase или Credentials.

Добавлен модуль Service Mesh на базе Istio с поддержкой Gateway API и интеграцией платформенных сервисов (см. документацию Nova Service Mesh).

Добавлена поддержка инфраструктурного провайдера K2Cloud (см. документацию Интеграция с K2Cloud).

Добавлен Node Local Gateway - локальный балансировщик трафика на каждом узле кластера, за счет которого все Ingress-контроллеры вынесены из хостового сетевого пространства (HostNetwork) и улучшена работа сетевых политик с пограничным трафиком.

Все компоненты платформы переведены на работу с Kubernetes API через Node Local Gateway для повышения доступности. Для ознакомления перейдите к документации Node Local Gateway.

Веб-консоль Nova обновлена до версии 0.4.11. Повышена стабильность и исправлены ошибки в работе плагинов мониторинга и резервного копирования.

Добавлена возможность выполнять операцию вывода узла кластера в режим обслуживания (drain node) через web-интерфейс nova-console (см. документацию Перевод узла кластера в режим обслуживания)

Агент резервного копирования nova-backup-daemon обновлен до версии v1.1.0. Добавлена поддержка резервного копирования рабочих узлов кластера.

В Ingress Nginx (internal, public) добавлены по умолчанию дополнительные заголовки безопасности:

Referrer-Policy: origin-when-cross-origin
X-Content-Type-Options: nosniff
X-Frame-Options=sameorigin
Strict-Transport-Security=max-age=31536000; includeSubDomains;

nova-ingress-public/nova-ingress-public-custom-add-headers nova-ingress-internal/nova-ingress-internal-custom-add-headers

Для сервисов Prometheus, Alertmanager, Thanos Query добавлены -default-deny Ingress-ресурсы. Данные ресурсы могут быть использованы для настройки точечных ограничений доступа в рамках каждого сервиса. По умолчанию настроено ограничение доступа к /debug/pprof.

Исправлена ошибка обновления платформы на ОС семейства RHEL в конфигурации с несколькими ресурсами, использующими PV из Longhorn.

Исправлена проблема, при которой вход в платформенные веб-интерфейсы, защищенные oauth2 proxy, был невозможен используя учетную запись метода аутентификации LDAP (Ошибка 500).

Исправлена проблема, при которой в Grafana могли не появляться отдельные дашборды с состоянием кластера Kubernetes.

Исправлена обработка значений с плавающей точкой в выводе df при вычислении свободного места, из-за которой валидация get_node_free_disk_space завершалась с ошибкой.

Исправлена логика проверки занятости портов, чтобы корректно выявлять конфликты с сервисом systemd-resolved и исключить сбои установки при включенном DNS-резолвере.

Для zVirt реализован вертикальный скейлинг без перезапуска виртуальных машин (ВМ): теперь при изменении параметров ВМ (CPU, RAM и др.) больше не происходит удаления и пересоздания машины — ресурсы изменяются на лету, без прерывания работы.

Отключен параметр memory ballooning по умолчанию при установке на zVirt.

Вышла новая версия CRD v1alpha6, в которой добавлены новые поля: memory_ballooning и guaranteed_memory. Подробнее можно ознакомиться с описанием параметров в Справочнике v1alpha5[Справочнике v1alpha6]

Обновлен terraform-провайдер ovirt, в котором исправлена ошибка при назначении дополнительных параметров (custom properties) виртулальных машин в zVirt, которая возникала из-за некорректной обработки пустых значений.

Добавлена поддержка ОС AstraLinux 1.8.1

Добавлена поддержка ОС Мос.ОС

Добавлена полноценная поддержка управления Opensearch через nova-apps-operator. Конфигурация кластеров теперь описывается через ресурс OpenSearchCluster. Также реализован механизм миграции legacy-конфигураций Opensearch в новый формат.

Добавлена возможность сбора диагностических дампов с каждого узла кластера. Сбор данных выполняется на каждом узле с помощью команды: collect-logs.

Актуализированы результаты проверки кластера Nova версии v6 на соответствие CIS Kubernetes Benchmark.

В рамках соответствия обновленной версии CIS Benchmark отключен Admission-плагин DenyServiceExternalIPs в kube-apiserver.

Теперь при наличии CNI-плагина Cilium в кластере в разделе Network Nova Console отображаются политики CiliumClusterwideNetworkPolicy и CiliumNetworkPolicy. Это позволяет управлять сетевым доступом на уровне кластера и пространств имен с помощью Cilium-политик напрямую через интерфейс консоли.

Валидация дискового пространства в nova-ctl дополнена проверкой разметки диска. Если обнаружены дополнительные разделы, отличные от /, /boot* или /recovery*, то для пользователя выводится предупреждение. Это помогает избежать ошибок при установке на нестандартную разметку и предупреждает пользователя о возможных рисках в процессе установки.

Добавлен новый компонент — Node Config Operator (NCO), предназначенный для централизованной и декларативной настройки ОС узлов кластера через CRD Kubernetes. На данный момент NCO позволяет управлять конфигурацией Containerd без необходимости ручных вмешательств.

В интерфейс Nova Console добавлен динамический плагин для управления резервным копированием. Подробности о возможностях и использовании - в документации Резервное копирование и восстановление.

Исправлена ошибка, из-за которой в Nova Console во вкладке Services всегда отображалась стандартная DNS-зона cluster.local, даже если в кластере была задана другая зона через параметр k8sDefaultDnsZone. Теперь консоль корректно отображает актуальную зону, соответствующую настройкам кластера.

Исправлена ошибка в логике podAntiAffinity в OpenSearch: при использовании HA-конфигурации все поды могли запускаться на одной infra-ноде при недостаточном количестве нод. Теперь размещение подов корректно распределяется с учетом anti-affinity правил, что повышает отказоустойчивость.

Исправлена ошибка запуска Cilium на узлах с установленным Kaspersky Endpoint Security (KESL). Порт 9879, используемый по умолчанию для health-проб Cilium, конфликтовал с компонентами Kaspersky. В рамках решения порт health-чеков был перенесен на 25655.

Исправлена проблема, из-за которой могла возникать ошибка при повторном обновлении платформы

Исправлена проблема, которая могла возникать при удалении кластера с помощью команды nova-ctl cluster destroy

Исправлена проблема, которая могла возникать при повторной установке платформы, включая случаи прерванного развертывания

Исправлена проблема, из-за которой в nova-console не отображались поля Kubernetes API и Провайдер инфраструктуры

Исправлена проблема, из-за которой могли не отправляться логи в Opensearch, если кластер Nova был установлен со значением clusterName, отличным от cluster.local

v4.x.x - на базе k8s 1.28

v5.x.x - на базе k8s 1.29

v6.x.x - на базе k8s 1.30

Обновлены следующие компоненты платформы:

Добавлены новые дашборды в OpenSearch.
Логи, которые визуализируются в OpenSearch:

Обновлен компонент csi-snapshot-contoller и была удалена составляющая snapshot-validation-deployment:

Изменена конфигурация дополнительных параметров контроллеров Ingress Nginx через ConfigMap nova-ingress-internal-controller и nova-ingress-public-controller. Ранее в версиях 4.x и 5.x ConfigMap содержали все доступные параметры в формате "snake_case". С выходом обновления параметры должны передаваться в формате "kebab-case".

В новой версии API config.nova-platform.io/v1alpha6 добавлена поддержка конфигурации типа дисков виртуальных машин (useLinkedClone) при развертывании кластера в среде zVirt.

Для компонентов Velero в модуле Data Protection добавлены недостающие метрики в системе мониторинга, правила оповещения о событиях и дашборды.

Исправлена проблема, из-за которой могла переполняться временная директория для kustomize-controller.

Исправлена проблема, при которой в кластере могло возникать событие PrometheusDuplicateTimestamps после установки модуля Neuvector.

Скорректировано правило события etcdDatabaseHighFragmentationRatio в Prometheus, в результате чего срабатывание события стало более точным.
Дефрагментация хранилища etcd по-прежнему выполняется автоматически каждый день в 00:00.

Логи StarVault теперь будут ротироваться при достижении размера 200 МБ. Ранее ротация выполнялась ежедневно не учитывая размер log-файла.

С выходом обновления агенты Velero по умолчанию не размещаются на Ingress-узлах.