AI-Ops Documentation

Русский English
  • Главная
  • Карта документации
0. С чего начать
  • Что это за продукт
  • Для кого он
  • Как устроена документация
  • Быстрые ссылки
  • Как начать разработку
  • Как найти нужный сервис
  • К кому идти по вопросам
1. Продукт
Обзор продукта
  • Миссия продукта
  • Ценность для бизнеса
  • Основные сценарии
  • Границы системы
Пользователи и персоны
  • Сегменты пользователей
  • Роли пользователей
  • Основные потребности
Пользовательские сценарии
  • Регистрация / логин
  • Основной пользовательский сценарий
  • Оплата / заказ / действие
  • Поддержка и сценарий восстановления
Функции продукта
Фича: Аутентификация
  • Цель
  • Пользовательская история
  • Бизнес-правила
  • Ограничения
  • Метрики успеха
  • Связанные сервисы
  • Связанные события / данные
  • Фича: Профиль
  • Фича: Организации
  • Фича: Топология
  • Фича: Вычислительные ресурсы
  • Фича: Кластеры
  • Фича: Каталог сервисов
Требования
  • Функциональные требования
  • Нефункциональные требования
  • Требования к производительности
  • Требования к безопасности
  • Конфиденциальность и соответствие
  • Доступность
Метрики
  • Ключевая метрика (North Star)
  • Продуктовые KPI
  • Метрики воронки
  • Метрики качества
  • Метрики экспериментов
2. Домены
Домен: Identity
  • Назначение
  • Основные концепции
  • Сущности
  • Бизнес-правила
  • Сервисы домена
  • Данные домена
  • Связанные фичи
  • Домен: Профиль пользователя
  • Домен: Поиск
  • Домен: Заказы / транзакции
  • Домен: Уведомления
  • Домен: Аналитика
  • Домен: Рекомендации
3. Архитектура
Обзор системы
  • Что входит в систему
  • Что не входит
  • Высокоуровневая диаграмма
C4 Model
  • Контекстная диаграмма
  • Диаграмма контейнеров
  • Диаграмма компонентов
  • Диаграмма развёртывания
Интеграционная архитектура
  • Внешние системы
  • Интеграции API
  • Webhooks
  • Сторонние провайдеры
Потоки данных
  • Онлайн-поток данных
  • Пакетный поток данных
  • Поток событий
  • Владение данными
Архитектура безопасности
  • Аутентификация
  • Авторизация
  • Управление секретами
  • Шифрование
  • Аудит и логирование
Надежность и масштабируемость
  • SLA / SLO
  • Планирование мощностей
  • Отказоустойчивость
  • Обратное давление и повторы
  • Восстановление после сбоев
Архитектурные принципы
  • Границы доменов
  • Принципы проектирования API
  • Принципы проектирования событий
  • Принципы контрактов данных
  • Диаграмма: auth микросервисы
Control plane
  • Архитектура компонентов (control plane)
  • Доменная модель v0
  • Протокол v0 (control plane)
  • Примеры (control plane)
Сервисы (control plane)
Сервис control plane
  • API
  • Модель данных
  • События
  • Модули
  • Операции
Сервис execution plane
  • API
  • Модель данных
  • События
  • Модули
  • Операции
Сервис resource catalog
  • API
  • Модель данных
  • События
  • Модули
  • Операции
4. Инженерия
Сервисы
Каталог сервисов
  • Все сервисы списком
  • Владельцы
  • Критичность
  • Уровень / домен / статус
  • Сервис аутентификации
  • Сервис аккаунтов
  • Облачный сервис
  • Сервис учётных данных
  • Herald
  • Сервис идентификации
  • API Gateway
  • Сервис токенов
Фронтенд
  • Обзор фронтенда
  • Структура приложения
  • Routing (фронтенд)
  • State management (фронтенд)
  • Design system (фронтенд)
  • UI components (фронтенд)
  • API контракты фронтенда
  • Обработка ошибок (фронтенд)
  • Performance (фронтенд)
  • Feature flags (фронтенд)
  • Тестирование фронтенда
Бэкенд
  • Обзор бэкенда
  • Паттерны сервисов
  • Рекомендации по API
  • Событийные паттерны
  • Паттерны доступа к БД
  • Кэширование
  • Асинхронные задачи и воркеры
  • Идемпотентность
  • Обработка ошибок
  • Тестирование бэкенда
Данные
  • Обзор данных
  • Системы-источники
  • Контракты данных
  • Каталог схем событий
  • Хранилище данных
  • Витрины данных
  • ETL / ELT-пайплайны
  • Качество данных
  • Происхождение данных
  • Политики хранения
  • Политики доступа
ML / DS
  • Обзор ML/DS
  • Сценарии (ML)
  • Каталог моделей
  • Feature store
  • Training pipelines
  • Inference pipelines
  • Offline evaluation
  • Online evaluation / A-B
  • Мониторинг (ML)
  • ML runbooks
QA / Качество
  • Стратегия качества
  • Пирамида тестов
  • Тестовые окружения
  • Тестовые данные
  • Ручное тестирование
  • Автоматизированное тестирование
  • Нагрузочное тестирование
  • Тестирование безопасности
  • Критерии приёмки релиза
  • Процесс разбора багов
5. Платформа
Инфраструктура
  • Ansible
  • WireGuard
  • Kubernetes
  • Longhorn
  • Ingress
  • PostgreSQL Cluster
  • Redis
  • Kafka
  • Vault
  • MinIO
  • Authentik
  • Monitoring
  • Logging
  • Tracing
  • Nexus
  • SonarQube
  • GlitchTip
  • GitLab Runner
  • Kubernetes Dashboard
  • OLM
  • Deploy
  • Internal DNS
  • Обзор (инфраструктура)
  • Config generator
  • Пример (инфраструктура)
  • Скрипты (инфраструктура)
Окружения
  • Локальное
  • Stage
  • Pre
  • Продакшен (prod)
  • Tech
  • Облако
  • Объектное хранилище
  • CI/CD
  • Секреты и сертификаты
Наблюдаемость
  • Логирование
  • Метрики
  • Трейсинг
  • Алертинг
  • Резервное копирование и восстановление
6. Разработка
  • Быстрый старт
  • Локальная настройка
  • Карта репозиториев
  • Стандарты кода
  • Git-процесс
  • Стратегия ветвления
  • Руководство по код-ревью
  • Критерии готовности
  • Процесс релиза
  • Флаги фич
  • FAQ разработчика
  • Миграция secure auth
7. Эксплуатация
  • Дежурство
  • Управление инцидентами
  • Уровни критичности
  • Политика эскалации
  • Постмортемы
  • Ранбуки
  • Управление изменениями
  • Непрерывность бизнеса
8. Аналитика
  • План трекинга событий
  • Определения KPI
  • Каталог дашбордов
  • Словарь метрик
  • Эксперименты
  • Стандарты отчётности
9. Управление
  • Решения (ADR)
  • Политика статуса контента
  • Changelog обновлений документации
Безопасность и соответствие
  • Модель угроз
  • Безопасная разработка
  • Управление доступом
  • Конфиденциальность
  • Реагирование на инциденты
Ответственность и владельцы
  • Команды
  • Зоны ответственности команд
  • Владельцы сервисов
  • Владельцы доменов
  • Контакты
Глоссарий
  • Бизнес-термины
  • Продуктовые термины
  • Технические термины
  • Сокращения

Обзор

Previous Next

execution-plane-service - источник истины по execution attempts, runner leases, runner status и ссылкам на raw output. Сервис безопасно выполняет side effects по контракту JobSpec, но не решает бизнес-статус операции и не владеет планами.

Место в Control Plane

flowchart LR CP[control-plane-service] -->|JobSpec| EPS[execution-plane-service] EPS -->|ExecutionResult| CP EPS -->|raw logs and outputs| S3[(S3 / MinIO)] EPS -->|secret material by ref| Vault[(Vault)] EPS -->|target actions| Targets[Clusters / Nodes / Kubernetes / Clouds] EPS -->|execution events| Kafka[(Kafka)]

control-plane-service выбирает, какую работу выполнить и как трактовать результат. execution-plane-service отвечает за то, чтобы попытка выполнения была изолированной, наблюдаемой, отменяемой и воспроизводимо описанной через артефакты.

Ответственность

  • Принимать JobSpec от control-plane-service.
  • Создавать execution attempt и назначать подходящий runner.
  • Выдавать lease runner-у и отслеживать heartbeat.
  • Запускать approved runner implementation: Ansible, Kubernetes, Helm, OpenTofu, SSH или verification.
  • Получать секреты только через Vault references.
  • Сохранять raw logs, stdout/stderr, reports и generated outputs в S3/MinIO.
  • Возвращать ExecutionResult с output refs, artifact refs и evidence refs.
  • Публиковать execution events для projections, audit и troubleshooting.

Не Ответственность

  • Не хранит scenarios, plans, operations и gates.
  • Не определяет, успешна ли бизнес-операция целиком.
  • Не применяет PlanPatch.
  • Не хранит secret values в своей базе.
  • Не исполняет произвольный shell без явно разрешенного runner contract.
  • Не обновляет resource catalog напрямую по бизнес-смыслу операции.

Модули

  • dispatcher - принимает jobs, создает attempts, выбирает runner и управляет очередью.
  • ansible-runner - выполняет Ansible playbooks из approved scenario package.
  • kubernetes-runner - применяет Kubernetes manifests, server-side apply и kubectl-like операции.
  • helm-runner - выполняет Helm install/upgrade/test/uninstall по ограниченному контракту.
  • opentofu-runner - выполняет IaC plan/apply/destroy по approved modules.
  • ssh-runner - выполняет ограниченные remote commands на нодах.
  • verification-runner - проверяет output contracts и собирает evidence.
  • artifact-worker - нормализует raw output, пишет bundles в S3/MinIO и регистрирует refs.

Подробно модули описаны в modules.ru.md.

Основной Поток

sequenceDiagram participant CP as control-plane-service participant D as dispatcher participant R as runner participant V as Vault participant A as S3/MinIO participant K as Kafka CP->>D: executeJob(JobSpec) D->>D: create execution_attempt D->>R: lease attempt R->>V: resolve secret refs R->>R: run approved executor R->>A: write logs and outputs R->>D: complete attempt D->>K: execution.attempt.succeeded/failed D->>CP: ExecutionResult

Source of Truth

PostgreSQL сервиса хранит только execution-domain state:

  • execution attempts;
  • runner leases;
  • runner heartbeats;
  • runner statuses;
  • raw log refs;
  • output refs;
  • artifact refs;
  • callback delivery state.

Temporal, если участвует в orchestration со стороны control-plane-service, не является источником истины для attempts. Kafka не является execution queue source of truth.

Инварианты

  • Каждый запуск имеет immutable attempt_id.
  • Повторный запуск той же node run создает новый attempt, а не перезаписывает старый.
  • Runner получает secret values только во время выполнения и не пишет их в логи, БД или артефакты.
  • Любой результат должен ссылаться на raw output bundle, даже если job failed before producing business output.
  • ExecutionResult.status=succeeded означает, что runner завершил техническое выполнение, но бизнес-успех подтверждается evidence_refs и трактуется control-plane-service.
  • Cancellation best-effort: сервис обязан остановить runner, пометить attempt и сохранить partial artifacts.
  • Lost heartbeat не равен business failure, это execution failure category.

Документы

  • modules.ru.md - модули и runner responsibilities.
  • data-model.ru.md - execution attempts, leases, statuses, log refs и output refs.
  • api.ru.md - internal API и callback contracts.
  • events.ru.md - события attempts и artifacts.
  • operations.ru.md - operational behavior, isolation, cancellation, retries и observability.
Операции API
Меню
Главная Карта документации
0. С чего начать
С чего начать Что это за продукт Для кого он Как устроена документация Быстрые ссылки Как начать разработку Как найти нужный сервис К кому идти по вопросам
1. Продукт
Продукт
2. Домены
Домены Домен: Профиль пользователя Домен: Поиск Домен: Заказы / транзакции Домен: Уведомления Домен: Аналитика Домен: Рекомендации
3. Архитектура
Архитектура Диаграмма: auth микросервисы
4. Инженерия
Инженерия
5. Платформа
Платформа Облако Объектное хранилище CI/CD Секреты и сертификаты Резервное копирование и восстановление
6. Разработка
Разработка Быстрый старт Локальная настройка Карта репозиториев Стандарты кода Git-процесс Стратегия ветвления Руководство по код-ревью Критерии готовности Процесс релиза Флаги фич FAQ разработчика Миграция secure auth
7. Эксплуатация
Эксплуатация Дежурство Управление инцидентами Уровни критичности Политика эскалации Постмортемы Ранбуки Управление изменениями Непрерывность бизнеса
8. Аналитика
Аналитика План трекинга событий Определения KPI Каталог дашбордов Словарь метрик Эксперименты Стандарты отчётности
9. Управление
Управление Решения (ADR) Политика статуса контента Changelog обновлений документации

На странице

Место в Control Plane Ответственность Не Ответственность Модули Основной Поток Source of Truth Инварианты Документы