AI-Ops Documentation

Русский English
  • Главная
  • Карта документации
0. С чего начать
  • Что это за продукт
  • Для кого он
  • Как устроена документация
  • Быстрые ссылки
  • Как начать разработку
  • Как найти нужный сервис
  • К кому идти по вопросам
1. Продукт
Обзор продукта
  • Миссия продукта
  • Ценность для бизнеса
  • Основные сценарии
  • Границы системы
Пользователи и персоны
  • Сегменты пользователей
  • Роли пользователей
  • Основные потребности
Пользовательские сценарии
  • Регистрация / логин
  • Основной пользовательский сценарий
  • Оплата / заказ / действие
  • Поддержка и сценарий восстановления
Функции продукта
Фича: Аутентификация
  • Цель
  • Пользовательская история
  • Бизнес-правила
  • Ограничения
  • Метрики успеха
  • Связанные сервисы
  • Связанные события / данные
  • Фича: Профиль
  • Фича: Организации
  • Фича: Топология
  • Фича: Вычислительные ресурсы
  • Фича: Кластеры
  • Фича: Каталог сервисов
Требования
  • Функциональные требования
  • Нефункциональные требования
  • Требования к производительности
  • Требования к безопасности
  • Конфиденциальность и соответствие
  • Доступность
Метрики
  • Ключевая метрика (North Star)
  • Продуктовые KPI
  • Метрики воронки
  • Метрики качества
  • Метрики экспериментов
2. Домены
Домен: Identity
  • Назначение
  • Основные концепции
  • Сущности
  • Бизнес-правила
  • Сервисы домена
  • Данные домена
  • Связанные фичи
  • Домен: Профиль пользователя
  • Домен: Поиск
  • Домен: Заказы / транзакции
  • Домен: Уведомления
  • Домен: Аналитика
  • Домен: Рекомендации
3. Архитектура
Обзор системы
  • Что входит в систему
  • Что не входит
  • Высокоуровневая диаграмма
C4 Model
  • Контекстная диаграмма
  • Диаграмма контейнеров
  • Диаграмма компонентов
  • Диаграмма развёртывания
Интеграционная архитектура
  • Внешние системы
  • Интеграции API
  • Webhooks
  • Сторонние провайдеры
Потоки данных
  • Онлайн-поток данных
  • Пакетный поток данных
  • Поток событий
  • Владение данными
Архитектура безопасности
  • Аутентификация
  • Авторизация
  • Управление секретами
  • Шифрование
  • Аудит и логирование
Надежность и масштабируемость
  • SLA / SLO
  • Планирование мощностей
  • Отказоустойчивость
  • Обратное давление и повторы
  • Восстановление после сбоев
Архитектурные принципы
  • Границы доменов
  • Принципы проектирования API
  • Принципы проектирования событий
  • Принципы контрактов данных
  • Диаграмма: auth микросервисы
Control plane
  • Архитектура компонентов (control plane)
  • Доменная модель v0
  • Протокол v0 (control plane)
  • Примеры (control plane)
Сервисы (control plane)
Сервис control plane
  • API
  • Модель данных
  • События
  • Модули
  • Операции
Сервис execution plane
  • API
  • Модель данных
  • События
  • Модули
  • Операции
Сервис resource catalog
  • API
  • Модель данных
  • События
  • Модули
  • Операции
4. Инженерия
Сервисы
Каталог сервисов
  • Все сервисы списком
  • Владельцы
  • Критичность
  • Уровень / домен / статус
  • Сервис аутентификации
  • Сервис аккаунтов
  • Облачный сервис
  • Сервис учётных данных
  • Herald
  • Сервис идентификации
  • API Gateway
  • Сервис токенов
Фронтенд
  • Обзор фронтенда
  • Структура приложения
  • Routing (фронтенд)
  • State management (фронтенд)
  • Design system (фронтенд)
  • UI components (фронтенд)
  • API контракты фронтенда
  • Обработка ошибок (фронтенд)
  • Performance (фронтенд)
  • Feature flags (фронтенд)
  • Тестирование фронтенда
Бэкенд
  • Обзор бэкенда
  • Паттерны сервисов
  • Рекомендации по API
  • Событийные паттерны
  • Паттерны доступа к БД
  • Кэширование
  • Асинхронные задачи и воркеры
  • Идемпотентность
  • Обработка ошибок
  • Тестирование бэкенда
Данные
  • Обзор данных
  • Системы-источники
  • Контракты данных
  • Каталог схем событий
  • Хранилище данных
  • Витрины данных
  • ETL / ELT-пайплайны
  • Качество данных
  • Происхождение данных
  • Политики хранения
  • Политики доступа
ML / DS
  • Обзор ML/DS
  • Сценарии (ML)
  • Каталог моделей
  • Feature store
  • Training pipelines
  • Inference pipelines
  • Offline evaluation
  • Online evaluation / A-B
  • Мониторинг (ML)
  • ML runbooks
QA / Качество
  • Стратегия качества
  • Пирамида тестов
  • Тестовые окружения
  • Тестовые данные
  • Ручное тестирование
  • Автоматизированное тестирование
  • Нагрузочное тестирование
  • Тестирование безопасности
  • Критерии приёмки релиза
  • Процесс разбора багов
5. Платформа
Инфраструктура
  • Ansible
  • WireGuard
  • Kubernetes
  • Longhorn
  • Ingress
  • PostgreSQL Cluster
  • Redis
  • Kafka
  • Vault
  • MinIO
  • Authentik
  • Monitoring
  • Logging
  • Tracing
  • Nexus
  • SonarQube
  • GlitchTip
  • GitLab Runner
  • Kubernetes Dashboard
  • OLM
  • Deploy
  • Internal DNS
  • Обзор (инфраструктура)
  • Config generator
  • Пример (инфраструктура)
  • Скрипты (инфраструктура)
Окружения
  • Локальное
  • Stage
  • Pre
  • Продакшен (prod)
  • Tech
  • Облако
  • Объектное хранилище
  • CI/CD
  • Секреты и сертификаты
Наблюдаемость
  • Логирование
  • Метрики
  • Трейсинг
  • Алертинг
  • Резервное копирование и восстановление
6. Разработка
  • Быстрый старт
  • Локальная настройка
  • Карта репозиториев
  • Стандарты кода
  • Git-процесс
  • Стратегия ветвления
  • Руководство по код-ревью
  • Критерии готовности
  • Процесс релиза
  • Флаги фич
  • FAQ разработчика
  • Миграция secure auth
7. Эксплуатация
  • Дежурство
  • Управление инцидентами
  • Уровни критичности
  • Политика эскалации
  • Постмортемы
  • Ранбуки
  • Управление изменениями
  • Непрерывность бизнеса
8. Аналитика
  • План трекинга событий
  • Определения KPI
  • Каталог дашбордов
  • Словарь метрик
  • Эксперименты
  • Стандарты отчётности
9. Управление
  • Решения (ADR)
  • Политика статуса контента
  • Changelog обновлений документации
Безопасность и соответствие
  • Модель угроз
  • Безопасная разработка
  • Управление доступом
  • Конфиденциальность
  • Реагирование на инциденты
Ответственность и владельцы
  • Команды
  • Зоны ответственности команд
  • Владельцы сервисов
  • Владельцы доменов
  • Контакты
Глоссарий
  • Бизнес-термины
  • Продуктовые термины
  • Технические термины
  • Сокращения

Бэкенд

Previous Next

Backend-сервисы AIOps построены на принципах Clean Architecture, Domain-Driven Design и Event-Driven Architecture.

По задаче

Задача Документ
Общая картина backend Backend Overview
Слои сервиса, UoW, репозитории Service Patterns
Публикация и потребление событий Event-Driven Patterns
Работа с БД, миграции Database Access Patterns
Как проектировать gRPC/REST API Guidelines
Кеш (Redis) Caching
Outbox worker, воркеры, консьюмеры Async Jobs and Workers
Идемпотентность запросов и событий Idempotency
Ошибки, коды, логирование Error Handling
Unit, integration, тесты gRPC Backend Testing

Архитектурные паттерны

Clean Architecture

Все сервисы следуют четкому разделению на слои:

Core (core/) — Domain Layer: - Domain entities (Pydantic models) - Repository protocols (ABC) - Domain services (бизнес-логика) - DTOs и errors

Use Cases (use_cases/) — Application Layer: - Use case implementations - Orchestration logic - Зависимости только от core/

Infrastructure (infra/) — Infrastructure Layer: - ORM models (SQLAlchemy) - Repository implementations - Kafka, Redis, external APIs - Unit of Work

API (api/) — Presentation Layer: - gRPC servicers - REST controllers (planned) - Request/Response mapping

Transactional Outbox Pattern

Обеспечивает at-least-once доставку событий в Kafka:

  1. API процесс: бизнес-операция + событие сохраняются в одной транзакции
  2. Worker процесс: polling из outbox_events → Kafka → маркировка PUBLISHED

Библиотека: libs/python/storage/patterns/omni-box/

Используется в: - Identity service - Credential service

Unit of Work Pattern

Управление транзакциями и координация repositories:

1
2
3
4
async with uow.transaction() as tx:
    user = await tx.users.get_by_id(user_id)
    await tx.users.update(user)
    await tx.outbox.create(event)

Библиотека: libs/python/storage/patterns/unit-of-work-kit/

Repository Pattern

Абстракция доступа к данным: - Protocols в core/[entity]/repositories.py - Implementations в infra/repositories/[entity].py - Возвращают Domain Entities, не ORM модели

Domain Services

Бизнес-логика, не привязанная к конкретной сущности: - UserDomainService (Identity) — валидация username - PasswordDomainService (Credential) — Argon2 hashing, zxcvbn validation

Технологии

Python 3.12+

  • Async/await — asyncio, uvloop (только Linux/macOS)
  • Type hints — mypy strict mode
  • Pydantic 2.x — валидация и serialization

gRPC

  • Protocol Buffers — proto/aiops/
  • grpcio 1.78+ — runtime
  • Health checks — grpc-health-checking
  • Reflection — grpc-reflection

PostgreSQL

  • SQLAlchemy 2.x — async ORM
  • asyncpg — драйвер
  • Alembic 1.18+ — миграции
  • Partitioning — для outbox_events (по времени)

Kafka

  • aiokafka — async producer/consumer
  • Transactional Outbox — надежная доставка
  • Event schemas — в libs/python/common/service-contracts/

Observability

  • structlog — structured logging
  • prometheus-client — metrics
  • OpenTelemetry — distributed tracing

Разделы

  • Backend Overview — обзор backend архитектуры
  • Service Patterns — общие паттерны сервисов
  • API Guidelines — стандарты API
  • Event-Driven Patterns — Transactional Outbox, Event Sourcing
  • Database Access Patterns — Repository, UoW
  • Caching — Redis caching strategies
  • Async Jobs and Workers — APScheduler, outbox workers
  • Idempotency — идемпотентность операций
  • Error Handling — обработка ошибок
  • Backend Testing — unit, integration, e2e тесты

Связанные страницы

Сервисы

  • Identity service — пример Clean Architecture
  • Credential service — пример Domain Service
  • Service Catalog — все сервисы

Архитектура

  • Architecture Principles — принципы проектирования
  • Data Flow / Event Flow — поток событий
  • Reliability and Scalability — надежность

Данные

  • Event Schema Catalog — схемы событий Kafka
  • Data Contracts — контракты между сервисами

Разработка

  • Coding Standards — стандарты кода
  • Code Review Guide — code review
Тестирование фронтенда Обзор бэкенда
Меню
Главная Карта документации
0. С чего начать
С чего начать Что это за продукт Для кого он Как устроена документация Быстрые ссылки Как начать разработку Как найти нужный сервис К кому идти по вопросам
1. Продукт
Продукт
2. Домены
Домены Домен: Профиль пользователя Домен: Поиск Домен: Заказы / транзакции Домен: Уведомления Домен: Аналитика Домен: Рекомендации
3. Архитектура
Архитектура Диаграмма: auth микросервисы
4. Инженерия
Инженерия
5. Платформа
Платформа Облако Объектное хранилище CI/CD Секреты и сертификаты Резервное копирование и восстановление
6. Разработка
Разработка Быстрый старт Локальная настройка Карта репозиториев Стандарты кода Git-процесс Стратегия ветвления Руководство по код-ревью Критерии готовности Процесс релиза Флаги фич FAQ разработчика Миграция secure auth
7. Эксплуатация
Эксплуатация Дежурство Управление инцидентами Уровни критичности Политика эскалации Постмортемы Ранбуки Управление изменениями Непрерывность бизнеса
8. Аналитика
Аналитика План трекинга событий Определения KPI Каталог дашбордов Словарь метрик Эксперименты Стандарты отчётности
9. Управление
Управление Решения (ADR) Политика статуса контента Changelog обновлений документации

На странице

По задаче Архитектурные паттерны Clean Architecture Transactional Outbox Pattern Unit of Work Pattern Repository Pattern Domain Services Технологии Python 3.12+ gRPC PostgreSQL Kafka Observability Разделы Связанные страницы Сервисы Архитектура Данные Разработка