Хранилище данных

Previous Next

Аналитическое хранилище для отчётности, дашбордов и аналитики (planned / в перспективе).

Назначение

  • Консолидация данных из операционных систем (сервисы платформы, события Kafka) для аналитики без нагрузки на prod-БД.
  • Поддержка исторических срезов, агрегатов и витрин для продуктовых и операционных отчётов.

Источники данных

  • События Kafka — загрузка в DWH через консьюмеры или ETL (например, identity.user.events, credential.password.events для метрик регистрации и входа).
  • Операционные БД — выгрузка через безопасные механизмы (snapshot, CDC) по расписанию; только необходимые поля, с учётом PII и retention.
  • Подробнее: Source Systems, ETL/ELT Pipelines.

Принципы

  • Отдельная среда от prod; доступ по ролям; данные анонимизированы или ограничены по необходимости для compliance.
  • Схема и модель данных документируются; lineage между источниками и витринами ведётся (см. Lineage).
  • Retention и политики доступа — см. Retention policies, Access policies.

Связанные страницы

Каталог схем событий Витрины данных