Перейти к содержимому

Наблюдаемость

Мониторинг собирает и проверяет заранее выбранные показатели: доступен ли сайт, сколько ошибок возникает, не закончилась ли память. Наблюдаемость (observability) — способность системы давать достаточно данных, чтобы ответить на новый вопрос о её поведении, включая непредвиденный сбой.

Мониторинг сообщает, что что-то идёт не так. Наблюдаемость помогает понять, почему: какой запрос, сервис, релиз, зависимость или участок кода связан с деградацией. Для этого приложение и инфраструктура должны быть правильно инструментированы.

СигналНа какой вопрос отвечаетОграничение
МетрикиКак меняется числовое состояние во времени?Агрегация скрывает отдельные события
ЛогиЧто произошло в конкретный момент?Без контекста сложно восстановить цепочку запроса
ТрассыКак один запрос прошёл через операции и сервисы?Требуют propagation и продуманного sampling
ИсключенияГде код завершился ошибкой и как часто?Не заменяют бизнес-метрики и логи зависимостей
Синтетические проверкиРаботает ли сценарий из контролируемой точки?Не показывают разнообразие реальных пользователей
RUMЧто испытывают реальные пользователи?Требует контроля приватности и учёта разных устройств

Сигналы наиболее полезны в связке. Например, метрика показывает рост p95, трассировка — медленную зависимость, лог — детали вызова, а release в error tracking связывает проблему с изменением.

Для перехода между сигналами нужны общие идентификаторы и атрибуты: trace/span ID, service name, environment, release, request ID. Пользовательские идентификаторы добавляются только после оценки приватности.

Типовой маршрут диагностики:

SLO/alert → затронутый сценарий и период → метрика → trace/log/error
→ связанный deployment → восстановление → postmortem

Контекст должен распространяться через вызовы. Если каждый сервис пишет несвязанные события, сбор всего в одном хранилище сам по себе корреляцию не создаст.

OpenTelemetry предоставляет API, SDK, протокол OTLP и Collector для формирования, получения, обработки и экспорта телеметрии. Он помогает отделить instrumentation от конкретного backend: приложение формирует сигналы единообразно, а систему хранения и анализа можно сменить без полной переделки кода.

OpenTelemetry не является хранилищем или дашбордом. Для анализа нужен совместимый backend или собственный стек.

  1. Внешний uptime check ключевого URL и проверка TLS.
  2. Метрики инфраструктуры и приложения с разумным набором labels.
  3. Централизованные структурированные логи с request ID.
  4. Error tracking с release и окружением.
  5. Оповещение ответственного с runbook.
  6. Трассировка и RUM — когда распределённые вызовы и пользовательский опыт требуют более глубокой диагностики.
  • Uptime monitoring — внешняя доступность и сценарные проверки.
  • Infrastructure monitoring — ресурсы, сервисы и time series.
  • Log management — сбор, поиск, хранение и защита событий.
  • Tracing — путь запроса и задержка операций.
  • Error tracking — исключения, grouping и releases.
  • Real User Monitoring — Web Vitals, события и сессии.
  • Alerting — actionable оповещения и борьба с шумом.
  • OpenTelemetry — сбор и передача телеметрии.
  • Prometheus — метрики и оповещения.
  • Grafana — дашборды и исследование сигналов.
  • Better Stack — интегрированная платформа наблюдаемости.