Наблюдаемость
Мониторинг и наблюдаемость
Заголовок раздела «Мониторинг и наблюдаемость»Мониторинг собирает и проверяет заранее выбранные показатели: доступен ли сайт, сколько ошибок возникает, не закончилась ли память. Наблюдаемость (observability) — способность системы давать достаточно данных, чтобы ответить на новый вопрос о её поведении, включая непредвиденный сбой.
Мониторинг сообщает, что что-то идёт не так. Наблюдаемость помогает понять, почему: какой запрос, сервис, релиз, зависимость или участок кода связан с деградацией. Для этого приложение и инфраструктура должны быть правильно инструментированы.
Основные сигналы
Заголовок раздела «Основные сигналы»| Сигнал | На какой вопрос отвечает | Ограничение |
|---|---|---|
| Метрики | Как меняется числовое состояние во времени? | Агрегация скрывает отдельные события |
| Логи | Что произошло в конкретный момент? | Без контекста сложно восстановить цепочку запроса |
| Трассы | Как один запрос прошёл через операции и сервисы? | Требуют propagation и продуманного sampling |
| Исключения | Где код завершился ошибкой и как часто? | Не заменяют бизнес-метрики и логи зависимостей |
| Синтетические проверки | Работает ли сценарий из контролируемой точки? | Не показывают разнообразие реальных пользователей |
| RUM | Что испытывают реальные пользователи? | Требует контроля приватности и учёта разных устройств |
Сигналы наиболее полезны в связке. Например, метрика показывает рост p95, трассировка — медленную зависимость, лог — детали вызова, а release в error tracking связывает проблему с изменением.
Контекст и корреляция
Заголовок раздела «Контекст и корреляция»Для перехода между сигналами нужны общие идентификаторы и атрибуты: trace/span ID, service name, environment, release, request ID. Пользовательские идентификаторы добавляются только после оценки приватности.
Типовой маршрут диагностики:
SLO/alert → затронутый сценарий и период → метрика → trace/log/error → связанный deployment → восстановление → postmortemКонтекст должен распространяться через вызовы. Если каждый сервис пишет несвязанные события, сбор всего в одном хранилище сам по себе корреляцию не создаст.
OpenTelemetry
Заголовок раздела «OpenTelemetry»OpenTelemetry предоставляет API, SDK, протокол OTLP и Collector для формирования, получения, обработки и экспорта телеметрии. Он помогает отделить instrumentation от конкретного backend: приложение формирует сигналы единообразно, а систему хранения и анализа можно сменить без полной переделки кода.
OpenTelemetry не является хранилищем или дашбордом. Для анализа нужен совместимый backend или собственный стек.
Минимальный набор для веб-проекта
Заголовок раздела «Минимальный набор для веб-проекта»- Внешний uptime check ключевого URL и проверка TLS.
- Метрики инфраструктуры и приложения с разумным набором labels.
- Централизованные структурированные логи с request ID.
- Error tracking с release и окружением.
- Оповещение ответственного с runbook.
- Трассировка и RUM — когда распределённые вызовы и пользовательский опыт требуют более глубокой диагностики.
Страницы направления
Заголовок раздела «Страницы направления»- Uptime monitoring — внешняя доступность и сценарные проверки.
- Infrastructure monitoring — ресурсы, сервисы и time series.
- Log management — сбор, поиск, хранение и защита событий.
- Tracing — путь запроса и задержка операций.
- Error tracking — исключения, grouping и releases.
- Real User Monitoring — Web Vitals, события и сессии.
- Alerting — actionable оповещения и борьба с шумом.
Связанные инструменты
Заголовок раздела «Связанные инструменты»- OpenTelemetry — сбор и передача телеметрии.
- Prometheus — метрики и оповещения.
- Grafana — дашборды и исследование сигналов.
- Better Stack — интегрированная платформа наблюдаемости.
Связанные материалы
Заголовок раздела «Связанные материалы»- SRE — пользовательские цели надёжности.
- AI-наблюдаемость — специфика агентов и LLM.
- Управление инцидентами — действия после получения сигнала.
Материалы и источники
Заголовок раздела «Материалы и источники»- OpenTelemetry: Observability primer — сигналы, instrumentation и надёжность.
- OpenTelemetry: Signals — traces, metrics, logs и baggage.
- Google SRE: Monitoring Distributed Systems — мониторинг, симптомы и причины.