В Vercel появились пользовательские мониторы по запросам Observability. Как выбрать метрику, временное окно и фильтр, чтобы уведомление помогало действовать.
Vercel добавила пользовательские мониторы, которые формируют предупреждения по результатам запросов Observability. Анонс от 26 октября позволяет отслеживать одну метрику или отношение двух величин, выбирать фиксированный порог либо статистическое обнаружение отклонений. Это полезно для команд, которым стандартный набор сигналов не объясняет состояние конкретного приложения.
Настройка монитора доли HTTP 500 среди всех запросов.
Число ошибок без контекста обманчиво
Представим API с десятью ошибками за интервал. При двадцати запросах это половина всех обращений, а при миллионе — совсем другая доля. Поэтому отношение ошибок к общему числу запросов часто помогает понять масштаб проблемы точнее абсолютного счётчика. Но и доля требует контекста: редкий маршрут может резко меняться из-за одного неудачного обращения.
Начать стоит с формулировки пользовательской проблемы. Например, «загрузка документов регулярно завершается неудачно». Затем определить, какие события описывают успешные и неуспешные попытки, и включить их в один согласованный набор данных. Если числитель и знаменатель относятся к разным маршрутам, красивый график будет отвечать на неверный вопрос.
Окно наблюдения меняет смысл сигнала
Короткое окно быстрее замечает всплеск, но сильнее реагирует на случайность. Длинное сглаживает шум и одновременно может задержать обнаружение. Для каждой операции полезно представить допустимое время проблемы: сколько минут человек готов ждать повторной загрузки, прежде чем потеряет результат работы или обратится в поддержку.
Фильтры и группировка помогают отделить окружения, маршруты и другие значимые признаки. Здесь важно не раздробить данные до бессмысленно малых выборок. Десятки отдельных тревог для почти неиспользуемых комбинаций могут оказаться менее полезными, чем один хорошо объяснимый сигнал с доступом к подробностям.
Новый монитор можно собрать из запроса графика, пресета или настроек предупреждений команды. Предусмотрено и описание через JSON с созданием из CLI. Такой вариант удобен для воспроизводимости: изменение порога или фильтра становится видимым и его можно обсудить вместе с причиной корректировки.
Уведомление должно подсказывать первое действие
Получателю нужны название проблемы, затронутый сценарий и понятный способ начать проверку. Полезно заранее определить владельца сигнала и объяснить, где искать связанные ошибки. Уведомление без следующего действия постепенно превращается в фоновый шум, даже если технически срабатывает правильно.
Перед включением постоянной рассылки стоит посмотреть, как правило ведёт себя на уже известных спокойных и проблемных интервалах. Затем проверить доставку и убедиться, что восстановление тоже заметно. Пользовательские мониторы доступны в рамках соответствующих планов с Observability Plus, поэтому объём сканируемых данных входит в оценку эксплуатации.
Хороший монитор выражает конкретное обещание продукта человеку. Он показывает нарушение этого обещания достаточно быстро и с достаточным контекстом. Настройка запроса, знаменателя и временного окна здесь важнее количества созданных графиков: именно они определяют, насколько предупреждению можно доверять.