Алертинг через мониторинг

Трафик

Алерты и их обоснование.

Трафик - уменьшение на 50 % в течении 30 минут

30 минут - такое значение позволит избегать вот таких скачков:

Напомню, функция percent_diff берет указанный диапазон и вычислять разницу в процентах между первым значением и последним (на графике выше видно, как срабатывал алерт).

Чтобы избежать скачков, мы должны увеличить интервал, предлагаю до 30 минут:

Алертинг будет выглядеть так:

Хорошо бы при этом понимать источник трафика (откуда идет волна трафика), это может быть другой сервис (определять по рефереру) или просто IP адрес (клиент ддосит или сканит/синкает данные).

Важная статика

5xx

TTLB

Время ответа выросло больше чем на 50%:

Prometheus:

Время ответа больше 0.5 sec:

3xx and 4xx

elastic

3хх больше 100 OR 4xx больше 300 за 4 минуты:

Promethtus:

большое количество не 200 за 2 часа:

2xx

http errors

seo.http.php-errors (elastic)

seo.http.php.errors (prometheus)

cli errors

seo cli errors (elastic)

Источник трафика - top 8