← devsongsai.com

Próg alarmu podniesiony w maju — awaria w październiku przeszła cicho

Kod i git opublikowano 19.10.2026 18:00

Treść odcinka

3:12 — klienci piszą pierwsi
$ tail -f errors.log setki błędów, alert: cisza
Klienci zgłaszają awarię, zanim monitoring w ogóle się odezwie.
maj — próg alarmu w górę
próg: z 40 na 400 bo hałasował przy szczytach
Podnieśliśmy próg, żeby przestał dzwonić przy każdym skoku ruchu.
październik, 3:10 — pada baza
dashboard: cały zielony wykres: gładka linia
Baza nie odpowiada, a panel monitoringu wygląda jak w spokojny wtorek.
3:40 — pierwszy ręczny test
błędy: 60% zapytań powiadomień: zero
Ktoś ręcznie sprawdza zamówienia i dopiero wtedy widać skalę.
wyjaśnienie o 3:41
alarm działał cały czas to my go w maju wyciszyliśmy
Nie było usterki monitoringu — usterką była nasza majowa poprawka.
seria devsongsai
Anegdota #63 · sezon 7 Obserwuj — nie zgub serii