Я вижу, вижу...

Как хреново работает твое приложение без Observability)

Если вернуться в лохматые годы, то проверка работы была проста: если сервер гудел, то вроде все работало, но сейчас же приложения — это просто дикий зоопарк из микросервисов, который никто в голове целиком не удерживает.

Для прокачки таких проектов, я всегда использую мою любимую обсервабилити-связку:

- Метрики (Prometheus)

Они показывают: сколько потребляем памяти, какая задержка, сколько запросов в секунду. Прометеус — наш ненасытный сборщик этих цифр. А еще у него есть экспортеры на все случаи жизни: для Кафки, Постгреса, Нгинкса — чего душа пожелает!

- Визуализация (Grafana)

Берет сухие цифры из Прометеуса и рисует из них красивые и понятные дашборды.

Логи (Loki / Vector / ELK)

В них записано всё, что «наговорило» приложение в процессе работы. Упало? Идем сюда и читаем, какие ошибки оно кричало перед смертью. Loki — от ребят из Grafana, умеет умно и быстро искать по логам без боли в голове.

Алертинг (Grafana Alerting / Alertmanager)

Обычно я настраиваю алерты так, чтобы узнавать о проблемах раньше пользователей. Иногда даже до того, как они случились (магия предсказания на основе аномалий!).

Трассировка (Jaeger, Tempo) — а это уже магия высшего пилотажа

Позволяет проследить путь ОДНОГО запроса через все микросервисы. Где он задержался? Кто его тормозил? База данных или соседний сервис? Jaeger покажет это как на ладони, красиво и наглядно.

Синтетический мониторинг (Blackbox)

Он постоянно «щупает» наши эндпоинты снаружи: доступен ли сайт? Отвечает ли он быстро? А тот критический API-метод? Короче, хорошая штука.

Такой букетик помогает мне быть более спокойным за свои проекты и даже пить кофея в перерывах.

А что сейчас используете вы?)

#devops #observability #monitoring #grafana #prometheus #logging #tracing

Пожар, пожар

Вспомнил тут свою историю, как 5 лет назад я ДВАЖДЫ тушил один тот же инцидент. Запарился я тогда знатно, но вынес для себя несколько уроков:

1. Автоматизируйте реакцию на такие инциденты.
2. Напиши правило для мониторинга, которое предупредит о нем заранее.
3. Исправь коренную причину проблемы в коде или конфиге, что не париться вновь.

Разреши себе не тушить, а строить систему ПЖТ!

Часто ли вы тушите пожары или больше любите наблюдать за сией катастрофой?))

#devops #burnout #automation #productivity

Давайте знакомиться! 🏃

Привет! Меня зовут Вова и вот уже 13 лет я девоплю Девопс и управляю командой микро-девопсов.

Сейчас я работаю в Магнит.Тех, развиваю личный бренд и тягаю железо — как на работе, так и в зале🦾

Зачем вы здесь?

Мой блог — это просто корзинка контента из моей жизни, а также небольшие советы по работе и размышления о горячо обсуждаемых темах.

Еще я менторю ребят, если у них вдруг возникают проблемы.

Так что можешь написать мне в личку и мы быстро раскидаем все недоразумения.

Кратко о рынке труда:
❌ вы таскали воду, но не в те ведра (опыт есть, но не тот, что нужен)

❌ пока строили мост, сами под ним и остались (ваши заслуги никто не заметил)

❌ хотели быть капитаном, а стали спасательным кругом (ответственность несёте, а власти — нет)

❌ закрывали чужие дыры, а свою зарплатную так и не закрыли (повышение откладывается бесконечно)

❌ работали в темноте, а теперь вас не видно и на свете (если не показываете результат — его не существует)

Мониторинг за $5000 экономит $50 000

Оооо да, выгода! DevOps-задачи часто выглядят для бизнеса как какая-то магия и бесполезная ерунда, на которую вообще не стоит трать время. Но что если посмотреть на эту по-другому?

Сайт иногда лежит?
Значит теряется $200 прибыли. Но если мы внедрим настройку мониторинга и авто-лечения (которая стоит тысячу долларов),то он СПАСАЕТ 90% таких падений. Да и окупается за полгода))

Так и с автоматизации деплоя — она убирает двадцать часов ручной рутины каждую неделю. Если час работы стоит $50, то это тысяча долларов ЭКОНОМИИ в неделю.

Шифрование бэкапов обходится в $500 в месяц. Штраф за утечку может быть $100 000. Даже если риск утечки всего один процент в год, это тысяча долларов потенциальных потерь. Значит, шифрование ВЫГОДНЕЕ.

👉 Всё просто: говорите с бизнесом на языке денег, сколько стоит и сколько сэкономит.

Опять мы про деньги, но в бизнесе, к сожалению никак без них. Вы часто приводите такие сравнения своим руководителям?

#devops #career #softskills #senior

Фух, что-то эта неделя тяжеловато идёт...

Решил задуматься над темой, которая настигает многих именно осенью: выгорание.

Хотя наша работа не творческая, выгорание может наступить так же, как у любого дизайнера или копирайтера. И вот, когда появляются первые сигналы — «задача слишком сложная, хотя раньше делал быстро» или «отвечу потом, сейчас вообще нет настроения» — пора задуматься об отдыхе. О качественном отдыхе, когда ваша ЦНС наконец выдохнет и сможет восстановиться.

Я для разгрузки обычно выбираюсь загород покататься на машине или гоняю с друзьями попить чай а может что-то и покрепче . А иногда вообще работаю над собственным маленьким пет-проектом, где воплощаю все задумки)

Так что не забывайте о качественном отдыхе и берегите себя, друзья.

Вообще, часто слышите о выгорании от своих коллег?

#DevOps #softskills #IT #Магнит

Быстренько собрал вам мини-шпаргалку на каждый день⚡️

Для командной строки

^old_text^new_text — запускает предыдущую команду, но с исправленной опечаткой. Прикиньте, не надо печатать все заново!

curl -s "https://cht.sh/<topic>" — мгновенная шпаргалка по любой теме (Docker, git, awk) прямо в терминале.

python3 -m http.server 8000 — эта команда запустит простой HTTP-сервер в текущем каталоге и поможет быстро поделиться файлами в локальной сети.

Для работы с кодом и конфигами

jq .— твой лучший друг для чтения JSON-логов и ответов API. Просто pipe в него любой JSON (cat file.json | jq .) и он станет читаемым.

плагин GitLens (при работе в В VS Code) — превращает историю файла в увлекательный детектив. Кто, когда и зачем поменял эту строку — видно сразу))

Используете что-то из этого списка?

#devops #lifehack #productivity #tools

И вот я немного приуныл…

У вас так все хорошо, что нет инцидентов?) Не стесняйтесь, скидывайте. Разберем и предотвратим кучу будущих ошибок😏

Как выбраться даже из самой большой ж*пы?

И я сейчас про поиск решения, которое спасёт вашу команду.

Сначала вы ищете ту самую боль, которая отнимает силы и время у разработчиков.

Потом вы переходите в роль «душнилы» и пять раз спрашиваете себя и других «почему». Не «сервер упал», а «почему упал? -> потому что кончилась память -> а почему она кончилась? -> потому что в коде утечка -> а почему её не поймали? -> потому что нет теста...». Короче — докапываетесь до корня.

Далее превращаетесь в гонца и идете в народ. Общаетесь с теми, кто эту боль чувствует острее всего: разработчики, тестировщики, иногда и менеджеры.

После составляете архитектуру решения: не важно где и чем, главное — увидеть полную картинку. Если не можете нарисовать — значит, не до конца поняли. Здесь стоит вернуться и повторить цикл, описанный ранее.

Ну и самое интересное — пытаетесь найти уже готовое решение. Я не изобретаю велосипед: сначала иду в Google, GitHub, читаю блоги и т. д. Моя задача — не писать с нуля, а найти лучшее и адаптировать под наш контекст.

Финал: делаю самый простой работающий прототип. Не идеальный, не масштабируемый, а просто working solution. Показываю его команде: «Вот, смотрите — это может решить нашу проблему?» Получаю фидбек и только потом начинаю делать «красиво».

Короче, мой секрет — не гениальность, а любопытство и желание докопаться до сути😌

Вот так и можно выбраться даже из самого тёмного туннеля))
#devops #process #ideas #engineeringmanagement

Никому не верь, даже себе

Кто-то до сих пор думает, что если стоит VPN и пароль на 8 символов, то безопасность обеспечена… Да, удивительно, но в DevOps никто не заслуживает доверия на слово, поэтому и советую Zero Trust.

Все мы знаем, что его главное правило «никогда не доверяй, всегда проверяй». Может звучит жёстко, однако благодаря ему образуется меньше дыр, чем могло бы быть. Удобно — всё логируется, всё проверяется и даже свои проходят авторизацию.

Предлагаю запретить фразу «может, пронесёт…»

#ZeroTrust #CyberSecurity #DevOps