🤔🤔 Quickwit. Когда Elasticsearch слишком дорогой

Quickwit — это поисковой движок нового поколения, альтернатива для Elasticsearch, Loki и Splunk. Одна из главных особенностей Quickwit, заключается в том, что индексы хранятся в объектном хранилище (s3, minio, другие s3-совместимые проекты). Такая архитектура позволяет сократить использование вычислительных ресурсов и хранилища в несколько раз.

Этот проект написан на Rust. Как и случае с Vector (Сборщик логов, альтернатива для Filebeat) это позволяет добиваться значительного прироста производительности и сократить расходы на on-prem и облачную инфраструктуру.

Не все возможности экосистемы Elastic реализованны в Quickwit. Нет красивого UI типа Kibana. Однако проект уже сейчас поддерживает интеграцию с Grafana, Jaeger, OpenTelemetry, Kafka.

Продолжение тут

#гайд

#дайджест перед выходными

🔘 Как стать нормальным системным администратором? Дополнения и ответы на вопросы — серия статей для школьников и студентов ИТ‑направлений, а также просто для людей, занятых в ИТ‑отрасли

🔘 Onionpipe — перенаправляет порты на локальном хосте на удаленные Onion-адреса как скрытые сервисы Tor и наоборот.

🔘 В systemd 256.1 исправлена проблема — в systemd-tmpfiles была дырка, которая приводила к удалению всех домашних каталогов раздела /home

🔘 Reclaiming IPv4 Class E’s 240.0.0.0/4 — занятный материал, в котором рассматривается возможность использования подсети 240.0.0.0/4 в современном мире

🔘 Pipeline Integrity and Security — в статье приведен очень неплохой обзор того, что можно делать для защиты конвейера сборки, получаемых в процессе артефактов и build workers

🗣️ «Иногда решение не в изменении системы, а в изменении отношения заказчика». Интервью с системным аналитиком

Системный аналитик Ярослав Атрохов рассказал нам об особенностях работы с заказчиками, многозадачности, сложностях профессии и важности команды.

Обновлённую статью можно прочесть по этой ссылке👈

🤔🤔 CUBIC или как собрать свой Ubuntu

Автору стало интересно, может ли он собрать свою сборку или даже дистрибутив linux. Как оказалось (внезапно) можно сделать и то, и другое. Но в этой статье мы поговорим именно про создание своей сборки.

Для создания сборки будет использован CUBIC и Ubuntu. CUBIC — Custom Ubuntu ISO Creator, эта программа позволяет особо не заморачиваясь собрать полноценную сборку базирующуюся на Ubuntu. Рассмотрим этот процесс подробнее.

Читать далее

#гайд

👾👾 Anomaly Alerting в Prometheus

В статье автор рассказывает о том, как использовать Prometheus с Istio для обнаружения аномалий во времени отклика ваших операционных служб. Реализация универсальная, чтобы можно было применить ее глобально ко всем службам, работающим в сети. Вы сможете применить один и тот же шаблон практически к любой rate-metric.

Читать статью

#туториал

👶 Новичок в компании: 18 советов, как быстро адаптироваться и освоить новые навыки

Начало работы в новой компании может быть волнующим и сложным, особенно если вы новичок в отрасли. Как быстро освоиться, произвести хорошее впечатление и стать ценным сотрудником?


Читать статью

#туториал

🏗️ 🏗️ inotify-info — инструмент, который позволяет нам быстро и в удобном формате получить информацию о текущем состоянии inotify watches и inotify instances.

В inotify instances Linux есть несколько проблем, и может быть сложно отладить, например, когда у вас в instances out of watches. Использование этого софта поможет отследить, сколько inotify watches, instances и какие файлы просматриваются с помощью inotify.

#софт

#memes

Twitch шокировал новой фичей

Очередной #дайджест для DevOps-ов

🔴 DevOps SRE admin системное администрирование CI/CD и другое — курс по системному администрированию, CI и CD, а также другим навыкам, необходимым для успешной работы в области DevOps и SRE

🔴 Pipeline Integrity and Security — обзор того, что можно делать для защиты конвейера сборки, получаемых в процессе артефактов и build workers

🔴 Курс по Kubernetes для начинающих — от запуска локального кластера до AWS ECR, Kaniko, GitLab CI. AWS IRSA

🔴 Vault HA + Consul HA + k8s — показан процесс установки HashiCorp Vault с связке с Consul, который выступает хранилищем для Vault, в HA режиме с включенным tls шифрованием в Kubernetes кластер

🔴 Нюансы работы с Redis: репликация — как настроить эту БД на высокий уровень отказоустойчивости

🙈🙈 Microsoft Defender считает трояном текстовый файл с одной строкой «This content is no longer available.»

Пользователи выяснили, что штатная антивирусная защитная система Microsoft Defender для Windows считает трояном (Trojan:Win32/Casdet!rfn) обычный текстовый файл с одной строкой «This content is no longer available.» («Этот контент больше недоступен»).

Microsoft Defender начинает считать угрозой текстовый файл, если в нём будет написана вышеперечисленная строка, а пользователь попытается выполнить сохранение этого файла.

Продолжение здесь

#почитать

Cluster.dev

Это инструмент с открытым исходным кодом, предназначенный для управления облачными инфраструктурами с помощью простых декларативных манифестов — шаблонов инфраструктуры. Шаблоны инфраструктуры могут быть основаны на модулях Terraform, манифестах Kubernetes, сценариях оболочки, диаграммах Helm, приложениях Kustomize и ArgoCD/Flux, политиках OPA и т.д.

Когда понадобится Cluster.dev?

👉 Если у вас есть общий шаблон инфраструктуры, который содержит несколько компонентов, соединенных вместе. Например, набор TF-модулей или набор дополнений K8s.
👉 Если вы разрабатываете инфраструктурную платформу, которую отправляете другим командам, и им необходимо запустить новые инфраструктуры на основе вашего шаблона.
👉 Если вы создаете сложную инфраструктуру, содержащую различные технологии, и вам необходимо провести интеграционное тестирование, чтобы подтвердить совместимость компонентов. После чего вы сможете распространить изменения на следующие среды.
👉 Если вы являетесь поставщиком ПО и вам необходимо обеспечить развертывание инфраструктуры вместе с вашим ПО.

#софт

🤔🤔 Windows 11 Enterprise G — Что за издание для правительства Китая и зачем оно вам?

Немного информации об особенном, в чем-то уникальном издании, существующем в Windows 10 и Windows 11, выпускаемом Microsoft для китайского госсектора. Что такое Windows Enterprise G, она же Windows Enterprise Government China, чем она отличается от других изданий, и самое главное, как (и зачем) ее получить.

Читать статью

#почитать

💁💁 Почему нельзя парсить вывод ls

Команда ls хорошо справляется с отображением атрибутов одного файла, но когда просишь у неё список файлов, возникает огромная проблема: Unix позволяет использовать в имени файла почти любой символ, в том числе пробелы, переносы строк, точки, символы вертикальной черты, да и практически всё остальное, что вы можете использовать как разделитель, за исключением NUL.

Существуют предложения по «исправлению» этой ситуации внутри POSIX, но они не помогут в решении текущей ситуации (см. также, как правильно работать с именами файлов). Если в качестве стандартного вывода не используется терминал, в режиме по умолчанию ls разделяет имена файлов переносами строк. И никаких проблем не возникает, пока не встретится файл, в имени которого есть перенос строки. Так как очень немногие реализации ls позволяют завершать имена файлов символаи NUL, а не переносами строк, это не позволяет получить безопасным образом список имён файлов при помощи ls (по крайней мере, портируемым способом).

Продолжение здесь

#туториал

#дайджест перед выходными

⬅️ Полезные модули PowerShell — переводчик в консоли, SpeedTest, Syslog и другие

⬅️ Graphpath — генерирует сетевую диаграмму ASCII из таблицы маршрутов Unix/Linux прямо в терминале

⬅️ Первая Межрегиональная конференция по ИБ — безопасность объектов КИИ, региональные практики ИБ, новые направления ИБ

⬅️ Скачать GitHub — китайский аналог GitHub с клонами оригинальных репозиториев

⬅️ Восстановление проблемных подов с нуля — подробный рассказ, что это, зачем и почему необходимо