Интересный пост от cloudflare о том как они напилили специального бота, который помогает им переживать аномалии и атаки. https://blog.cloudflare.com/meet-gatebot-a-bot-that-allows-us-to-sleep/
The Cloudflare Blog
Meet Gatebot - a bot that allows us to sleep
During traffic surges we spread the traffic across a very large number of edge servers. This architecture allows us to avoid having a single choke point.
Кстати, мы выступаем информационными партнерами для конференций xpdays и fwdays highload. Впервые в жизни выступаю информационным партнером чему-то более крупному чем ларьку с шавермой. Так что нам положены промокоды:
xpdays скидка 10%, самая большая среди партнеров: VPXPD10
fwdays highload 15% тут даже больше: ukrops-club-fwdays
xpdays скидка 10%, самая большая среди партнеров: VPXPD10
fwdays highload 15% тут даже больше: ukrops-club-fwdays
важные новости: неделю назад amazon анонсировала посекундный биллинг для EC2. Ссылка на новость: https://aws.amazon.com/blogs/aws/new-per-second-billing-for-ec2-instances-and-ebs-volumes/
Amazon
New – Per-Second Billing for EC2 Instances and EBS Volumes | Amazon Web Services
Back in the old days, you needed to buy or lease a server if you needed access to compute power. When we launched EC2 back in 2006, the ability to use an instance for an hour, and to pay only for that hour, was big news. The pay-as-you-go model inspired our…
Ребята из hostedgraphite рассказывают о том как они мониторят свои гиганские калстера. Избыточно, конечно, но должно неплохо работать.
https://blog.hostedgraphite.com/2017/07/06/continuous-self-testing-at-hosted-graphite-why-we-send-external-canaries-every-second/
https://blog.hostedgraphite.com/2017/07/06/continuous-self-testing-at-hosted-graphite-why-we-send-external-canaries-every-second/
Hostedgraphite
Continuous self-testing at Hosted Graphite — why we send external canaries, every second
At Hosted Graphite, it is of utmost importance to monitor our internal systems. Learn more on how our engineers use different types of canaries for continuous self-testing.
Очень интересная статья о визуализации данных из nginx в Elasticsearch. Однозначно очень полезно для прочитать или хотя бы пролистать. https://www.elastic.co/blog/machine-learning-for-nginx-logs
Elastic Blog
Machine Learning for Nginx Logs - Identifying Operational Issues with Your Website
Getting insight from nginx log files can be complicated. This blog shows how machine learning can be used to automatically extract operational insights from large volumes of nginx log data.
## Overvi...
## Overvi...
На самом деле не обязательно хранить все эти данные в эластике, можно вообще хоть в кликхаусе или уже агрегированные метрики в графите. Но эластик смотрится ультимативно.
интересный пост о том как стандартными тулами в линуксе запускать задачи параллельно.
https://www.pixelbeat.org/docs/unix-parallel-tools.html
https://www.pixelbeat.org/docs/unix-parallel-tools.html
www.pixelbeat.org
Parallel processing with unix tools
Tools for multi-processing on unix
Два интересных поста о скейлинге и netflix. Мастрид для всех кому интересна архитектура приложений.
https://medium.com/netflix-techblog/scaling-event-sourcing-for-netflix-downloads-episode-1-6bc1595c5595?source=rss----2615bd06b42e---4
https://medium.com/netflix-techblog/scaling-event-sourcing-for-netflix-downloads-episode-2-ce1b54d46eec?source=rss----2615bd06b42e---4
https://medium.com/netflix-techblog/scaling-event-sourcing-for-netflix-downloads-episode-1-6bc1595c5595?source=rss----2615bd06b42e---4
https://medium.com/netflix-techblog/scaling-event-sourcing-for-netflix-downloads-episode-2-ce1b54d46eec?source=rss----2615bd06b42e---4
Medium
Scaling Event Sourcing for Netflix Downloads, Episode 1
by Karen Casella, Phillipa Avery, Robert Reta, Joseph Breuer
Тем временем вчера проанонсировали Rancher 2.0 - систему окрестрации контейнеров, которая знаменита своей простотой в настройке и установке. Уже есть TECH PREVIEW. Ребята отказались от поддержки mesos, swarm и своей разработки (cattle) в пользу кубернетиса. Вообще интересно получилось с точки зрения единого человеческого UI для управления кластерами. Жаль только что от swarm отказались.
https://rancher.com/announcing-rancher-2-0/
https://rancher.com/announcing-rancher-2-0/
Крутое фото, правда? А ешё нас прорекламировали в катопсе - его ведёт один из наших, из украинских девопсов. Если вы хотите два авторитетных мнения на новости, подпишитесь на CatOps. Там котики. https://t.iss.one/catops
Telegram
CatOps
DevOps and other issues by Yurii Rochniak (@grem1in) - SRE @ Preply && Maksym Vlasov (@MaxymVlasov) - Engineer @ Star. Opinions on our own.
We do not post ads including event announcements. Please, do not bother us with such requests!
We do not post ads including event announcements. Please, do not bother us with such requests!
