Facebook скрестил машинное обучение и QUIC заменив там стандартный механизм реагирования на заторы. Будущее сетей, одно из возможных.
Meta
Open-sourcing mvfst-rl, a research platform for managing network congestion with reinforcement learning
We’re open-sourcing a new platform for experimenting with reinforcement learning to proactively adapt to changing traffic patterns.
Просто про IPv6 Neighbor Discovery, типы
ICMP
, адреса, кто кому что посылает, RS
, RA
с описание флагов, NS
и NA
, ещё DAD
. Есть примеры дампов. Не сильно глубоко, но достаточно для понимания что к чему. Те самые основы без которых ничего не работает и забыть, или не знать которые может выйти очень дорого потом.mrn-cciew
IPv6 Neighbor Discovery
If you are keeping a blog, you know you have to write & publish posts at the right time without taking too much time on a post. Sometime you start a blog post and never finishes. Sometime diffi…
Вторая версия черновика про устойчивый BGP от NIST, стоит обратить внимание на комментарии к предыдущей части, так можно последить за мыслью автора и смыслом который он вкладывает в документ.
С практической точки зрения можно посмотреть ещё на список ресурсов приводимый Job Shijders в рассылке Nanog, там ссылки на презентации и примеры рабочих конфигураций.
С практической точки зрения можно посмотреть ещё на список ресурсов приводимый Job Shijders в рассылке Nanog, там ссылки на презентации и примеры рабочих конфигураций.
Telegram
Патчкорд
Черновик рекомендаций по безопасному обмену трафиком между участниками Интернета. Документ разбит на разделы по видам возможных атак и точек их приложения.
В тексте отдельно выделены рекомендации (Security Recommendation №), касающиеся как конкретных настроек…
В тексте отдельно выделены рекомендации (Security Recommendation №), касающиеся как конкретных настроек…
Базовые команды для Linux сети - посмотреть адреса и интерфейсы, добавить маршруты, сделать подинтерфейс на виланах. Примеры для ip и nmcli (NetworkManager).
Обратите внимание на флаг
Обратите внимание на флаг
-brief|-br
. Удобный, компактный вывод, чтобы увидеть самое важное по одной строчке на интерфейс.AboutNetworks.net
Basic Linux Networking tips and tricks part-1: ip and nmcli commands • AboutNetworks.net
Basic Linux Networking tips and tricks part-1: Basics of Linux networking with ip commands and nmcli (NetworkManager) commands.
Forwarded from Network Warrior
IX-API An Application Programming Interface for Interconnection Services.
IXP-ребята решили скооперироваться и разработать REST API для взаимодействия с кастомерами : провижининг L2 сервисов, регистрация MAC адреса клиентского роутера, конфигурация сессии с RS. В roadmap : статистика, мониторинг и даже управление физическими коннектами (наверно отсылка к path robot от DECIX).
Приглашают участвовать в разработке не только непосредственно IXP, но и клиентов.
Сайт: https://ix-api.net/
Видео презентации: https://ripe79.ripe.net/archives/video/295
Слайды: https://ripe79.ripe.net/wp-content/uploads/presentations/136-RIPE79_TK_IX-API_Introduction_Final.pdf
IXP-ребята решили скооперироваться и разработать REST API для взаимодействия с кастомерами : провижининг L2 сервисов, регистрация MAC адреса клиентского роутера, конфигурация сессии с RS. В roadmap : статистика, мониторинг и даже управление физическими коннектами (наверно отсылка к path robot от DECIX).
Приглашают участвовать в разработке не только непосредственно IXP, но и клиентов.
Сайт: https://ix-api.net/
Видео презентации: https://ripe79.ripe.net/archives/video/295
Слайды: https://ripe79.ripe.net/wp-content/uploads/presentations/136-RIPE79_TK_IX-API_Introduction_Final.pdf
Akamai хвалится что может прокачать 100Тбит/c своей сетью. Это не какая-то одна локация или несколько, а множество серверов размазанных по всему миру (почему-то помню что про это давно было на Habr, но найти не смог). И вступить в эту сеть можно достаточно просто, получив профит в виде экономии внешней полосы в сторону магистрального провайдера и лучшего отклика для многих и многих ресурсов.
Akamai
A Peak at the Edge: Akamai Sets New Traffic Benchmark
Last week Akamai reached a significant milestone when traffic on our intelligent edge platform exceeded the threshold of 100 Tbps (terabits per second) for the first time in our history, peaking at 106 Tbps. To put that volume of traffic...
Досмотрел запись NextHop 2019. Обязательно к просмотру про безопасность в BGP от Александра Азимова, история вопроса и что делать - принимать стандарт и использовать
Про мониториг от Александра Клименко интересно было слушать как удачный опыт применения
Для остального, наверное, надо знать больше деталей, чтобы оценить насколько всё сделано. Для больших сетей никто не использует решения из коробки, все пишут под себя то что нужно, непосредственно, используя какие-то сетевые фреймворки, или дорабатывают решения которые уже кто-то написал. Собственно это логично, каждые сети индивидуальны на своём уровне, про ведущих игроков можно определённо говорить что они уникальны и ничего готового точно не будет ни протоколов, ни алгоритмов, поэтому они и ведущие.
Практически не было вопросов из зала, кроме последнего доклада Васильева Михаила из Facebook, которые тут были более чем в тему. Посмотреть целиком определённо стоит, запись по таймеру почти 9 часов, но там есть долгие перерывы.
ASPA
. Наверное, самый качественный и понятный доклад, может быть ошибаюсь потому что более менее на слуху.Про мониториг от Александра Клименко интересно было слушать как удачный опыт применения
DSCP
в не совсем стандартном качестве. По сути это единственное свободное поле в IP
заголовке которое можно заполнить какими-то данными и многие устройства на это способны реагировать, как минимум считать без дополнительной обвязки. Но использовать его сложно, мы пытались. Надо очень, очень, очень и очень контролировать приложения и устройства своей сети, потому что в нём может быть всё - от откровенного мусора до правильных, но не нужных вещей в конкретном месте. А ещё про математику в мониторинге, на мой взгляд тоже очень понятный доклад.Для остального, наверное, надо знать больше деталей, чтобы оценить насколько всё сделано. Для больших сетей никто не использует решения из коробки, все пишут под себя то что нужно, непосредственно, используя какие-то сетевые фреймворки, или дорабатывают решения которые уже кто-то написал. Собственно это логично, каждые сети индивидуальны на своём уровне, про ведущих игроков можно определённо говорить что они уникальны и ничего готового точно не будет ни протоколов, ни алгоритмов, поэтому они и ведущие.
Практически не было вопросов из зала, кроме последнего доклада Васильева Михаила из Facebook, которые тут были более чем в тему. Посмотреть целиком определённо стоит, запись по таймеру почти 9 часов, но там есть долгие перерывы.
Next Hop 2019: Конференция по сетям
7 октября в московском офисе Яндекса пройдет ежегодная международная конференция по сетям Next Hop. Доклады будут интересны техническим специалистам, которые проектируют и эксплуатируют большие сети или разрабатывают программы для обработки и маршрутизации…
Перевод двух отличных статей про то что современные процессоры умнее программистов, это цена за скорость. Вторая часть статьи, на самом деле вторая статья в оригинале, это хорошо показывает, когда каждая следующая попытка всё увеличивает и увеличивает точность предсказаний - процессор "учится".
А когда-то всё начиналось с простейших: "Сейчас был переход, значит следующий тоже будет" - та самая вероятность в
А когда-то всё начиналось с простейших: "Сейчас был переход, значит следующий тоже будет" - та самая вероятность в
50/50
при случайном ветвлении.Хабр
Ошибочно предсказанное ветвление может в разы увеличить время выполнения программы
Современные процессоры суперскалярны, то есть способны выполнять несколько инструкций одновременно. Например, некоторые процессоры могут обрабатывать за цикл от...
Ещё немного о железе. Рекламный пост про 400Гбит/c чип, что само по себе хорошо, если рекламируют то значит есть рынок, спрос, области применения, массовость. Интересно, что с точки зрения реализации, законы физики остаются неприступной границей, однако подбираться к ней можно бесконечно близко.
Хочешь больше скорости, расширяй рабочую полосу спектра или увеличивай количество состояний и частоту. Сильно не расширишься, да и по частотам не попрыгаешь как хочется, везде разное затухание и потери. Но можно подобрать в старых границах то что раньше не смогли, потому что точности не хватало.
Чем больше количество состояний тем меньше между ними разницы, тем больше вероятность спутать одно с другим и ошибиться, поэтому и здесь предел вполне ощутимый.
В итоге, в одном чипе (пишут что впервые) удалось уместить 3x400Гбит/c (
Хочешь больше скорости, расширяй рабочую полосу спектра или увеличивай количество состояний и частоту. Сильно не расширишься, да и по частотам не попрыгаешь как хочется, везде разное затухание и потери. Но можно подобрать в старых границах то что раньше не смогли, потому что точности не хватало.
Чем больше количество состояний тем меньше между ними разницы, тем больше вероятность спутать одно с другим и ошибиться, поэтому и здесь предел вполне ощутимый.
В итоге, в одном чипе (пишут что впервые) удалось уместить 3x400Гбит/c (
1,2Tбит/c
) в одном канале внутри датацентра, увеличив ширину спектра до 150ГГц
, эволюция начиналась с 50
. В рамках города уже 2x400
, дальше меньше - сильнее потери, надо меньше состояний, другая модуляция. Ждём пока доберётся до персоналок, а пока ищем в DWDM
решениях.Acacia Communications, Inc.
Is Your Network Ready for 400GbE? - Acacia Communications, Inc.
Bandwidth-intensive applications such as video streaming, virtual and augmented reality, artificial intelligence, and enterprise cloud services have been driving the ongoing rise of optical networking bandwidth requirements.
Forwarded from Cybershit
Ого-го!
Лаборатория Касперского анонсировала бесплатный доступ к своему Threat Intelligence Portal для всех желающих!
https://opentip.kaspersky.com/
Первая моя ассоциация была примерно такой: Ого, появился русский аналог VirusTotal! Но в блоге, посвященном анонсу, ребята из ЛК это опровергают и выделяют следующие причины: их продукт использует больше технологий обнаружения, чем это делает зарубежный аналог, весь анализ проводится собственными средствами и технологиями, без привлечения внешних систем, а результаты анализа не доступны широкому кругу подписчиков, как это сделано на VirusTotal.
Хотя платная подписка для получения той самой Threat Intelligence все же присутствует :)
Бложик: https://eugene.kaspersky.com/2019/10/24/open-tip/
Лаборатория Касперского анонсировала бесплатный доступ к своему Threat Intelligence Portal для всех желающих!
https://opentip.kaspersky.com/
Первая моя ассоциация была примерно такой: Ого, появился русский аналог VirusTotal! Но в блоге, посвященном анонсу, ребята из ЛК это опровергают и выделяют следующие причины: их продукт использует больше технологий обнаружения, чем это делает зарубежный аналог, весь анализ проводится собственными средствами и технологиями, без привлечения внешних систем, а результаты анализа не доступны широкому кругу подписчиков, как это сделано на VirusTotal.
Хотя платная подписка для получения той самой Threat Intelligence все же присутствует :)
Бложик: https://eugene.kaspersky.com/2019/10/24/open-tip/
Если у вас вдруг когда нибудь возникал вопрос, почему стандартное разрешение текстового терминала
Читать долго, но интересно. Давным, давно... всё началось из-за денег.
80x25
, то вот вам ответ - https://exple.tive.org/blarg/2019/10/23/80x25/Читать долго, но интересно. Давным, давно... всё началось из-за денег.
Инструмент мониторинга состояния префиксов на различных точках обмена трафиком от Oracle. Проверяет подписи
Общая информация есть в блоге, там же беглый обзор возможностей.
RPKI
, записи в IRR
, наличие в SPAMHAUS
и BOGONS
(специальные, не публичные, не назначенные префиксы). Есть общая статистика по каждой IXP
, наших нет, зато других много. Префиксы можно просмотреть отдельно и там своя статистика.Общая информация есть в блоге, там же беглый обзор возможностей.
В начале недели состоялась Internet Measurement Conference /19, много серьёзных публикаций от более чем серьёзных докладчиков. Темы очень разные и всё читать, наверное, не имеет смысла, но интересные должны найтись.
Мой взгляд зацепился за анализ первой проведённой смены мастер ключа DNS - KSK Rollover, кто следил за ситуацией должно быть интересно узнать чем всё кончилось. Много графиков и подробностей. Дело сложное и совсем гладко оно пройти не могло, об этом стоит прочитать.
Ещё, про то как выбрать имена маршрутизаторов из доменного имени. Имена придумывает человек, поэтому можно догадаться (научиться) и выбрать ту часть имени которая соответствует названию маршрутизатора, а не интерфейсу или чему-то другому. Практически никогда нет сложности другому человеку понять где это название спрятано, вопрос в том как это сделать автоматически. Тут нужен формальный подход, который реализован через регулярные выражения. Рабочий инструмент можно увидеть установив пакет Scamper и воспользовавшись утилитой sc_hoiho.
Мой взгляд зацепился за анализ первой проведённой смены мастер ключа DNS - KSK Rollover, кто следил за ситуацией должно быть интересно узнать чем всё кончилось. Много графиков и подробностей. Дело сложное и совсем гладко оно пройти не могло, об этом стоит прочитать.
Ещё, про то как выбрать имена маршрутизаторов из доменного имени. Имена придумывает человек, поэтому можно догадаться (научиться) и выбрать ту часть имени которая соответствует названию маршрутизатора, а не интерфейсу или чему-то другому. Практически никогда нет сложности другому человеку понять где это название спрятано, вопрос в том как это сделать автоматически. Тут нужен формальный подход, который реализован через регулярные выражения. Рабочий инструмент можно увидеть установив пакет Scamper и воспользовавшись утилитой sc_hoiho.
Почему-то, в связи с этими рассуждениями вспомнилась давнишняя статья про Fault Management System и как автор видел идею этого в NOC Project: https://habr.com/ru/post/126051/
Хабр
NOC: Введение в Fault Management
События и аварии являются неотъемлемым элементом эксплуатации сети. Ежесекундно фиксируются тысячи событий, служба эксплуатации постоянно занята устранением нескольких аварий, еще несколько аварий...
Forwarded from CatOps
Grafana делятся своими предположениями о будущем observability
1. Больший акцент на корреляциях между метриками, логами и трейсами
2. Использование новых сигналов для анализа (как, например, профайлеры)
3. Аггрегация логов без индексов
#observability
1. Больший акцент на корреляциях между метриками, логами и трейсами
2. Использование новых сигналов для анализа (как, например, профайлеры)
3. Аггрегация логов без индексов
#observability
Grafana Labs
What's Next for Observability | Grafana Labs
It's no longer just about metrics, logs, and traces. Grafana Labs' VP of Product Tom Wilkie and Red Hat Software Engineer Frederic Branczyk make some bold predictions for the future of observability.
Кто старое помянет, тому глаз вон - как собрать dial-up сервер у себя на столе, включая телефонную станцию, используя доступные (современные) решения.
Модемный доступ не совсем история, не везде. Не знаю как это выглядело в то время, в комментариях пишут что точь в точь. Мне кажется, у провайдеров побольше модемы какие-нибудь стоечные были и многоканальные.
Модемный доступ не совсем история, не везде. Не знаю как это выглядело в то время, в комментариях пишут что точь в точь. Мне кажется, у провайдеров побольше модемы какие-нибудь стоечные были и многоканальные.
X (formerly Twitter)
Zorin =^o.o^= (@zorinlynx) on X
This is what an ISP modem rack looked like in 1996. Yes, this was a real ISP in Miami.
I loved that era. It was like the wild wild west of IT.
I loved that era. It was like the wild wild west of IT.
Вчера был день рождения у netcat, инструмент который стоит ввести в свой арсенал, если он ещё не там. А завтра обещают юбилей Интернету, но праздновать можно всю неделю :)
seclists.org
Bugtraq: New tool available: Netcat
Ещё один привет из вечности - цветной ANSI ASCII Art. Настоящее искусство.
Обязательно к прочтению: хронология аварии - пожар в датацентре. Взгляд со стороны админов Одноклассников. Лучший способ научиться на чужом опыте, или хотя бы задуматься. Даже для ситуаций на которые объективно нельзя повлиять, надо быть готовыми к тому чтобы встать, выйти и выключить за собой свет, возможно остаться в живых.
Пожар случился вот здесь. По ссылке оценка ситуации со стороны датацентра.
Пожар случился вот здесь. По ссылке оценка ситуации со стороны датацентра.
Хабр
«Тушить» ли сервера, если «загорелся» смоук тест датацентра?
Что бы вы почувствовали, если в один прекрасный летний день дата-центр с вашим оборудованием стал бы выглядеть вот так? Всем привет! Меня зовут Дмитрий Самсон...
Не DMVPN единым, если хочется построить большую, масштабируемую, распределённую корпоративную сеть. Подробная концепция с описанием использования
6rd
совместно с GETVPN
для замены более традиционного подхода от Nicholas Russo в pdf.Twitter
Nicholas Russo
Just published a free whitepaper using 6rd/GETVPN as an alternative for enterprise WANs that need high scalability at the expense of feature richness. Inspired by my years working with tactical networks. Thank you to all who reviewed it! https://t.co/RRikf4XYFN