Так что, нужны сетевики или нет? Наверное, телефонистам очень обидно, про них вообще не вспоминают :). Большой привет всем телефонистам, коллегам и не только, вы нужные и полезные, без сомнения.
У меня, изнутри профессии, вопрос так конечно не стоит, он вообще не стоит. Этой осенью даже случился аншлаг по количеству предложений поработать, в разных вариациях. Текущая ситуация, видимо, приоткрыла многим глаза на возможность удалённой работы, потому что от региона к региону количество вакансий отличается на порядки.
Любую профессию можно свести к механическим действиям, но самый смак начинается когда приходит понимание сути происходящего. И тут действительно, собственно как и в любой другой области, нужен широкий и разносторонний охват - сети это не только пару известных и мимикрирующих под них вендоров и технологий.
Нужно ли в современных условиях учиться новому, в частности программировать? Несомненно и не только в современных. Программирование, под которым я понимаю алгоритмы и работу c данными - базовая вещь. Никто лучше сетевика не сможет описать что ему надо, поэтому даже плохой код от сетевика, вероятно, будет справляться с задачей лучше чем идеальный и каноничный код программиста который никогда не видел сетей. Это не сама цель - это ещё один рабочий инструмент и у многих с кем мне приходилось встречаться он был в арсенале. Некоторые, даже, в программисты переквалифицируются, вам тоже привет :)
Как ни крути, все кто сейчас это прочитает, прочитает потому что сетевики постарались. Интернет всё ещё и во многом именно Net - от вашего провайдера, даже самого мелкого, проводного или сотового и до гигантов индустрии, где в каждом есть свой, совсем не мифический и не исчезающий профессионал по сетям, а часто целый отдел.
И тут привет всем сетевикам от сетевика, отдельный @Night_Snake и @Linkmeup :) и всей нашей общей, не большой, но тёплой сетевой Телеграм компании.
У меня, изнутри профессии, вопрос так конечно не стоит, он вообще не стоит. Этой осенью даже случился аншлаг по количеству предложений поработать, в разных вариациях. Текущая ситуация, видимо, приоткрыла многим глаза на возможность удалённой работы, потому что от региона к региону количество вакансий отличается на порядки.
Любую профессию можно свести к механическим действиям, но самый смак начинается когда приходит понимание сути происходящего. И тут действительно, собственно как и в любой другой области, нужен широкий и разносторонний охват - сети это не только пару известных и мимикрирующих под них вендоров и технологий.
Нужно ли в современных условиях учиться новому, в частности программировать? Несомненно и не только в современных. Программирование, под которым я понимаю алгоритмы и работу c данными - базовая вещь. Никто лучше сетевика не сможет описать что ему надо, поэтому даже плохой код от сетевика, вероятно, будет справляться с задачей лучше чем идеальный и каноничный код программиста который никогда не видел сетей. Это не сама цель - это ещё один рабочий инструмент и у многих с кем мне приходилось встречаться он был в арсенале. Некоторые, даже, в программисты переквалифицируются, вам тоже привет :)
Как ни крути, все кто сейчас это прочитает, прочитает потому что сетевики постарались. Интернет всё ещё и во многом именно Net - от вашего провайдера, даже самого мелкого, проводного или сотового и до гигантов индустрии, где в каждом есть свой, совсем не мифический и не исчезающий профессионал по сетям, а часто целый отдел.
И тут привет всем сетевикам от сетевика, отдельный @Night_Snake и @Linkmeup :) и всей нашей общей, не большой, но тёплой сетевой Телеграм компании.
Хабр
Сетевики (не) нужны
На момент написания этой статьи поиск на популярном работном сайте по словосочетанию «Сетевой инженер» выдавал около трёхсот вакансий по всей России. Для сравнения, поиск по фразе «системный...
Google рекламирует свои сервисы через запугивание страшными DDoS атаками. Тут больше интересны тренды, которые ещё бы наложить на рост трафика в их сети, чтобы понимать долю или превышение над обычными значениями.
Чтобы было с чем сравнивать. По трафику современные устройства на границе сети у провайдера могут перелопачивать десятки гигабит/c, включая
Гораздо важнее
А вот
Чтобы было с чем сравнивать. По трафику современные устройства на границе сети у провайдера могут перелопачивать десятки гигабит/c, включая
NAT
и нарезку скоростей каждому абоненту в одной коробке. Каналы в Интернет, соответственно, тоже где-то в этом диапазоне от единиц до сотен гигабит/c. Tier1 и Tier2 в своих пресс-релизах хвалятся суммарной пропускной способностью во всех направлениях в единицах терабит/c. Гораздо важнее
PPS
, типичные значения - несколько миллионов пакетов в секунду на устройство, опять же включая NAT
и нарезку скорости, а не просто маршрутизацию и пересылку трафика. По графикам Google здесь видно многократное превышение, но тут скорее всего мы имеем дело с суммарным значением распределённым по многочисленным точкам присутствия, а не атаке пришедшейся на одну точку. Как это работает можно послушать в докладе IVI на PF2018.А вот
RPS
мне не с чем сравнить, но тут дело не в количестве а в качестве, можно и одним запросом много дел натворить.Последнее время часто стали попадаться на глаза симуляторы работы сети, чтобы придумать и построить топологию, задать начальные условия и посмотреть что в итоге вышло. Ещё один, вот настолько простой насколько можно, при условии, что надо уметь в Python - NeST и вводная статья про него на APNIC. Простейшая топология умещается в несколько строчек:
Пока очень скудно с документацией и примерами, но можно читать исходный код и, скорее всего, авторы будут рады пообщаться.
n0 = Node('n0')
n1 = Node('n1')
(n0_n1, n1_n0) = connect(n0, n1)
n0_n1.set_address('10.0.0.1/24')
n1_n0.set_address('10.0.0.2/24')
n0_n1.set_attributes('5mbit', '5ms', 'pfifo')
n1_n0.set_attributes('10mbit', '100ms', 'pfifo')
flow = Flow(n0, n1, n1_n0.get_address(), 0, 10, 2)
exp = Experiment('tcp_1up')
exp.add_tcp_flow(flow, 'reno')
exp.run()
Пока очень скудно с документацией и примерами, но можно читать исходный код и, скорее всего, авторы будут рады пообщаться.
APNIC Blog
NeST: a simple,efficient tool to study congestion control | APNIC Blog
Guest Post: Network Stack Tester (NeST) is a simplified open-source Python package to perform networking experiments.
Просто замечательный пост для адептов Juniper про commit check.
Я сам частенько делаю сначала
Настоящие инженеры не должны поддаваться и идти на поводу у чувств и тратить своё время зря. Настоящие инженеры используют commit confirm, а уже потом
Я сам частенько делаю сначала
commit check
, а сразу потом commit
. Тут дело не во времени, пока мои конфигурации не выросли до таких размеров чтобы применяться по 15 минут. Дело в уверенности, пусть это и чисто психологический момент. Ведь технически нет никакой разницы - commit
в любом случае проверит конфигурацию на синтаксическую корректность перед применением. Но когда процесс финального применения внезапно прерывается ошибкой, где-то начинает грустить один администратор. Это как спотыкнуться и упасть перед самым финишем.Настоящие инженеры не должны поддаваться и идти на поводу у чувств и тратить своё время зря. Настоящие инженеры используют commit confirm, а уже потом
commit check
.Mom, Network Engineer, Juniper Ambassador
Commit check immediately followed by commit?
I am on mission to prevent people from getting into the habit of making configuration changes in Junos and, when the time comes to activating them, doing a commit check, immediately followed by a c…
Не бывает мало IPv4 адресов, бывает мало денег. Показательно, к вопросу о нехватке, что "про запас" лежит почти половина, так у всех интересно? И, конечно, никто не будет раскулачивать
legacy
блоки, они вполне уходят по рыночной цене.Andree's Musings
AWS and their Billions in IPv4 addresses
Earlier this week, I was doing some work on AWS and wanted to know what IP addresses were being used. Luckily for me, AWS publishes this all here https://ip-ranges.amazonaws.com/ip-ranges.json. When you go through this list, you’ll quickly see that AWS has…
За последние 1,5 недели посмотрел весь Next Hop 2020 - всё очень качественно, почти без провисов в докладах, стоит обязательно уделить время и, как минимум, посмотреть по темам которые заинтересовали. Мой шорт-лист:
- Александр Азимов наконец-то показал реальное полезное применение
- OpenVPN для удалёнки, если вы Яндекс. Хороший конкретный доклад, как готовить удалённый доступ. Очень точно про необходимость туннелей поверх
- Очень познавательно и доступно про программируемые сетевые функции, язык
Из остального. Большие и известные рассказали как внутри у них работает:
- Mail.ru про свой антиDDoS - стильно, модно, молодёжно - SYN cookie, Python, Go, FlowBGP, Kubernetes.
- МТС про автоматизацию. Если вдруг в конце года будет что-то падать, знайте, они на прод выкатывать это собирались.
- Qrator про Linux switchdev на whitebox. Со стороны интерфейса пользователя это всё ещё обычный Linux, поэтому по-старинке в Qrator сделали Perl скрипты к нему, чтобы хоть как-то усложнить. Кроме шуток, это настолько просто, что не пришлось ничего патчить, что даже вызвало удивление у ведущего - берите и используйте.
Тренды:
- Сетевые карты умнеют, что в частности позволяет использовать Linux в коммутаторах, а коммутаторы в облаках. Хороший обзор подходов, архитектур и технологий. Любимые уже всеми
- А телеметрия спускается всё глубже и глубже, если это BGP то непосредственно до
- Segment Routing. При том что докладчик постоянно ссылался на то что "все должны знать" получился хороший ликбез по
- Terraform и автоматизация развёртывания. Похоже,
И чистая наука, как мне показалось, доклад про машинное обучение и как для этого строить сети и почему удобнее совмещать сеть и обработчики.
Не пропускайте, смотрите, потому что скоро Пиринговый форум 2020 online, который тоже не стоит упускать из виду.
- Александр Азимов наконец-то показал реальное полезное применение
IPv6
не связанное с размером адреса (шутка). На самом деле, хватило бы ещё одного поля в IPv4
, но взять его негде. А звёзды сложились так, что Flow Label
удачно вписался в современные архитектуры датацентров, да ещё и нужные реализации в Linux оказались. Поэтому IPv6
- практически без альтернатив.- OpenVPN для удалёнки, если вы Яндекс. Хороший конкретный доклад, как готовить удалённый доступ. Очень точно про необходимость туннелей поверх
TCP
, поэтому, кстати, OpenVPN и мой личный выбор.- Очень познавательно и доступно про программируемые сетевые функции, язык
P4
, но в основном как это обеспечивается железом. От основ и принципов до программируемости и гибкости. Это уровень управления каждым отдельно взятым пакетом на очень и очень больших скоростях, потому что в железе.Из остального. Большие и известные рассказали как внутри у них работает:
- Mail.ru про свой антиDDoS - стильно, модно, молодёжно - SYN cookie, Python, Go, FlowBGP, Kubernetes.
- МТС про автоматизацию. Если вдруг в конце года будет что-то падать, знайте, они на прод выкатывать это собирались.
- Qrator про Linux switchdev на whitebox. Со стороны интерфейса пользователя это всё ещё обычный Linux, поэтому по-старинке в Qrator сделали Perl скрипты к нему, чтобы хоть как-то усложнить. Кроме шуток, это настолько просто, что не пришлось ничего патчить, что даже вызвало удивление у ведущего - берите и используйте.
Тренды:
- Сетевые карты умнеют, что в частности позволяет использовать Linux в коммутаторах, а коммутаторы в облаках. Хороший обзор подходов, архитектур и технологий. Любимые уже всеми
DPDK
, eBPF
и не только.- А телеметрия спускается всё глубже и глубже, если это BGP то непосредственно до
UPDATE
ов, если это коммутаторы, то до пакетного процессора.- Segment Routing. При том что докладчик постоянно ссылался на то что "все должны знать" получился хороший ликбез по
SR
и SRv6
для тех кто совсем ничего не знает.- Terraform и автоматизация развёртывания. Похоже,
GUI
проигрывает раунд, если со всеми фишечками и рюшечками интерфейсов Cisco ACI и vCenter удобнее использовать Terraform и Ansible. Основной накал теперь CLI
vs. API
.И чистая наука, как мне показалось, доклад про машинное обучение и как для этого строить сети и почему удобнее совмещать сеть и обработчики.
Не пропускайте, смотрите, потому что скоро Пиринговый форум 2020 online, который тоже не стоит упускать из виду.
Next Hop 2020: онлайн-конференция по сетям
12 октября мы в третий раз проведём ежегодную международную конференцию по сетевым технологиям Next Hop. В этом году конференция пройдёт в онлайн-формате.
Всем известно что программисты праздник HelloWin не отмечают, они делают более страшные вещи - ip -json addr. Для следящих за Linux это, конечно, не новость.
С ходу не могу придумать достойного применения и не хочется думать что это сериализация ради сериализации. Это уже интерфейс командной строки поверх системных вызовов и структур сетевой подсистемы. При использовании, того же Python, туда проще добираться не используя шелл и вызов внешних утилит, по пути ещё и форматы преобразовывать. А вот пропихивать это для отправки на удалённый узел - может быть.
Unix-way выглядит скорее так - jc. Одна утилита, один функционал, а то и так уже опций больше чем букв в алфавите. Но раз уж сделали, так пусть будет. На всех не угодишь, но кому-то точно пригодится.
С ходу не могу придумать достойного применения и не хочется думать что это сериализация ради сериализации. Это уже интерфейс командной строки поверх системных вызовов и структур сетевой подсистемы. При использовании, того же Python, туда проще добираться не используя шелл и вызов внешних утилит, по пути ещё и форматы преобразовывать. А вот пропихивать это для отправки на удалённый узел - может быть.
Unix-way выглядит скорее так - jc. Одна утилита, один функционал, а то и так уже опций больше чем букв в алфавите. Но раз уж сделали, так пусть будет. На всех не угодишь, но кому-то точно пригодится.
Twitter
Przemek Rogala - ttl255.com
#Linux 'ip address' command can natively output result in #json format. No parsing needed in your scripts!
Forwarded from Мониторим ИТ
Pktvisor: Open source tool for network visibility
NS1 announced that pktvisor, a lightweight, open source tool for real-time network visibility, is available on Github. Читать дальше.
Репыч на Гитхабе.
NS1 announced that pktvisor, a lightweight, open source tool for real-time network visibility, is available on Github. Читать дальше.
Репыч на Гитхабе.
OVH открыли своё решение в области защиты доступа к инфраструктуре - The Bastion. А кому нужно попроще, можно обойтись Jump host, только про управление ключами не забыть.
Twitter
Stéphane Lesimple
📣The Bastion is now opensource! So glad we could finally make it happen! The announcement is here: https://t.co/1FjBht9qL1. Head on to the GitHub page https://t.co/e98dr0xGzo to give it a try, now you have something to play with this weekend ;)
Про механизмы перехода
IPv4 -> IPv6
уже почти забыли. Кто помнит про Teredo
, 6to4
давно deprecated, да и туннельные брокеры совсем не на слуху. На сцену выходят обратные решения из IPv6 в IPv4 и это о многом говорит.Dual stack
дороже по причине поддержки двух сетей, в одной из которой по прежнему выделены гигантские мощности под NAT
. При этом затраты на него будут меньше, по сравнению с чистой IPv4
сетью, если рядом будет IPv6
куда пойдёт трафик, но это тоже траты.Как сделать узел проекта AS112 в Польше. И почему BIRDv2 лучше для этого чем
FRRouting
, даже не смотря на непохожесть своей конфигурации на весь остальной BGP
мир. Понятный пример, как раз этой самой конфигурации есть в статье, чтобы было проще начать.lukasz.bromirski.net
AS112
thanks to inspiration from Robert Woźny, i’ve just launched two separate AS112 sites in Poland. that would never be possible without great folks at ATMAN:
Sebastian Olejnik and Damian Nowacki …and at EPIX:
Krzysztof Czuszek and Paweł Staszewski what…
Sebastian Olejnik and Damian Nowacki …and at EPIX:
Krzysztof Czuszek and Paweł Staszewski what…
Для кого выходной не выходной и праздник не праздник, если вдруг заскучали можно на выбор:
- собрать небольшую лабу с 6PE на Juniper. Там местами итальянский, но большая часть это диаграммы и конфигурации, что понятно всем
- или погрузиться в историю Unix и почитать мануалы, правда в третьей редакции, но всё равно к оригинальной системе. Не находите, что мало что поменялось? 1973 год.
- собрать небольшую лабу с 6PE на Juniper. Там местами итальянский, но большая часть это диаграммы и конфигурации, что понятно всем
- или погрузиться в историю Unix и почитать мануалы, правда в третьей редакции, но всё равно к оригинальной системе. Не находите, что мало что поменялось? 1973 год.
www.massimilianosbaraglia.it
Massimiliano Sbaraglia - ipv6 over ipv4 backbone mpls mpbgp labeled-unicast on Juniper technologies router 6PE
Глобальный проект вторичного DNS для всех желающих, если готовы доверять. От человека который пару лет назад просто хотел разобраться как работает Интернет, но видимо увлёкся.
Статистика задержек и запросов.
Статистика задержек и запросов.
NS-Global DNS Service
About
A free secondary DNS service which will AXFR your DNS zones to an anycast constellation of servers to help improve the availability and performance of your websites and personal projects.
Пока сети строятся для людей и управляются людьми они должны быть им понятны. Отсюда возникают закономерности по которым можно понять их внутреннее устройство. Понятные и удобные имена в обратных зонах одна из таких вещей, даже больше - наличие читабельного имени в трассировке отличительная черта хорошей сети, одно из негласных соглашений. Конечно этим можно пользоваться, возможно это даже риск с точки зрения безопасности.
Очередная работа, в которой из имён хостов (маршрутизаторов) извлекается их принадлежность к
Очередная работа, в которой из имён хостов (маршрутизаторов) извлекается их принадлежность к
AS
. Почему бы не вытащит принадлежность к AS
по IP
адресу, ведь она будет однозначная? Это плохо работает на границе сетей, где стыковочный адрес может принадлежать не своей AS
.CAIDA
Learning to Extract and Use ASNs in Hostnames
This slideset was presented at: ACM Internet Measurement Conference (IMC) (October 2020)
Это как-то странно, даже очень странно. Похоже на какой-то очень хитрый план. В целом офлайновый Cisco Day проходит хорошо, а вот зачем это делать так? Я точно не та целевая аудитория.
Telegram
Патчкорд
Давненько я не был на IT мероприятиях в родном городе, но тут случился Cisco Day в прошедший четверг. Не знаю насколько долго ссылка останется доступной, регистрироваться точно не надо, всё уже прошло :)
В общем, ничего особенного: несколько промо выступлений…
В общем, ничего особенного: несколько промо выступлений…