Вспомнил немного C++ и довёл до ума попугаеметр для VPS.
Новая VPS от Селектел (xeon gold 6240, сверху) быстрее старой от makecloud.ru (неизвестный haswell, в середине) в полтора раза и даже быстрее моей домашней машины (i7-4771, снизу).
Исходник и исполняемый файл выложил на гит https://git.ssleg.tech/anton/CPUSpeed
На любых Ubuntu машинах будет работать и скорее всего на всех линуксах, ибо используются только стандартные вызовы.
Новая VPS от Селектел (xeon gold 6240, сверху) быстрее старой от makecloud.ru (неизвестный haswell, в середине) в полтора раза и даже быстрее моей домашней машины (i7-4771, снизу).
Исходник и исполняемый файл выложил на гит https://git.ssleg.tech/anton/CPUSpeed
На любых Ubuntu машинах будет работать и скорее всего на всех линуксах, ибо используются только стандартные вызовы.
Эшу снова активен и описывает свой тяжёлый энтерпрайз.
Как быстро искать данные в таблице весом в терабайт?
Как вляпяться в монгу, и зачем.
Кролики очереди сообщений.
И другие интересные истории. Подписывайтесь.
P. S. Автор присутствует здесь, в чате и комментариях, вызывается упоминанием @EshuMarabo. Свой чат ему заводить некогда.
Как быстро искать данные в таблице весом в терабайт?
Как вляпяться в монгу, и зачем.
Кролики очереди сообщений.
И другие интересные истории. Подписывайтесь.
P. S. Автор присутствует здесь, в чате и комментариях, вызывается упоминанием @EshuMarabo. Свой чат ему заводить некогда.
Telegram
Эшу быдлокодит
Проект Палантир (сборщик данных с телеграма), часть 20.
Ускорение поиска. Оценить результат вы можете в боте: @palantir_search_bot
В какой-то момент, читая про то, как работает постгрес по одной из ссылок в этом посте, я наткнулся на упоминание, что можно…
Ускорение поиска. Оценить результат вы можете в боте: @palantir_search_bot
В какой-то момент, читая про то, как работает постгрес по одной из ссылок в этом посте, я наткнулся на упоминание, что можно…
Цифровой ГУЛАГ. Воспоминания о будущем #2
Спикер ГД Володин, вчера прикрутил чатик к посту о QR кодах. К утру набежало уже 240к комментов и праздник продолжается.
Читать это глазами незачем, но всегда придёт на помощь ИИ, обученый на ключевые слова из предыдущих набегов.
Что я хочу отметить.
1) Это не боты в подавляющем большинстве случаев. Есть такая сетка, которая пишет комменты типа "я за qr коды", но она в диапазоне 16/07-22/09 зарегистрирована.
Разбивка по диапазонам дат регистрации, даёт примерно одно распредение людей. Ботнеты в нем теряются на уровень фона.
2) Это самый большой банлист в истории, который можно использовать для автобана животных. Будущее уже здесь - никто не будет читать глазами. Весовые коэффициенты выше порога - не человек. Причём писал я это левой ногой за час, то есть качество так себе.
3) A/B тест сделан, качество ±20/15%. И самое смешное, что никто не гарантирует, что такого "качества" ИИ не будет применяться в более серьёзных системах. :)
Спикер ГД Володин, вчера прикрутил чатик к посту о QR кодах. К утру набежало уже 240к комментов и праздник продолжается.
Читать это глазами незачем, но всегда придёт на помощь ИИ, обученый на ключевые слова из предыдущих набегов.
Что я хочу отметить.
1) Это не боты в подавляющем большинстве случаев. Есть такая сетка, которая пишет комменты типа "я за qr коды", но она в диапазоне 16/07-22/09 зарегистрирована.
Разбивка по диапазонам дат регистрации, даёт примерно одно распредение людей. Ботнеты в нем теряются на уровень фона.
2) Это самый большой банлист в истории, который можно использовать для автобана животных. Будущее уже здесь - никто не будет читать глазами. Весовые коэффициенты выше порога - не человек. Причём писал я это левой ногой за час, то есть качество так себе.
3) A/B тест сделан, качество ±20/15%. И самое смешное, что никто не гарантирует, что такого "качества" ИИ не будет применяться в более серьёзных системах. :)
Касательно заявления антиваксы, что у Володина трут комменты. Таки правда трут и даже не надо уметь программировать, чтобы это подтвердить.
Выделяем самый последний комментарий, нажимаем "скопировать ссылку".
Номер комментария - 401403. А вверху мы видим, что 381133 комментария. Вот эту разницу, 20 с копейками тысяч комментов уже убили.
Вчера чат стартовал с коммента номер 1, то есть был свежесозданным и нумерация идёт всегда подряд.
Выделяем самый последний комментарий, нажимаем "скопировать ссылку".
Номер комментария - 401403. А вверху мы видим, что 381133 комментария. Вот эту разницу, 20 с копейками тысяч комментов уже убили.
Вчера чат стартовал с коммента номер 1, то есть был свежесозданным и нумерация идёт всегда подряд.
Минута пятничного ржача.
Люди, которые умеют неиронично использовать "бест-практисес" существуют и живут среди нас.
Вся статья нажористая и обсуждение тоже.
Upd: канал автора https://t.iss.one/nickmitinsays
Люди, которые умеют неиронично использовать "бест-практисес" существуют и живут среди нас.
Вся статья нажористая и обсуждение тоже.
Upd: канал автора https://t.iss.one/nickmitinsays
А вы знали, что на гитхаб ещё и сайты можно делать?
Совершенно бесплатно, можете сделать себе сайт-визитку с именем my_username.github.io.
Например, вот такую https://dkobak.github.io/
Единственный "недостаток", что сайт поддерживает только статические страницы.
Совершенно бесплатно, можете сделать себе сайт-визитку с именем my_username.github.io.
Например, вот такую https://dkobak.github.io/
Единственный "недостаток", что сайт поддерживает только статические страницы.
Великая битва при Володине потихоньку стихает. Счётчик сообщений ещё крутится и перевалил 600к, но новых юзеров практически не вливается, с 10 утра только 7452 новых.
Для того, чтобы закрыть тему с "а это все боты" я сделал две вещи:
1) раскладку аккаунтов по возрасту. Как видите, в основном они зарегистрированы давно.
2) раскладку по количеству сообщений на пользователя. 88.5% пользователей оставили в этом мегатреде от 1 до 5 сообщений. Да, там есть уникумы, рекордсмен оставил 1340 сообщений, но он такой один.
В итоге мы видим, что в телеграм, на максимальной мобилизации, антивакса может выставить моб в 100к человек, плюс минус лапоть.
Неплохо, для того чтобы атаковать чаты, но не более того. Значимой частью населения это никак не является. :)
P. S. Обновления сводок переезжают в комменты этого поста.
Для того, чтобы закрыть тему с "а это все боты" я сделал две вещи:
1) раскладку аккаунтов по возрасту. Как видите, в основном они зарегистрированы давно.
2) раскладку по количеству сообщений на пользователя. 88.5% пользователей оставили в этом мегатреде от 1 до 5 сообщений. Да, там есть уникумы, рекордсмен оставил 1340 сообщений, но он такой один.
В итоге мы видим, что в телеграм, на максимальной мобилизации, антивакса может выставить моб в 100к человек, плюс минус лапоть.
Неплохо, для того чтобы атаковать чаты, но не более того. Значимой частью населения это никак не является. :)
P. S. Обновления сводок переезжают в комменты этого поста.
Вынесу из комментариев, как важное для понимания.
Кто же написал 640кдоносов сообщений? А вот они. Наши герои.
В зависимости от ширины среза, получаем такое:
Более 100 сообщений: 547 юзеров написали 17% всех сообщений.
Более 50 сообщений: 1% пользователей написал 27% комментариев.
Более 25 сообщений: 3.7 тысячи человек (2%) написали почти 40% всех комментов.
Именно они бросаются в глаза, потому что многие писали одно и то же и скорее всего и были ботами.
То есть микроскопическая часть набежавших, создала большую часть шума и сообщений.
Кто же написал 640к
В зависимости от ширины среза, получаем такое:
Более 100 сообщений: 547 юзеров написали 17% всех сообщений.
Более 50 сообщений: 1% пользователей написал 27% комментариев.
Более 25 сообщений: 3.7 тысячи человек (2%) написали почти 40% всех комментов.
Именно они бросаются в глаза, потому что многие писали одно и то же и скорее всего и были ботами.
То есть микроскопическая часть набежавших, создала большую часть шума и сообщений.
Очень смешного бота написал для своей мамы автор канала @mikrotik_rus
Он по команде включает или выключает танчики на компьютерах младших братьев. 😂👍
Он по команде включает или выключает танчики на компьютерах младших братьев. 😂👍
А кому поработать в Америке удалённо?
Друзьям нужен DevOps и пара миддлов питона.
Примерный список требований для DevOps: https://telegra.ph/Middle-DevOpsSRE-11-12
Но, список не строгий, если чего-то не знаете, пишите. Будут рады всем адекватным. Питонисты, то же самое.
Адрес для связи: [email protected]
Друзьям нужен DevOps и пара миддлов питона.
Примерный список требований для DevOps: https://telegra.ph/Middle-DevOpsSRE-11-12
Но, список не строгий, если чего-то не знаете, пишите. Будут рады всем адекватным. Питонисты, то же самое.
Адрес для связи: [email protected]
Telegraph
Middle DevOps/SRE
Американский стартап, разрабатывающий системы автономного управления коммерческого и промышленного транспорта, ищет в команду Remote Full Time Middle DevOps/SRE (готовы рассматривать part-time). Компания вышла на IPO и на данный момент профинансирована на…
Оглавление канала, о чем здесь почитать.
Пользователям:
проверить известен ли ваш телефон в утечках телеграм.
забавный бот про цены на газ в европе.
простая учебная задача, как стать питонистом за пару дней.
Журналистам:
я с удовольствием делюсь наблюдениями и данными на очень простых условиях.
Базы данных:
база паспортов электронного голосования 2020.
донаты Навальному по организациям донативших.
база данных фейсбука.
Готовый софт:
ядро для написания ботов телеграм magic wand.
модуль приема платежей через qiwi.
модерация чатов и защита от набегов — Фома. Демонстрация в действии.
менеджер паролей для параноиков.
Измерение быстродействия linux VPS.
Скачивание чатов telegram в базу данных.
Лайфхаки:
как попасть на госуслуги без очереди.
сохранение видео из инстаграм.
Программистам:
как узнать владельца чата.
нелимитированная проверка биографии юзера.
как передать контакт юзера без username.
каналы и поиск чатов.
быстрая вставка миллионов строк в psycopg2.
определение возраста аккаунтов.
параллельная работа нескольких телеграм клиентов.
форматирование сообщений.
плохие и хорошие алгоритмы перебора массивов раз и два.
как заворачивать telethon в systemd.
Пользователям:
проверить известен ли ваш телефон в утечках телеграм.
забавный бот про цены на газ в европе.
простая учебная задача, как стать питонистом за пару дней.
Журналистам:
я с удовольствием делюсь наблюдениями и данными на очень простых условиях.
Базы данных:
база паспортов электронного голосования 2020.
донаты Навальному по организациям донативших.
база данных фейсбука.
Готовый софт:
ядро для написания ботов телеграм magic wand.
модуль приема платежей через qiwi.
модерация чатов и защита от набегов — Фома. Демонстрация в действии.
менеджер паролей для параноиков.
Измерение быстродействия linux VPS.
Скачивание чатов telegram в базу данных.
Лайфхаки:
как попасть на госуслуги без очереди.
сохранение видео из инстаграм.
Программистам:
как узнать владельца чата.
нелимитированная проверка биографии юзера.
как передать контакт юзера без username.
каналы и поиск чатов.
быстрая вставка миллионов строк в psycopg2.
определение возраста аккаунтов.
параллельная работа нескольких телеграм клиентов.
форматирование сообщений.
плохие и хорошие алгоритмы перебора массивов раз и два.
как заворачивать telethon в systemd.
Telegram
СЛЕГ! <Z> ️
Итак, кому интересно, можете написать вот тому парню - @lshtshfum (его зовут Фома):
Привет!
или
Hello!
Регистр и пробелы неважны, восклицательный знак - обязателен.
Он посмотрит вас в той самой базе и ответит либо номером телефона, либо дежурным приветствием…
Привет!
или
Hello!
Регистр и пробелы неважны, восклицательный знак - обязателен.
Он посмотрит вас в той самой базе и ответит либо номером телефона, либо дежурным приветствием…
Это трудно выдумать и ещё труднее не ржать, как конь. Нет, не фейк.
Опубликовано в журнале Борьба классов, № 3-4, Июль 1931, C. 77-83.
Здесь можно прочитать статью целиком.
А там скачать весь номер в pdf.
Опубликовано в журнале Борьба классов, № 3-4, Июль 1931, C. 77-83.
Здесь можно прочитать статью целиком.
А там скачать весь номер в pdf.
О диваноне в телеграм.
Об этом мало говорят, но один из самых простых способов деанона в телеге, это послать человеку специально сконструированную ссылку в личку.
Или в бота для обратной связи. Или в почту. Не важно, лишь бы на том конце заинтересовались и кликнули. :)
Нужен свой веб-сервер, на котором есть доступ к логам, немного фантазии и вуаля.
https://188.124.50.148/file_download?doc_id=102021 ссылка на типа документ. Любой, кто по ней кликнет, будет посчитан, правда я не буду знать кто есть кто.
А меняя циферки за doc_id можно точно знать, кто именно её открыл.
То есть, можно даже поставить дело на поток, рассылая массово по личкам "очень срочную новость", меняя только идентификатор.
А в логе сервера мы получаем ip-адрес и немного информации о мобиле, с которой ссылку открыли:
Об этом мало говорят, но один из самых простых способов деанона в телеге, это послать человеку специально сконструированную ссылку в личку.
Или в бота для обратной связи. Или в почту. Не важно, лишь бы на том конце заинтересовались и кликнули. :)
Нужен свой веб-сервер, на котором есть доступ к логам, немного фантазии и вуаля.
https://188.124.50.148/file_download?doc_id=102021 ссылка на типа документ. Любой, кто по ней кликнет, будет посчитан, правда я не буду знать кто есть кто.
А меняя циферки за doc_id можно точно знать, кто именно её открыл.
То есть, можно даже поставить дело на поток, рассылая массово по личкам "очень срочную новость", меняя только идентификатор.
А в логе сервера мы получаем ip-адрес и немного информации о мобиле, с которой ссылку открыли:
xxx.xxx.xxx.xxx - - [04/Dec/2021:09:00:43 +0300] "GET /file_download?doc_id=102021 HTTP/1.1" 200 10553381 "-" "Mozilla/5.0 (Linux; Android 9; SAMSUNG SM-J330F) AppleWebKit/537.36 (KHTML, like Gecko) SamsungBrowser/16.0 Chrome/92.0.4515.166 Mobile Safari/537.36" "-"