Data Formulator 2 | ИИ-dataviz

Инструмент предназначен для создания графиков. Естественно, поддерживает популярные БД вроде PostgreSQL и MongoDB.

Из интересных фичей — ChatGPT по запросу на простом человеческом заинжинирит пока несуществующую фичу и тут же использует ее для диаграммы (смотрите видео).

Цена: бесплатно (платим только за токены)
Репозиторий проекта

@zen_of_python

И мерч отправляется...

Наконец-то подводим итоги конкурса. Борьба была жаркая, но с небольшим отрывом побеждает статья «Как пополнить кошелек Steam в 2024 году», и ее автор Виктор получает мерч от Tproger!

В декабре вы тоже можете выиграть наш приз — к мерчу добавим кое-что интересное!

Выбирайте тему из Флудильни и пишите статью месяца!

#tproger #конкурс

Популярная ИИ-библиотека Ultralytics заразилась

Под удар попала легендарная YOLO. Злоумышленники внедрили криптомайнер в версию 8.3.41, распространяя вредоносный код через платформу PyPI. Уязвимость была в процессе автоматической сборки. Инцидент привёл к значительному росту загрузки процессора у пользователей.

А вы знаете какой-нибудь индекс проверки опенсорса на предмет заражений, как haveibeenpwned.com для паролей? Поделитесь в комментариях.

#computervision #безопасность

@zen_of_python

Thunder | Ваша модель PyTorch на максималках

Thunder — это компилятор PyTorch, который позволяет значительно ускорить обучение. Он использует различные аппаратные исполнители в одиночном и многопоточном режимах на GPU. Это даетдо 40% прироста производительности в сравнении с обычной средой.

На графике выше Thunder достигает солидного ускорения обучения по сравнению со стандартной eager-реализацией на видеокартах NVidia H100 с использованием nvFuser, torch.compile, cuDNN и TransformerEngine FP8.

Цена: бесплатно  
Репозиторий проекта

@zen_of_python

Как настроить аутентификацию в веб-приложениях на Django

В Tproger рассмотрели основные способы настройки аутентификации в веб-приложениях на Django, начиная с базового входа и регистрации и заканчивая интеграцией с социальными сетями и кастомными моделями.

#безопасность #django

@zen_of_python

Вопрос подписчика

Задает @Zhurakov:

«Есть кто обучился Python с нуля не имея никакого опыта в программирование и устроился на работу?»

Учитывая комменты к этому вопросу, слегка дополним вопрос:

«Напишите, кем работали до обучения Python, если эта сфера далека от программирования».

От админа: перед тем, как переобучиться в ИТМО и устроиться дата-аналитиком, должность была секретарь на ресепшн в строительной компании. Между событиями «выдали корочку» и «взяли кодером» прошло 4 года.

#вопросыподписчиков

@zen_of_python

Вопросы новичков

Zen of Python поддерживает новоприбывших в особой рубрике. Как это работает:

— Спрашивайте что угодно (в комментариях под этим постом), связанное с Python. Здесь нет плохих вопросов!
— Сообщество вас поддержит. Самые интересные вопросы мы разберём в отдельном посте;

#вопросыновичков

@zen_of_python

Квиз: создание простейшего CLI-интерфейса

Если вы подумываете написать свою утилиту командной строки, посмотрите, как это делается с помощью argparse и пройдите викторину на 17 вопросов с realpython.com.

#квиз

@zen_of_python

kitty | GPU-терминал

Пока мир сходит с ума от требовательных к видеокартам моделей, одна небольшая команда перевела терминал на графические процессоры, и это дало солидный прирост производительности. Настолько, что на GitHub этой библиотеке выставили 25К+ звезд.

Цифры на таблице — это мегабайты данных в секунду, которые обрабатывает терминал. Измерения проводились под Linux/X11 с AMD Ryzen 7 PRO 5850U.

Документация

@zen_of_python

torchtitan | Фреймворк от PyTorch для LLM

Проект в стадии proof-of-concept, однако уже собрал 2К+ звезд на GitHub. Создатели самого влиятельного ML-фреймворка современности создали специфическую версию для обучения собственных Large Language Models. Теперь войти в эту игру среднему бизнесу станет еще проще.

Репозиторий проекта

#llm #инструмент

@zen_of_python

Вышел PEP 767

Одно из главных нововведений — режим ReadOnly («только для чтения») для атрибутов классов и протоколов. Это добавляет ясности при работе со статическими анализаторами типов, которые будут проверять соблюдение этого условного ограничения.

Проблема с текущими механизмами:
— typing.Final накладывает ограничения на переопределение в подклассах;
— Применение свойства с @property требует дополнительного шаблона кода и неочевидно;
— Замороженные классы (например, с dataclass(frozen=True)) накладывают ограничения на весь класс, что может быть избыточно.

Читать PEP полностью

@zen_of_python

Leopards | быстрая фильтрация списков

Библиотека позволяет фильтровать списки с логикой SQL OR / AND / NOT, причем намного быстрее Pandas.

Репозиторий проекта

#инструмент

@zen_of_python

peek | Дебажить грамотнее, чем с print()

Утилита позволяет настраивать, куда и как будет выводиться информация во время выполнения программы. Вы можете выводить данные в командную строку, записывать их в файл или использовать собственный обработчик.

Вы можете управлять детализацией вывода, фильтровать сообщения по критичности и использовать много других полезных фичей.

Цена: бесплатно  
Документация проекта

#инструмент

@zen_of_python

Microsoft открыла исходный код Python-либы для преобразования файлов в Markdown

MarkItDown — идеальное решение для конвертации файлов и офисных документов в Markdown. Подойдёт для анализа, индексации или упорядочивания данных.

Что поддерживает:
— PDF, PowerPoint, Word, Excel.
— Изображения (EXIF и OCR).
— Аудио (метаданные и транскрипция речи).
— HTML (включая специальную обработку Wikipedia).
— Text-based форматы: CSV, JSON, XML и другие.

Плюсом можно прикрутить LLM для описания изображений.

#инструменты #python #анализ

Выводится 'Spam', поскольку оператор nonlocal означает, что присваивание X внутри вложенной функции изменяет X в локальной области видимости объемлющей функции. Без этого оператора присваивания классифицировало X бы как локальную переменную во вложенной функции, делая ее другой переменной; тогда код выводил бы 'Ni'.

Как выглядит день Python-разработчика, если бы его описывал создатель экзистенциализма

Редакция Tproger попросила ChatGPT описать типичный день питониста так, словно это рассказ Жан Поля Сартра, и вот что из этого получилось:

Утро. Рассвет несет с собой новые возможности, но также и бремя выбора. Разработчик просыпается в своем cramped пространстве — маленькой комнате, заставленной горой книг и компьютерных девайсов. Вокруг него царит хаос, отражающий внутреннее состояние: пустые чашки из-под кофе, закладки на страницах о Python и фреймворках, которые ждут своего часа.

Он включает компьютер, и здесь начинается его борьба. Первые строки кода — это манифест его существования. Каждая буква, каждая команда, каждое решение требуют от него осознанности. Он понимает, что его код может быть как искусством, так и абсурдом, в зависимости от того, как он его напишет. В этом заключается его свобода и одновременно его проклятие.

Работа над проектом затягивается. Он сталкивается с багами, которые кажутся не только техническими проблемами, но и отражением его внутренней борьбы. "Почему я выбрал Python?" — спрашивает он себя. Но вопрос этот не дает ответов, лишь больше погружает в размышления о вечной проблеме человеческого существования и первопричинах. Он понимает, что каждая строка кода, даже самая незначительная, влияет на весь проект, как каждое малое решение формирует его судьбу.

Полдень. Он делает перерыв, но мысли о коде не покидают его. Эти мысли, как призраки, навязчиво возвращаются к нему, напоминая о том, что жизнь разработчика — это ежедневная борьба за понимание, контроль и гармонию в мире, где все постоянно меняется. Коллеги обсуждают последние тренды в разработке, но он ощущает абсурдность этой гонки. "Зачем мне следовать за модой, если я могу создать нечто свое?" — думает он, с опасением глядя на свою отражающую экран пустую строчку кода.

Вечер. Он смотрит на результаты своего труда. Код работает, но к какому выводу он пришел? Разработчик создает небольшую программу, которая помогает решать задачи, но в ней есть ирония — ее успех измеряется не успехом, а его осознанием, что он создал нечто полезное всего лишь для того, чтобы заполнить пустоту своего существования. Здесь, в этих строчках кода, он находит смысл. Он понимает, что в мире абсурда, лишь он — творец своего собственного значения, и каждый шаг, каждый клик — это возможность утвердить свое право на существование.

Ночь. Он завершает работу, выключает компьютер и, возможно, выпивает бокал вина, размышляя о том, что впереди еще множество дней, полных борьбы, выбора и кода. Но он готов. Это его путь, и он осознанно идет по нему, живя в тот самый момент, когда код обретает жизнь.

@zen_of_python

Python: итоги года от одного из друзей Python Software Foundation

Очень познавательный англоязычный лонгрид со статой из мира Python-разработки:

— какие облака популярны;
— какие фреймворки для чего используются;
— использование Docker + Kubernetes;
— какие менеджеры зависимостей побеждают и многое другое.

Читать

#факты

@zen_of_python