Веб-парсер на Python за 5 минут

Небольшая статья о том, как создать парсер веб-сайтов с использованием библиотеки BeautifulSoup и Pandas с подробным описанием:

https://www.kdnuggets.com/2022/02/build-web-scraper-python-5-minutes.html

#веб

MSeg: составной набор данных для многодоменной семантической сегментации

Если говорить более простыми словами, то эта нейросеть способна различать и распознавать огромное количество различных объектов на видео будь то люди, животные, растения или предметы интерьера. Достоинством этой модели является высокая точность и возможность установить её в качестве модуля и использовать в вашем проекте.

Подробнее:

https://github.com/mseg-dataset/mseg-api

#ml

​Как сделать интерактивную карту с маршрутами на Python

Самый простой способ работы с картами — это использование OSMnx, пакета Python для загрузки геопространственных данных OpenStreetMap, моделирования, проектирования, визуализации и анализа пространства.

В этой статье вы научитесь работать с этими данными:

https://habr.com/ru/company/skillfactory/blog/654239/

​Видеоурок по созданию Telegram бота на Python

Разработка телеграм ботов интересный и прибыльный процесс. За один урок вы с нуля сможете разработать Telegram Bot на основе языка Python. Вы изучите несколько основных команд для работы с пользователем и получением информации от него.

https://www.youtube.com/watch?v=HodO2eBEz_8

#бот

​​Друг-новичок: Говорят, Python медленный. Я не хочу учиться медленному языку!

Я:

​​Менеджеры контекста и оператор with

Оператор with в Python — весьма полезный инструмент для правильного управления внешними ресурсами в ваших программах. Он позволяет использовать преимущества менеджеров контекста для обработки фаз установки и демонтажа, а также позволяет создавать собственные менеджеры контекста.

Подробнее:

https://realpython.com/python-with-statement/

​Бесплатный курс по продвинутой разработке микросервисов на Go

Пишете на python и хотите работать с высокими нагрузками? Переходите на язык микросервисов вместе с экспертами Ozon.

После курса вы сможете:
— писать на Golang;
— разрабатывать надежный и поддерживаемый код;
— проектировать сложные распределенные системы;
— обеспечивать мониторинг и поддержку созданных систем;
— работать в самой быстрорастущей отрасли.

Чтобы попасть на курс, необходимо оставить заявку на сайте, пройдите контест и попадите в рейтинг лучших.

Оставить заявку можно по ссылке тут.

Этот #партнтёрский пост

Главные секреты оптимизации доступа к данным с помощью кэширования

При правильном подходе кэширование может значительно ускорить работу, а также оптимизировать хранение и доступ к данным. В этой статье автор поделился несколькими методами успешной организации кэширования без велосипедов и костылей:

https://habr.com/ru/company/stm_labs/blog/654201/

​Развёртывание приложения Django в Elastic Beanstalk

К концу этого руководства вы научитесь инициализировать и настраивать Elastic Beanstalk, интегрировать Elastic Beanstalk с RDS, получать сертификат SSL через AWS Certificate Manager и не только.

Хотите научиться работать с Elastic Beanstalk? Тогда читайте статью:

https://testdriven.io/blog/django-elastic-beanstalk/

#django

А если кто-то ещё не спрашивал, то всегда можно задать вопрос с максимально непонятной формулировкой

​Создание бота для сообщества Вконтакте

Позавчера мы создавали бота для Telegram, а сегодня предлагаем похожую задачу, но уже для сообщества Вконтакте. Этот бот будет использовать библиотеку VKWave и публиковать различные мемы.

Подробная видеоинструкция по созданию бота находится здесь:

https://www.youtube.com/watch?v=XjayvZimByc

#видео #бот

​Сбор данных с обходом капчи посредством PYAUTOGUI, KERAS и TENSORFLOW

Современные веб-сайты не всегда дают возможность автоматически собирать и обрабатывать их данные. В таких случаях могут пригодиться альтернативные варианты, такие как кликеры или боты, которые имитируют действия реальных пользователей.

Один из таких эмуляторов пользователя предлагается реализовать в этой статье:

https://habr.com/ru/post/653943/

#tensorflow

​Конвертация Python-файлов в APK на Windows

Держите понятное руководство по превращению вашего Python-проекта в APK-приложение на Windows:

https://www.youtube.com/watch?v=VsTaM057rdc

Пересечение списков в Python

Списки — одна из наиболее часто используемых структур данных в Python. И иногда нам может понадобиться найти общие элементы между любыми двумя заданными списками. 

В этой статье рассказали каким образом можно это выполнить:

https://www.pythonforbeginners.com/basics/intersection-of-lists-in-python

​Качественное введение в сериализацию для Python

Сериализация относится к процессу преобразования объекта данных (например, объектов Python, моделей Tensorflow) в формат, который позволяет нам хранить или передавать данные, а затем воссоздавать объект при необходимости, используя десериализацию. Форматов сериализации много — JSON, XML, YAML и другие.

В этой статье вы поближе познакомитесь с сериализацией, её форматами и работой в Python:

https://machinelearningmastery.com/a-gentle-introduction-to-serialization-for-python/

Он должен сам понять, что я имел в виду!

​Сегментация по границам объекта и областям изображения с реализацией в Python

В данном случае под сегментацией стоит понимать технику разделения изображения на различные объекты с помощью анализа пикселей, для дальнейшей работы с этими объектами. Это позволяет, например, распознавать предметы на фото или текст на скане.

Способов сегментации существует несколько, каждый подходит для определённой ситуации. Подробнее о них и способах их реализации в Python можно узнать тут:

https://nuancesprog.ru/p/15414/

​Как обнаружить нажатие клавиши в Python

При создании программ, работающих с графическими пользовательскими интерфейсами, нам часто необходимо определить, нажимал ли пользователь клавишу, и сколько раз он это сделал. Эта статья поможет нам разобраться, как мы можем обнаружить нажатие клавиши в python:

https://www.pythonforbeginners.com/basics/how-to-detect-keypress-in-python

​Miniboss — приложение для работы с докером

Miniboss — это приложение Python для локального запуска набора взаимозависимых служб докеров, их индивидуальной перестройки и перезапуска, а также управления состоянием приложения с помощью хуков жизненного цикла. Определения сервисов могут быть написаны на Python, что позволяет использовать логику программирования вместо разметки, а также обойтись без YAML.

Подробнее:

https://github.com/afroisalreadyinu/miniboss

#библиотека

​​25 возможностей Pandas, о которых вы не знали

Возможно, что некоторые возможности вам и известны, но многие из них являются новыми и малоизвестными. Поэтому рекомендуем вам быстро пробежаться по списку и найти для себя что-то новое и полезное:

https://proglib.io/p/25-vozmozhnostey-pandas-o-kotoryh-vy-ne-znali-2022-02-28

#pandas