​snscrape – простой скрапер, который позволяет собирать много информации из различных источников

В настоящее время поддерживаются следующие сервисы:

□ Facebook: профили пользователей, группы и сообщества (также известные как сообщения посетителей)
□ Instagram: профили пользователей, хэштеги и местоположения
□️ Mastodon: профили пользователей и toots (один или нитки)
□️ Reddit: пользователи, сабреддиты и поиски (через Pushshift)
□ Telegram: каналы
□️ Twitter: пользователи, профили пользователей, хэштеги, поиск, твиты, сообщения в списке и тенденции
□️ ВКонтакте: профили пользователей
□️ Weibo (Sina Weibo): профили пользователей

GitHub | #Python #Osint #Scraper #Privacy #Interesting

Univer Clipsheet

📚 Раздел: #СборДанных

📄 Описание: расширение для Chrome и Edge браузеров , предназначенное для веб-скрапинга с элементами ai. Основной функционал - настройка интеллектуальных скреперов и динамическое извлечение данных с сложных страниц и перехват AJAX-запросов.

💻 Платформа: Chrome/Edge

💳 Стоимость: Бесплатно за базовую версию / Платно от 1998 USD за некоммерческую версию с дополнительным функционалом.

🏷 #browseraddon  #scraper

Инструментарий | Консалтинг

DataSurgeon

📚 Раздел: #Агрегация

📄 Описание: Утилита позволяющая вытаскивать из текстового файла IP-адреса, адреса электронной почты, хэши, файлы, кредитные карты, номера социального страхования и многое другое.

💻 Платформа: Win/macOS/Linux

💳 Стоимость: Бесплатно

🏷 #DataMining #scraper

Инструментарий | Консалтинг