Big Data AI
16.8K subscribers
805 photos
97 videos
19 files
813 links
@haarrp - админ

Вопросы с собеседований по Machine Learning, Data Science, Deep Learning и Нейроннным сетям

@data_analysis_ml - анализ данных

@ai_machinelearning_big_data

@itchannels_telegram - важное для программиста

РКН: clck.ru/3Fmqxe
Download Telegram
💶 Финансы

Валютные курсы: архивные и текущие данные о стоимости иностранных валют по отношению к рублю
Средние цены и демографические показатели по Российской Федерации и ее субъектам
Цены и объемы реализации продуктовых товаров и ГСМ в субъектах РФ (по данным ККТ)
Крупные города России: объединенные данные по основным социально-экономическим показателям за 1985-2019 гг.
«Информационные ресурсы Единой геофизической службы РАН» (БД ИР ЕГС РАН)
Статистические данные о занятости и безработице среди населения по возрастным группам
Сведения из реестра субъектов малого и среднего предпринимательства
Реестр юридических и физических лиц из числа субъектов МСП (малого и среднего предпринимательства), осуществляющих услуги конструкторского бюро на территории РФ
Демографическая ситуация по субъектам РФ
Мониторинг социально-экономических показателей по Арктической зоне РФ
База данных муниципальных образований
Показатели валового регионального продукта в России: объединенные данные за 1998—2019 гг.
Динамика ключевой ставки и процентной ставки рефинансирования в России за 1992—2021 гг.
Список юридических лиц из числа субъектов МСП (малого и среднего предпринимательства), осуществляющих юридические услуги на территории РФ
Производство основных транспортных средств в РФ
Пример сведений о недобросовестных поставщиках в рамках государственных и муниципальных закупок
Список крупнейших контрактов в рамках государственных и муниципальных закупок по 94-ФЗ (до 2014 года)
Список крупнейших контрактов в рамках государственных и муниципальных закупок по 94-ФЗ (до 2014 года)
Сведения о недобросовестных поставщиках в рамках государственных и муниципальных закупок по 44-ФЗ
База данных проекта «Госрасходы»
Реестры расходных обязательств регионов РФ: исполнение и текущие расходы в 2018-2019 гг.; плановые показатели на 2020-2021 гг.
БД соглашений о предоставлении субсидий
Бюджеты регионов России: исполнение доходов, расходов и источники финансирования дефицита за 2011-2020 гг.
Доходы и имущество госслужащих: объединенные сведения из антикоррупционных деклараций сотрудников российских министерств
Пенсионные начисления в России: объединенные данные за 2011—2020 гг. с детализацией до региона
Сведения об обращениях граждан за пособием по безработице
Регистрируемая безработица в России: обезличенные микроданные о характеристиках граждан и полученных услугах за 2017-2021 гг.

Датасет «Гуманизация экономического роста в глобальном хозяйстве: большие данные и цифровое моделирование – 2020»
Датасет "Большие данные современной мировой экономики: цифровая платформа для интеллектуальной аналитики – 2020"
Датасет «Интерактивная статистика и интеллектуальная аналитика сбалансированности региональной экономики россии на основе больших данных и блокчейн – 2020»
Датасет «Социальное предпринимательство в мировой экономике: путь от виртуальных оценок к большим данным - 2020»

@bigdatai
👍8🔥21👎1
Бесплатные книги по науке о данных

Отличная подборка бесплатных DS книг

🖥 Github

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍11🔥32
This media is not supported in your browser
VIEW IN TELEGRAM
500+ список проектов AI с кодами

Гитхаб с таблицей, связывающей 100 проектов с кодом.
Полезный ресурс, если вы ищете вдохновение для своего следующего проекта, опирающегося на машину.

🖥 Github

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍8🔥32
15_pandas_functions.pdf
700.3 KB
🖥 Шпаргалка по Pandas с примерами основных функций покрывающих 90% работы с данной библиотекой

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥12👍41
📌 Data Science Hacks, Tips and Tricks

Он включает в себя множество советов, приемов и лайфхаков, связанных с наукой о данных, машинным обучением.

Эти хаки предназначены для всех специалистов по данным. Неважно, новичок вы или продвинутый профессионал, эти лайфхаки обязательно сделают вас эффективнее в работе.

Github

@bigdatai
🔥4👍21
Deep Learning Tuning Playbook

Репозиторий от Google Research и Гарварда. Этот Репозиторий предназначен для инженеров и исследователей (как отдельных лиц, так и групп), заинтересованных в максимальном повышении производительности моделей глубокого обучения.

Советы и гайды:

- выбору алгоритмoв мо
- построение архитектуры модели мо
- настройка и выбор параметров маодели
- об оценке результатов работы другого
- построению пайплайн, выбора, метрик, чекпоинтов и многого
другого

🖥 Github

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍6🔥41
🔥 1000 бесплатных онлайн-курсов по программированию, актуальные в 2023 году.

Двенадцать лет назад такие университеты, как Стэнфорд и Массачусетский технологический институт, открыли для публики бесплатные онлайн-курсы. Сегодня более 1200 школ по всему миру создали тысячи бесплатных онлайн-курсов.

Чтобы поприветствовать новый год, я составил этот список из 1000+ таких бесплатных онлайн-курсов, которые вы можете начать прямо сейчас.

Для этого я перебрал базу данных Class Central, содержащую более 100 000 онлайн-курсов. Если в каталог были оценки курсов, я включил их средний рейтинг. Это самый большой каталог курсов доступных в сети.

📌 Сохраняте себе и отправляйте коллегам, чтобы не потерять.

Cписок

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍41🔥1🤩1
⭐️ Датасеты Фотографии с высоты

Размеченная капча (20 тыс)
https://t.iss.one/lovedeathtransformers/4771

Stanford Drone Dataset
cvgl.stanford.edu/projects/uav_data

xView — один из самых больших общедоступных наборов воздушных снимков земли. Он содержит изображения различных сцен со всего мира, аннотированных с помощью ограничительных рамок
xviewdataset.org/#dataset

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2🔥21
dataset - удобная библиотека для простой работы с базой данных без знаний SQL.

В ней содеражаться все основный SQL методыу insert, update, all, find и так далее.Принимающие словари в качестве объектов записей БД.

Но это не ORM.

Библиотека просто пишет за вас SQL запросы, предоставляя удобный интерфейс через методы и аргументы.
Так можно составлять даже сложные запросы.

pip install dataset

Документация
Github

@bigdatai
5👍3🔥1
ChatGPT Cheat Sheet-1.pdf
721.6 KB
📌 The ChatGPT Cheat Sheet

Удобная шпаргалка для составления работы с ChatGPT

@bigdatai
👍82🔥2🤮1
This media is not supported in your browser
VIEW IN TELEGRAM
🚀 Библиотека генеративного ИИ

Более 750 инструментов и колабов
с семантическим поиском и фильтрами. Нажмите на любую карточку, чтобы узнать больше.

Преобразовать 2D в 3D, превратить аудио в арт, сгенерировать гифки,видео по запросу, редакция видео, промпты и многое другое.

https://library.phygital.plus/

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍8🔥31
🖥 Разбор полезных алгоритмов на Python.

Список алгоритмов, которые широко используются в различных областях Data Science, и программисту важно хорошо их понимать.

В статье приводится объяснение алгоритмов с примерами кода.

📌 Читать

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍82🔥2
🔥 Applied Deep Learning Course

Deep learning двухсеместровый курс, в первую очередь для тех, кто уже хорошо ориентируется в машинном обучении. Лекции и код, все темы удобно разбиты. Советуем ознакомиться.

🖥 Github: https://github.com/maziarraissi/Applied-Deep-Learning

Paper: https://arxiv.org/pdf/2301.11316.pdf

➡️Видео: https://www.youtube.com/playlist?list=PLoEMreTa9CNmuxQeIKWaz7AVFd_ZeAcy4

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍84🔥2
🖥 fiftyone

Инструмент с открытым исходным кодом для создания высококачественных наборов данных и моделей компьютерного зрения.

pip install fiftyone

🖥 Github
📎 Docs

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍6🔥32
📃 Крупнейший датасет документов, удостоверяющих личность

В этой статье мы хотим рассказать как мы создали крупнейший на данный момент набор искусственно созданных документов с большим разнообразием типов документов, их содержания и условий съемки.

Каждый из документов имеет уникальные (хоть и выдуманные) значения текстовых полей, уникальную подпись и уникальные искусственно созданные лица.

📌 Смотреть

@bigdatai
👍82🔥1
🔥 Подборка каналов для Дата сайентиста

⭐️ Нейронные сети
@vistehno - chatgpt ведет блог, решает любые задачи и отвечает на любые ваши вопросы.
@aigen - сети для генерации картинок. видео, музыки и многого другого.
@neural – погружение в нейросети.

🖥 Machine learning
@ai_ml – погружение в нейросети, ai, Chatgpt, midjourney, машинное обучение.
@machinelearning_ru – машинное обучении на русском от новичка до профессионала.
@machinelearning_interview – подготовка к собеседованию.
@datascienceiot – бесплатные книги Machine learning
@ArtificialIntelligencedl – канал о искусственном интеллекте

@machinee_learning – чат о машинном обучении
@datascienceml_jobs - работа ds, ml
@Machinelearning_Jobs - чат работы мл


🖥 Javascript / front

@react_tg - 40,14% разработчиков сайтов использовали React в 2022 году - это самая популярная библиотека для создания сайтов.
@javascript - javascript крупнейший канал.
@Js Tests - каверзные тесты JS
@hashdev - погружение в web разработку.
@javascriptjobjs - отборные вакансии и работа FrontEnd.
@jsspeak - чат поиска FrontEnd работы.
@javascript -канал для JS и FrontEnd разработчиков. Лучшие практики и примеры кода. Туториалы и фишки JS

🖥 SQL базы данных

@sqlhub - эффективности кода с грамотным использованием бд.
@chat_sql - чат изучения бд.

🖥 Python

@pythonl - главный канал самого популярного языка программирования.
@pro_python_code – учим python с ментором.
@python_job_interview – подготовка к Python собеседованию.
@python_testit - проверочные тесты на python
@pythonlbooks - современные книги Python
@python_djangojobs - работа для Python программистов
@python_django_work - чат обсуждения вакансий

🖥 Java
@javatg - выучить Java с senior разработчиком по профессиональной методике.
@javachats - чат для ответов на вопросы по Java
@java_library - библиотека книг Java
@android_its - Android разработка
@java_quizes - тесты Java
@Java_workit - работа Java
@progersit - шпаргалки ит

👣 Golang
@Golang_google - восхитительный язык от Google, мощный и перспективный.
@golang_interview - вопросы и ответы с собеседований по Go. Для всех уровней разработчиков.
@golangtests - интересные тесты и задачи GO
@golangl - чат изучающих Go
@GolangJobsit - отборные вакансии и работа GO
@golang_jobsgo - чат для ищущих работу.
@golang_books - полезные книги Golang
@golang_speak - обсуждение языка Go

🖥 Linux
@linux -топ фишки, гайды, уроки по работе  с Linux.
@linux chat - чат linux для обучения и помощи.
@linux_read - бесплатные книги linux

👷‍♂️ IT работа

@hr_itwork -кураторский список актуальных ит-ваканнсии

🤡It memes
@memes_prog - ит-мемы

⚙️ Rust
@rust_code - Rust избавлен от болевых точек, которые есть во многих современных яп
@rust_chats - чат rust

#️⃣ c# c++
C# - объединяет лучшие идеи современных языков программирования
@csharp_cplus чат
С++ - Универсальность. Возможно, этот главный плюс C++.

📓 Книги

@programming_books_it - большая библиотека. программиста
@datascienceiot -ds книги
@pythonlbooks - python библиотека.
@golang_books - книги Golang
@frontendbooksit - front книги
@progersit - ит-шпаргалки
@linux_read - Linux books
@java_library - Java books

🖥 Github
@github_code - лучшие проекты с github
@bigdatai - инструменты по работе с данными

🖥 Devops
Devops - специалист общего профиля, которому нужны обширные знания в области разработки.

📢 English for coders

@english_forprogrammers - Английский для программистов
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5👍31😁1
🖥 Awesome Docker 🐳

Кураторский список ресурсов и проектов Docker.

🖥 Github

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍62🔥2
Colossal-AI

Colossal-AI: унифицированная система глубокого обучения для больших моделей

🖥 Github
📝 Документация
📌 Примеры

@bigdatai
Please open Telegram to view this post
VIEW IN TELEGRAM
👍52🔥1🥰1
Indoor Scene Recognition

Один из наиболее крупных датасетов интерьеров. В нем содержится 67 категорий включающих 15620 картинок.

https://web.mit.edu/torralba/www/indoor.html

@bigdatai
👍4👏21
🚀 Большая Шпаргалка по Python

-
Определение ключевых слов
- Типы данных
- Функции
- Классы
- Различные методы, встроенные функции и примеры работы с ними
- Решение задач с собеседования с примерами кода

#doc #python #cheatsheet
Please open Telegram to view this post
VIEW IN TELEGRAM
👍7🔥21