Библиотека дата-сайентиста | Data Science, Machine learning, анализ данных, машинное обучение
18.4K subscribers
2.4K photos
119 videos
64 files
4.85K links
Все самое полезное для дата сайентиста в одном канале.

По рекламе: @proglib_adv

Курс по ML: https://clc.to/4hNluQ

Для обратной связи: @proglibrary_feeedback_bot

РКН: https://gosuslugi.ru/snet/67a5b03124c8ba6dcaa121c9
Download Telegram
Как использовать Spark по максимуму?
Знают в NewProLab: ведущий провайдер курсов в области Big Data объявляет запуск сразу 2 онлайн-курсов по работе с фреймворком Spark.

📌"Apache Spark и Scala для дата инжиниринга": старт 5 октября 👉🏻 https://clck.ru/SzCbb
Вас ждет: подготовка витрин данных, создание real-time приложений, работа со Scala API, Dataframes, Structured Streaming, Kafka, Elasticsearch, Cassandra, PostgreSQL, HDFS.

Преподает: Андрей Титов (NVIDIA) и Егор Матешук (Qvant).

📌"Apache Spark Advanced": начало 16 ноября 👉🏻https://clck.ru/Xkxkp
Новый продвинутый курс для дата-инженеров и разработчиков, имеющих практический опыт работы со Spark. Курс позволяет отработать навыки, необходимые для ускорения обработки данных и усовершенствования архитектуры существующих проектов. Вы глубоко погрузитесь в Dataframe API, py4j в pyspark, Spark Structured Streaming, Scala UDF в pyspark, org.apache.spark.sql.Row, разработку коннекторов с использованием Datasource v1 API, параллелизм задач.

Преподает: Андрей Титов (NVIDIA).

Специально для подписчиков нашего канала действует дополнительная скидка 15% (от цены, указанной на сайте) по промокоду "dsproglib".

Выбирайте программу. Оставляйте заявку. Задавайте вопросы.
📊 Kaggle за 30 минут: разбираемся с соревнованием House Prices

Из предыдущей статьи мы узнали, что такое Kaggle и какие разделы предлагает этот ресурс. Теперь разберемся с одним из самых базовых соревнований Kaggle – House Prices.

https://proglib.io/sh/rckgt1HD0I
Что такое NFT и где они используются?

Технологии постоянно совершенствуются и все глубже проникают в жизнь человека, меняя ее и заставляя нас иначе смотреть на обыденные вещи. Поговорим о невзаимозаменяемых токенах (NFT) и причинах их популярности.

https://proglib.io/sh/Y07iIXqjoW
1 октября в Москве пройдет Russia Open Source Summit, где на одной площадке соберутся все, кто в России создает программное обеспечение на основе открытого кода.

На открытии саммита будет представлен проект стратегии развития Open Source в России. После презентации проекта всем участникам мероприятия предложат выбрать одну из рабочих групп для внесения предложений в документ.
В рамках деловой программы будет выделен отдельный трек для шоу-кейсов (питчей) от стартапов, созданных на базе открытого кода. Можно подать заявку на выступление.

Принять участие можно бесплатно, регистрация на сайте.
Мероприятие начнется в 10:00 на площадке Radisson Collection Hotel.

Подготовка стратегии ведется российским экспертным ИТ-сообществом в открытом формате, в том числе на площадке Telegram.
Как выбрать IT-инфраструктуру в 2021?

Присоединяйтесь к трансляции от @SelectelNews, где мы расскажем, как выбрать провайдера и IT-инфраструктуру под ваши задачи.

Помимо этого, разберем на вебинаре:

— Как оценить надежность инфраструктуры
— Из чего складывается стоимость владения IT-инфраструктурой (не только из затрат на оборудование)
— Какие продукты подойдут для решения оперативных задач инфраструктуры (серверы, облака, managed-сервисы)

Отдельно рассмотрим реальные кейсы клиентов — какие задачи они хотят решить, какие выбирают продукты и сервисы.

Участие бесплатное, регистрируйтесь по ссылке: https://slc.tl/1yemA
😸 Состоялся релиз библиотеки CatBoost версии 1.0.0

В описании релиза можно найти и ускорение обучения в режиме бинарной классификации, и поддержку Apache Spark. Подробнее об этом рассказал один из разработчиков CatBoost в посте на Хабре:

https://habr.com/ru/company/yandex/blog/580950/
👍1
Комплексное исследование и анализ эффективности функций активации в глубоком обучении.

https://proglib.io/w/79fd2c6d
Справочник по блокчейну и криптовалютам. Часть 1: основные понятия и технологии

Изучить терминологию в любой сфере – задача не из легких. Поиск в интернете проблему не решает, если тема слишком сложная и запутанная. Эта шпаргалка поможет вам разобраться с основными понятиями в криптовалютном мире.

https://proglib.io/sh/3jxWVpJwaD