Small Data Science for Russian Adventurers

#обзор
Очень классный обзор по теме "Акустические представления слов" - Acoustic Word Embeddings (AWE)
https://medium.com/@maobedkova/acoustic-word-embeddings-fc3f1a8f0519

Medium

Acoustic Word Embeddings

Introduction to the field of acoustic word embeddings (AWEs) and overview of AWE approaches.

1.58K views10:21

Small Data Science for Russian Adventurers

#обзор
Перечень интересных (по мнению автора) докладов KDD2020,
в основном по графам, рекомендациям и поиску:
https://raw.githubusercontent.com/ishugaepov/kdd_2020/master/kdd_2020.pdf

3.7K views16:18

Small Data Science for Russian Adventurers

#обзор
Очень классная подборка материалов по детекции объектов:
https://github.com/XiongweiWu/Awesome-Object-Detection

GitHub

GitHub - XiongweiWu/Awesome-Object-Detection: Resource collections of object detection

Resource collections of object detection . Contribute to XiongweiWu/Awesome-Object-Detection development by creating an account on GitHub.

2.69K views21:59

Small Data Science for Russian Adventurers

#обзор
Неплохой обзор по DL с интригующим названием "A Survey of Deep Learning for Scientific Discovery":
https://arxiv.org/pdf/2003.11755.pdf

3.01K views10:24

Small Data Science for Russian Adventurers

#обзор
Интересно, что по рекуррентным сетям (RNN) почти нет свежих обзоров, видимо, Трансформеры всё заасфальтировали... последний "универсальный" обзор (про всё-всё-всё в RNN), который я нашёл датирован началом 2018 года:
Recent Advances in Recurrent Neural Networks
https://arxiv.org/abs/1801.01078

2.89K viewsedited 16:46

Small Data Science for Russian Adventurers

#обзор
Для тех, кто в чатике интересовался обзорами по Ганам. В принципе, их много хороших. Но для провокационности контента канала, скажу -
Посмотрите на Хуи Джонатана:
https://jonathan-hui.medium.com/gan-gan-series-2d279f906e7b

Medium

GAN — GAN Series (from the beginning to the end)

A full listing of our articles covers the applications of GAN, the issues, and the solutions.

2.94K viewsedited 14:33

Small Data Science for Russian Adventurers

#обзор
Поискал какое-нибудь свежее независимое и более-менее приличное сравнение разных реализация градиентного бустинга. Нашёл только за 2019 год...
Выгоднее смотрится CatBoost, но автор контактировал с его создателями, как показывает практика, это действительно улучшает качество в экспериментах (имеется в виду, что создатели подсказывают, что в данном случае надо ещё подкрутить). Жалко, что у xgb и lgb нет такой помощи онлайн (у catboost-a есть, кстати, свой телеграм-канал).
https://medium.com/riskified-technology/xgboost-lightgbm-or-catboost-which-boosting-algorithm-should-i-use-e7fda7bb36bc

Medium

XGBoost, LightGBM or CatBoost — which boosting algorithm should I use?

Gradient boosted trees have become the go-to algorithms when it comes to training on tabular data. Over the past couple of years, we’ve…

2.9K views16:08

Small Data Science for Russian Adventurers

Наука в Сбере 2020.pdf

5 MB

#обзор
Статьи, написанные в Сбере:

5.11K views14:12

Small Data Science for Russian Adventurers

german-ai.pdf

4.4 MB

#обзор
German standardization roadmap on AI

4.29K views21:53

Small Data Science for Russian Adventurers

#обзор
Список предобученных языковых моделей (вроде его до сих пор поддерживают, судя по наличию некоторых новинок):
https://github.com/thunlp/PLMpapers

GitHub

GitHub - thunlp/PLMpapers: Must-read Papers on pre-trained language models.

Must-read Papers on pre-trained language models. Contribute to thunlp/PLMpapers development by creating an account on GitHub.

3.66K views12:58

Small Data Science for Russian Adventurers

#обзор
Немного баян, но иногда полезно вспомнить...
Набор памяток по разным темам (есть неплохие):
https://www.theinsaneapp.com/2020/12/machine-learning-and-data-science-cheat-sheets-pdf.html

Insane - TheInsaneApp.com

100+ Cheat Sheet For Data Science And Machine Learning

100+ Best Cheat Sheet For Data Science, Machine Learning, Deep Learning, Artificial Intelligence, Python, SQL And Statistics (With PDF).

3.78K views15:41

Small Data Science for Russian Adventurers

#обзор
Куча полезных ссылок по т.н. эквивариантным сетям.
https://github.com/Chen-Cai-OSU/awesome-equivariant-network

GitHub

GitHub - Chen-Cai-OSU/awesome-equivariant-network: Paper list for equivariant neural network

Paper list for equivariant neural network. Contribute to Chen-Cai-OSU/awesome-equivariant-network development by creating an account on GitHub.

3.46K views13:17

Small Data Science for Russian Adventurers

#обзор
Тренды на ближайшие годы... лучше не будет;) Полный обзор по ссылке:
https://www.dni.gov/files/ODNI/documents/assessments/GlobalTrends_2040.pdf