Один из наших кластеров для пилотных задач (Data node: 18 servers /2 CPUs, 12 Cores, 64GB RAM/, 12 Disks, 3 TB, SATA — HP DL380g) — Что такое Big Data вообще? Все знают, что это обработка огромных массивов данных. Но, например, работа с Oracle-базой на 20…

Data Science захватывает. С того момента, как мы изучим наш первый алгоритм машинного обучения, возникает необходимость применять его к данным, делать прогнозы и раскрывать глубокие взаимосвязи. Но бизнес сторона еще важней и интересна. Автор обещает вам…

Тратьте больше времени на моделирование и меньше времени на управление инфраструктурой. Практическое руководство о том как это сделать. Недавно в AWS re: Invent компания Netflix открыла одну из своих собственных систем для создания и управления проектами…

В соответствии с концепцией спирального подхода к обучению, о которой писал ранее , привожу поэтапный план освоения data science. План составлен так, чтобы каждый этап делал учащегося в той или иной...

В этой статье мы рассмотрим шаги, необходимые для построения трехслойной нейронной сети. Будет рассмотрена проблема и объяснен процесс вместе с наиболее важными концепциями. Проблема, которую нужно решить У итальянского фермера были проблемы с его этикетировочной…

Изучение вариантов решения одной из самых сложных задач визуализации данных Преобладающая задача в любом анализе данных — сравнение нескольких наборов чего-либо.

Первые 70% курса по SQL кажутся довольно простыми. Сложности начинаются на остальных 30%. С 2015 по 2019 годы я прошёл четыре цикла собеседований на должность аналитика данных и специалиста по...

Leon Chlon, специалист из Facebook, рассказывает, какие знания и подход нужны, чтобы успешно пройти собеседование по Data Science.

Типичный диалог на планировании:  Лид:   — Пользователи просят репликацию вот этих колонок в этих таблицах из продакшен базы в data lake. Разработчик:  — Когда? Лид:   — Вчера. Запрос в таску, таску в спринт, а дальше вручную исследование входных данных,…

Машинное обучение в современном мире играет огромную роль в бизнесе, IT и программировании. В обзоре будут представлены топ 30 часто используемых библиотек для машинного обучения для 6-ти популярных языков программирования. Не секрет, что наибольшее количество…

Сегодня у нас нестандартный проект: будем устанавливать и запускать настоящую нейросеть у себя на компьютере. 👉 Мы пока не будем подробно разбирать тонкости работы алгоритмов и писать нейронку с нуля. Вместо этого мы используем уже готовые скрипты и алгоритмы…

С появлением цикла заметок «дата сатаниста» пришло немало сообщений и комментариев с вопросами о том, как начать и куда копать и сегодня мы разберем основные скиллы и вопросы возникшие после публикаций. Все указанное тут не претендует ни какую истину в последней…

Сегодня для анализа данных существуют тысячи инструментов Big Data. Анализ данных — это процесс проверки, очистки, трансформации и моделирования данных с целью обнаружения полезной информации, предложения и принятия решений. В этом посте перечислены 30 лучших…

Привет, я – Ильдар Райманов и я руковожу департаментом в «БАРС Груп», который отвечает за развитие BI-решений в компании. Имея широкий опыт по работе с данными, а также обладая отраслевой...

Подавляющее большинство инструментов глубокого обучения позволяет нам быстро создавать новые приложения с потрясающей производительностью, от программ компьютерного зрения, классифицирующих сложные объекты по фотографиям, до анализаторов естественного языка…

Введение Amplitude как инструмент продуктовой аналитики очень хорошо зарекомендовал себя благодаря несложной настройке событий и гибкости визуализаций. И нередко возникает потребность наладить собственную модель атрибуции, провести кластеризацию пользователей…