У вас продакшн нейронные сети, терабайты данных? Вам хочется понять, как работает нейронная сеть, но на таком объеме это сложно сделать? Сложно, но можно. Мы в NtechLab находимся именно в той...

В предыдущей статье мы поговорили про роль Data Engineer в Х5, какие задачи он решает и с каким технологическим стеком работает. Рассмотрели структуру собеседования, основные направления, по которым мы оцениваем кандидатов, и подробно разобрали базовые требования…

Статья провалидирована и обновлена автором 26.05.2023 Привет, читатель! Меня зовут Артём Сайгин, я веду телеграм канал  Growth lab , в котором делюсь опытом роста IT-продуктов. Делал подборку...

Выяснилось, что связи между нейронами сети в точности воспроизвели структуру обонятельной системы плодовой мушки.

Сегодня будет не совсем обычный проект: мы не будем ничего программировать сами, а просто используем чужой код для интереса, развлечения и просто потому, что можем. В чём суть Разработчик Кэтрин Кроусон написала алгоритм, в котором нейросеть по текстовому…

Привет, Хабр! Мы команда мониторинга и анализа данных биотехнологической компании BIOCAD. Хотим рассказать вам о том, как мы собираем данные для аналитики из практически всех сервисов компании и при этом вполне успешно справляемся без полноценного дата-инженера.…

Всем привет, меня зовут Илья, я работаю в компании DINS на должности инженера отдела мониторинга. В этой статье расскажу о нашей боли при работе с ElasticSearch. Мне не удалось найти решение этой проблемы где-либо ещё, поэтому, думаю, этот туториал будет…

«Если ваши конкуренты применяют ИИ и они нашли способ, позволяющий им ускориться, то они оторвутся от вас очень быстро», — поделилась CTO компании IBM по data science и ИИ Дебора Лефф на сцене Transform 2019. В другом докладе, «Что вообще такое — работать…

5 шагов для выявления и устранении проблем с качеством данных в ваших конвейерах

Эффективное использование машинного обучения — сложная задача. Вам нужны данные. Вам нужен надёжный конвейер, поддерживающий потоки данных. И больше всего вам нужна высококачественная разметка. Поэтому чаще всего первая итерация моих проектов вообще не использует…

Привет, Хабр! Меня зовут Андрей Тыщенко из компании Dynamic Yield. Наше направление работы — персонализация сайтов с целью повышения продаж и улучшения пользов...

Выбор подходящего инструмента для аннотирования данных — непростая задача, поэтому чтобы принять верное решение, необходимо знать все возможные варианты. В этой статье мы расскажем о лучших, по нашему мнению, альтернативах Scale AI. Проекты машинного обучения…

Один из наших кластеров для пилотных задач (Data node: 18 servers /2 CPUs, 12 Cores, 64GB RAM/, 12 Disks, 3 TB, SATA — HP DL380g) — Что такое Big Data вообще? Все знают, что это обработка огромных массивов данных. Но, например, работа с Oracle-базой на 20…

Data Science захватывает. С того момента, как мы изучим наш первый алгоритм машинного обучения, возникает необходимость применять его к данным, делать прогнозы и раскрывать глубокие взаимосвязи. Но бизнес сторона еще важней и интересна. Автор обещает вам…

Тратьте больше времени на моделирование и меньше времени на управление инфраструктурой. Практическое руководство о том как это сделать. Недавно в AWS re: Invent компания Netflix открыла одну из своих собственных систем для создания и управления проектами…

В соответствии с концепцией спирального подхода к обучению, о которой писал ранее , привожу поэтапный план освоения data science. План составлен так, чтобы каждый этап делал учащегося в той или иной...