ML-задача на 30 минут: гадаем по cookie
«Я тебя по IP вычислю!» – помните такую угрозу из интернета времен нулевых годов? Мы в Big Data МТС решили выяснить, можно ли составить хотя бы приблизительное представление о человеке, обладая информацией о сайтах, которые он посещает. Мы сгенерировали полусинтетические данные, чтобы понять, насколько смелыми можно быть в этих ваших интернетах.
Приглашаем вас попробовать составить портрет пользователя на основе этих данных и посмотреть, насколько точным он получится. Также под катом вы найдете наш baseline решения, написание которого займет около получаса.
Читать: https://habr.com/ru/post/709602/
«Я тебя по IP вычислю!» – помните такую угрозу из интернета времен нулевых годов? Мы в Big Data МТС решили выяснить, можно ли составить хотя бы приблизительное представление о человеке, обладая информацией о сайтах, которые он посещает. Мы сгенерировали полусинтетические данные, чтобы понять, насколько смелыми можно быть в этих ваших интернетах.
Приглашаем вас попробовать составить портрет пользователя на основе этих данных и посмотреть, насколько точным он получится. Также под катом вы найдете наш baseline решения, написание которого займет около получаса.
Читать: https://habr.com/ru/post/709602/
🔥1
Дайджест Python: итоги 2022 года, обзор версии 3.11 и курсы от Google
Дайджест интересных статей о Python: что нового в версии 3.11, гайды по программированию на Python и обучающие статьи.
Читать: «Дайджест Python: итоги 2022 года, обзор версии 3.11 и курсы от Google»
Дайджест интересных статей о Python: что нового в версии 3.11, гайды по программированию на Python и обучающие статьи.
Читать: «Дайджест Python: итоги 2022 года, обзор версии 3.11 и курсы от Google»
A look at the re-imagined Oracle Analytics mobile app
The Oracle Analytics mobile application has a new look and feel and improved user experience. Now you can stay connected to the information that you need on the go, search across all your reports and dashboards, and navigate through your personal and shared folders.
Read: https://blogs.oracle.com/analytics/post/a-look-at-the-re-imagined-oracle-analytics-mobile-app
The Oracle Analytics mobile application has a new look and feel and improved user experience. Now you can stay connected to the information that you need on the go, search across all your reports and dashboards, and navigate through your personal and shared folders.
Read: https://blogs.oracle.com/analytics/post/a-look-at-the-re-imagined-oracle-analytics-mobile-app
Oracle
A look at the Re-Imagined Oracle Analytics mobile app
The Oracle Analytics mobile application is now updated with a new look & feel, with an improved user experience. Just download the app and go! The new iOS and Android applications allow you to stay connected to the information you need on the go, search across…
👍1
Как стать архитектором ПО в 2023 году?
IT-архитектор — это проектировщик, который принимает ключевые решения. В банковской сфере IT-архитектору приходится строить сложные системы, учитывая такие особенности, как работа с большим количеством пользователей и объёмами данных.
Если любите стратегические задачи и большие проекты, эта специальность может стать работой мечты. Вместе с Владимиром Григорьевым, экспертом по архитектуре Газпромбанка, выделили области знаний, которые помогут сориентироваться в профессии:
Читать: https://tprg.ru/iEcW
IT-архитектор — это проектировщик, который принимает ключевые решения. В банковской сфере IT-архитектору приходится строить сложные системы, учитывая такие особенности, как работа с большим количеством пользователей и объёмами данных.
Если любите стратегические задачи и большие проекты, эта специальность может стать работой мечты. Вместе с Владимиром Григорьевым, экспертом по архитектуре Газпромбанка, выделили области знаний, которые помогут сориентироваться в профессии:
Читать: https://tprg.ru/iEcW
Register OCI Language models in Oracle Analytics Cloud
Integrate OCI Language models directly in Oracle Analytics Cloud to run deep, sophisticated text analysis. Pre-trained AI models allow you to pull insights and sentiment from your text quickly and easily.
Read: https://blogs.oracle.com/analytics/post/register-ai-language-models-in-oracle-analytics
Integrate OCI Language models directly in Oracle Analytics Cloud to run deep, sophisticated text analysis. Pre-trained AI models allow you to pull insights and sentiment from your text quickly and easily.
Read: https://blogs.oracle.com/analytics/post/register-ai-language-models-in-oracle-analytics
Oracle
register AI language models in Oracle Analytics
integrate Oracle AI language directly in Oracle Analytics to run deep, sophisticated text analysis. Our AI pre-trained models allows users to pull insights and sentiment from your text. Here you'll learn how to register all AI language models in your Oracle…
Цвет сезона – слива. Что мы сделали с GreenPlum в 2022-м и что планируем в 2023-м
Привет, Хабр! Меня зовут Марк Лебедев, работаю архитектором в GlowByte. В июне 2022 года на митапе DataPeople мы с командой рассказывали о наших планах в части GreenPlum (запись выступления). Если коротко, тогда мы сфокусировались на развитии open-source и собирались выложить в публичный доступ наши наработки относительно мониторинга кластера и мониторинга запросов, плейбуки по инсталляции и наши подходы для нагрузочного тестирования. Собственно про них и хотелось бы поговорить подробно. В этой статье мы подведём итоги, что нам удалось сделать за прошедшие 6 месяцев, и расскажем о планах на будущий год. В конце статьи укажем все ссылки на репозитории.
Читать: https://habr.com/ru/post/711206/
Привет, Хабр! Меня зовут Марк Лебедев, работаю архитектором в GlowByte. В июне 2022 года на митапе DataPeople мы с командой рассказывали о наших планах в части GreenPlum (запись выступления). Если коротко, тогда мы сфокусировались на развитии open-source и собирались выложить в публичный доступ наши наработки относительно мониторинга кластера и мониторинга запросов, плейбуки по инсталляции и наши подходы для нагрузочного тестирования. Собственно про них и хотелось бы поговорить подробно. В этой статье мы подведём итоги, что нам удалось сделать за прошедшие 6 месяцев, и расскажем о планах на будущий год. В конце статьи укажем все ссылки на репозитории.
Читать: https://habr.com/ru/post/711206/
How to get multiple prediction outputs for an Oracle Machine Learning model in Oracle Analytics Cloud
This blog describes how to get multiple prediction outputs for an OML model as part of the scoring process in dataflows in OAC.
Read: https://blogs.oracle.com/analytics/post/how-to-get-multiple-output-predictions-for-an-oml-model-in-oac
This blog describes how to get multiple prediction outputs for an OML model as part of the scoring process in dataflows in OAC.
Read: https://blogs.oracle.com/analytics/post/how-to-get-multiple-output-predictions-for-an-oml-model-in-oac
Интерпретируемость ML-моделей: от инструментов до потребностей пользователя
Интерпретируемость ML-моделей - очень широкая концепция. То, насколько интерпретация хороша, зависит не только от инструментов и отчетов, которые мы предоставляем пользователю, но и от потребностей пользователя и особенностей задач, которые он решает.
В статье разберемся, как эффективно работать с интерпретируемостью ML-моделей в зависимости от потребностей ключевых пользователей.
Читать: https://habr.com/ru/post/709688/
Интерпретируемость ML-моделей - очень широкая концепция. То, насколько интерпретация хороша, зависит не только от инструментов и отчетов, которые мы предоставляем пользователю, но и от потребностей пользователя и особенностей задач, которые он решает.
В статье разберемся, как эффективно работать с интерпретируемостью ML-моделей в зависимости от потребностей ключевых пользователей.
Читать: https://habr.com/ru/post/709688/
Too good to be true instinct
Read: https://junkcharts.typepad.com/numbersruleyourworld/2023/01/too-good-to-be-true-instinct.html
Read: https://junkcharts.typepad.com/numbersruleyourworld/2023/01/too-good-to-be-true-instinct.html
Важные исследования в области AI в 2022 г
Данная статья представляет собой свободный перевод раздела "Исследования" из доклада State of the Art 2022 (октябрь). Доклад State of the Art публикуется уже пятый год. Это подборка самых интересных вещей в мире AI, (конечно с точки зрения авторов). Отчет включает в себя несколько блоков:
Читать: https://habr.com/ru/post/711512/
Данная статья представляет собой свободный перевод раздела "Исследования" из доклада State of the Art 2022 (октябрь). Доклад State of the Art публикуется уже пятый год. Это подборка самых интересных вещей в мире AI, (конечно с точки зрения авторов). Отчет включает в себя несколько блоков:
Читать: https://habr.com/ru/post/711512/
Компьютерное зрение: загрузка и подготовка данных Fashion MNIST
Глубокое обучение — это набор методов, которые особенно хорошо работают с задачами компьютерного зрения и обработки естественного языка. DL является частью более широкой области, называемой машинным обучением (ML).
В данной практике мы хотим распознавать разные предметы одежды, обученные на наборе данных, содержащем 10 различных типов — по сути, проблема классификации изображений, а не данные, напоминающие что-то вроде набора данных Iris, который мы далее рассмотрим.
Читать: https://habr.com/ru/post/711852/
Глубокое обучение — это набор методов, которые особенно хорошо работают с задачами компьютерного зрения и обработки естественного языка. DL является частью более широкой области, называемой машинным обучением (ML).
В данной практике мы хотим распознавать разные предметы одежды, обученные на наборе данных, содержащем 10 различных типов — по сути, проблема классификации изображений, а не данные, напоминающие что-то вроде набора данных Iris, который мы далее рассмотрим.
Читать: https://habr.com/ru/post/711852/
The four objectives a business user must keep in mind when using Oracle Fusion Analytics
Learn about the four objectives that are key in an analytics solution.
Read: https://blogs.oracle.com/analytics/post/business-user-objectives-in-fusion-analytics
Learn about the four objectives that are key in an analytics solution.
Read: https://blogs.oracle.com/analytics/post/business-user-objectives-in-fusion-analytics
Oracle
The four objectives a business user must keep in mind when using Oracle Fusion Analytics
Learn about the four objectives that are key in an analytics solution.
Configure Private Printer in Oracle Analytics Cloud using Public OCI Load Balancer
In Oracle Analytics Cloud you can enable IPP printing through a private printer running from a Common UNIX Printing System (CUPS) server or directly via IPP.
Read: https://blogs.oracle.com/analytics/post/configure-a-private-printer-in-oracle-analytics-cloud
In Oracle Analytics Cloud you can enable IPP printing through a private printer running from a Common UNIX Printing System (CUPS) server or directly via IPP.
Read: https://blogs.oracle.com/analytics/post/configure-a-private-printer-in-oracle-analytics-cloud
Oracle
Configure a Private printer in Oracle Analytics Cloud
In Oracle Analytics Cloud you can enable IPP printing through a private printer running from a Common UNIX Printing System (CUPS) server or directly via IPP.
Data Engineering Weekly #115
Read: https://www.dataengineeringweekly.com/p/data-engineering-weekly-115
Read: https://www.dataengineeringweekly.com/p/data-engineering-weekly-115
Как в Учи.ру построили платформу для анализа A/B-тестов на ClickHouse
Привет, Хабр! Меня зовут Федор Тюрин, я руководитель команды продуктовой аналитики в Учи.ру. Мы проводим очень много А/Б-тестов (десятки запусков в неделю и сотни в течение года). В таких условиях очень важна автоматизация процесса анализа и подведения итогов теста.
Читать: https://habr.com/ru/post/712192/
Привет, Хабр! Меня зовут Федор Тюрин, я руководитель команды продуктовой аналитики в Учи.ру. Мы проводим очень много А/Б-тестов (десятки запусков в неделю и сотни в течение года). В таких условиях очень важна автоматизация процесса анализа и подведения итогов теста.
Читать: https://habr.com/ru/post/712192/
Обзор книги «Data Science. Наука о данных с нуля», отличная книга для начинающих
Всем доброго времени суток! Так как о Data Science мы слышим всё чаще и чаще, предлагаю вам обзор книги, что будет полезна для начинающих.
Публикую обзор книги с моего телеграмм-канала IT-старт t.iss.one/it_begin на книгу "Data Science.Наука о данных для начинающих".
Автор книги Джоэл Грас.
Стоит читать? Да! Почему? Опишу в статье.
Читать: https://habr.com/ru/post/712388/
Всем доброго времени суток! Так как о Data Science мы слышим всё чаще и чаще, предлагаю вам обзор книги, что будет полезна для начинающих.
Публикую обзор книги с моего телеграмм-канала IT-старт t.iss.one/it_begin на книгу "Data Science.Наука о данных для начинающих".
Автор книги Джоэл Грас.
Стоит читать? Да! Почему? Опишу в статье.
Читать: https://habr.com/ru/post/712388/
👍3
Как не попасть в яму с помощью нейронных сетей: технологии приходят на помощь коммунальщикам
Привет, Хабр! Меня зовут Андрей Соловьёв, я DS в Сбере. Вероятно, практически каждый читатель этой статьи сталкивался с проблемными дорогами, если вы автомобилист, или тротуарами, если вы пешеход. Плохие дороги — одна из актуальнейших проблем любой страны. Сегодня поговорим о том, как технологии могут помочь решить эту проблему.
Задача состоит в распознавании повреждений дорожного покрытия. Общая дорожная сеть Российской Федерации — 1,5 млн км, из которых примерно 75% — дороги общего пользования. При этом около 65% таких дорог имеют твёрдое покрытие, однако 55% из них не соответствуют нормативным требованиям. Иными словами, большинство национальных дорог содержит различные дефекты, и это становится серьёзной опасностью как для владельцев транспортных средств, так и для самого транспорта, а также для пешеходов. Что делать? Конечно же, привлечь нейросети. Как — рассказываю под катом.
Читать: https://habr.com/ru/post/712502/
Привет, Хабр! Меня зовут Андрей Соловьёв, я DS в Сбере. Вероятно, практически каждый читатель этой статьи сталкивался с проблемными дорогами, если вы автомобилист, или тротуарами, если вы пешеход. Плохие дороги — одна из актуальнейших проблем любой страны. Сегодня поговорим о том, как технологии могут помочь решить эту проблему.
Задача состоит в распознавании повреждений дорожного покрытия. Общая дорожная сеть Российской Федерации — 1,5 млн км, из которых примерно 75% — дороги общего пользования. При этом около 65% таких дорог имеют твёрдое покрытие, однако 55% из них не соответствуют нормативным требованиям. Иными словами, большинство национальных дорог содержит различные дефекты, и это становится серьёзной опасностью как для владельцев транспортных средств, так и для самого транспорта, а также для пешеходов. Что делать? Конечно же, привлечь нейросети. Как — рассказываю под катом.
Читать: https://habr.com/ru/post/712502/
👍2
Big Data МТС запускает хакатон по ML с призовым фондом 650 тысяч рублей
2 месяца участники ML-хакатона будут разрабатывать решения для определения пола и возраста человека по cookie. Самые успешные получат приз.
Читать: «Big Data МТС запускает хакатон по ML с призовым фондом 650 тысяч рублей»
2 месяца участники ML-хакатона будут разрабатывать решения для определения пола и возраста человека по cookie. Самые успешные получат приз.
Читать: «Big Data МТС запускает хакатон по ML с призовым фондом 650 тысяч рублей»
Топ-5 трендов управления производственными активами
Мы в Factory5 постоянно исследуем рынок и отмечаем тенденции развития не только отечественного, но и зарубежного рынка цифровых решений для промышленности. 2022 год стал поворотным в истории многих предприятий: компаниям приходилось трансформироваться под новые реалии, пробовать новое и принимать быстрые решения. Представляем вашему вниманию обзор актуальных трендов рынка применения систем класса EAM (Enterprise Asset Management). Такие системы применяются для автоматизации бизнес-процессов учета, технического обслуживания и ремонта основных фондов промышленных компаний.
Читать: https://habr.com/ru/post/712782/
Мы в Factory5 постоянно исследуем рынок и отмечаем тенденции развития не только отечественного, но и зарубежного рынка цифровых решений для промышленности. 2022 год стал поворотным в истории многих предприятий: компаниям приходилось трансформироваться под новые реалии, пробовать новое и принимать быстрые решения. Представляем вашему вниманию обзор актуальных трендов рынка применения систем класса EAM (Enterprise Asset Management). Такие системы применяются для автоматизации бизнес-процессов учета, технического обслуживания и ремонта основных фондов промышленных компаний.
Читать: https://habr.com/ru/post/712782/
Заповеди начинающего DS
Привет! Меня зовут Mashkka Тихонова. Я - Senior Data Scientist, а еще я активно преподаю все, что связано с ML, DS и DL - помогаю людям начать свой путь в Data Science!
За годы преподавания у меня накопилось много советов для тех, кто только-только начинает свой путь в DS. Этими советами я всегда делюсь со студентами, а теперь решила собрать их в одном посте, написанном по мотивам моей серии постов в tg .
Советы эти совсем простые (уровня не заваливай горизонт на фото, когда фоткаешь пейзаж), но очень часто именно про такие базовые вещи на первых этапах забывают рассказать.В свое время я сама наступала на эти грабли, так как мне их никто не рассказал. Буду рада, если помогу вам этих ошибок избежать!
Читать: https://habr.com/ru/post/712592/
Привет! Меня зовут Mashkka Тихонова. Я - Senior Data Scientist, а еще я активно преподаю все, что связано с ML, DS и DL - помогаю людям начать свой путь в Data Science!
За годы преподавания у меня накопилось много советов для тех, кто только-только начинает свой путь в DS. Этими советами я всегда делюсь со студентами, а теперь решила собрать их в одном посте, написанном по мотивам моей серии постов в tg .
Советы эти совсем простые (уровня не заваливай горизонт на фото, когда фоткаешь пейзаж), но очень часто именно про такие базовые вещи на первых этапах забывают рассказать.В свое время я сама наступала на эти грабли, так как мне их никто не рассказал. Буду рада, если помогу вам этих ошибок избежать!
Читать: https://habr.com/ru/post/712592/