🦾 — Продолжается набор в бакалавриат, магистратуру и аспирантуру ФПМИ МФТИ по искусственному интеллекту и робототехнике!

Поступление проходит в:
— Бакалавриат для студентов 2 курса ФПМИ | программа и подача заявки
— Магистратуру по программе «Методы и технологии искусственного интеллекта» | программа и подача заявки
— Аспирантуру по направлению «Информатика и вычислительная техника» | подача заявки

Для поступления необходимо:
1⃣ Заполнить заявку на нашем сайте и пройти собеседование в Центре. Или пройти летнюю стажировку и поступить к нам без собеседования!
2⃣ Поступающим в магистратуру и аспирантуру подать документы на сайте приёмной комиссии МФТИ и успешно пройти вступительные испытания.

В Центре под руководством ведущих специалистов в своих областях вы сможете заниматься написанием статей на передовые конференции А* (NeurIPS, ICLR, ICML, IJCAI и др.), а также работать над прикладными проектами по тематикам:

🔵Обучение с подкреплением для задач робототехники (манипуляция, навигация)
🔵Мультимодальные карты знаний в компьютерном зрении и робототехнике
🔵Компьютерное зрение для задач робототехники и беспилотного транспорта
🔵Большие языковые и мультимодальные модели для генерации действий в роботототехнике
🔵Мультимодальные среды и модели в обучении с подкреплением

Дедлайны:
Бакалавриат:
8 сентября: заявка на поступление
Магистратура и аспирантура:
18 мая: стажировка
1 июня: заявка на поступление

Информация для поступающих на сайте программы и приемной комиссии.

Прямые эфиры о поступлении можно посмотреть тут.

🪼 — Начинаем вторую волну поступления в нашу магистратуру «Методы и технологии ИИ»!

В ЦКМ мы учим создавать и работать с системами ИИ, которые интегрируют в себе последние достижения в области нейросетей, языковых моделей и робототехники.

С нами вы сможете обучаться на актуальной программе, выезжать на международные конференции, работать над коммерческими и научными проектами, получать высокую стипендию.

Для поступления необходимо:
🪼Заполнить заявку в форме до 23 июня и пройти собеседование в Центре;
🪼Подать документы на сайте приёмной комиссии и успешно пройти вступительные испытания на ФПМИ МФТИ.

В ответ на заявку мы напишем вам на указанную почту с приглашением на собеседование, где вы расскажете о себе и сможете обсудить ваши ожидания с менторами Центра.

Больше про поступление читайте в нашем посте и на сайте.

ИИ-ЗАМАН: научная конференция по ИИ в рамках Kazan Digital Week 2025

18 сентября в Казани пройдет конференция ИИ-ЗАМАН, на которой я руковожу секцией «Воплощенный ИИ и робототехника» 🤖

Исследуешь локализацию, навигацию, манипуляцию, взаимодействие роботов с человеком или другие задачи объединяющие ИИ и робототехнику?
Тогда это отличная возможность поделиться своими результатами и для нетворкинга!

Занимаешься ИИ, но не занимаешься робототехникой? Участвуй в других секциях:

⚫️Компьютерное зрение — Андрей Кузнецов (Институт AIRI, Университет Иннополис)
⚫️Обработка естественного языка — Елена Тутубалина (Институт AIRI, ИСП РАН)
⚫️Воплощенный ИИ и робототехника — Алексей Ковалёв (Институт AIRI, МФТИ)
⚫️ИИ в науке — Алексей Шпильман (Сбербанк)
⚫️ИИ в молекулярных и биологических исследованиях — Павел Яковлев (Биокад)

📍18 сентября — Казань, Россия

📝 Дедлайн подачи статей — 20 июля

📚 Статьи будут опубликованы в «Электронных библиотеках», лучшие работы рекомендованы для Springer LNCS

💸 Если ты студент или аспирант и твоя статья будет отобрана — ты можешь получить финансовую поддержку на проезд до Казани. Заявка подаётся вместе со статьёй

🔗 Подробнее: aizaman.ru
📲 Канал конференции: @aizaman_ai

EmbRACE-3K или VirtualHome на стероидах

Довольно сырая, но вызывающая интерес работа

Авторы подметили, что VLMки, неплохо справляющиеся с задачами по картинкам и видео, не умеют из коробки в embodied задачи. Связывают это со способом обучения (что неудивительно) и выделяют три проблемы:

⚫️VLMки не умеют в эксплорэйшн — модели больше обращают внимание на текущие визуальные наблюдения и плохо справляются с долгосрочным планированием
⚫️VLMки не умеют учитывать позу — модели начинают плохо работать с пространственными отношениями, если агент двигается
⚫️VLMки забывают цель — модели часто не переносят намерение (intent) за пределы текущего фрейма

Для того чтобы тестировать способности VLMок авторы собрали 3000 траектории с языковыми инструкциями в симуляторе на движке Unreal Engine. Протестировали GPT-4o, Gemini 2.5 Pro и Qwen2.5-VL-7B в zero-shot и показали, что справляются они с задачами плохо, но дообучение в формате SFT+GRPO на собранных данных дает хороший прирост

Из плюсов: траектории размечены так, что к каждому действию есть «рассуждение» почему это действие было выполнено

Из минусов: дискретная среда с небольшим набором действий (WASD + Open, Pick, Drop)

На гифке демо с дообученной Qwen2.5-VL-7B

#vlm #embodied