Innovation & Research
4K subscribers
493 photos
75 videos
219 files
4.89K links
“Push-the-envelope” Channel
Download Telegram
DeepMind разработала универсального AI-агента для виртуальных 3D-сред

SIMA (Scalable Instructable Multiworld Agent) может в различных условиях видеоигр следовать инструкциям на естественном языке и выполнять поставленные задачи. Агент изучил около 600 базовых игровых навыков: движение вперёд-назад, повороты, подъём по лестнице, открытие меню и карты игрового мира. Со временем разработчики планируют поручать SIMA выполнение более сложных функций, так как комплексные задачи типа «найти ресурсы и построить лагерь» агенту пока не под силу. Управление персонажем происходит с помощью обычных клавиатуры или мыши.

AI-агента обучали в 9 играх и 4 виртуальных исследовательских средах. SIMA не нужен доступ к исходному коду или специальные API, а достаточно изображения на экране и простых инструкций от пользователя. В основе агента — предварительно обученные модели машинного зрения, модель для интерпретации языка и преобразования команд пользователя в действия и ряд других.

Видеоигры являются ключевым тренировочным полигоном для AI-систем, т.к. представляют собой безопасную и при этом богатую среду обучения с гибкими настройками и постоянно меняющимися целями.

#news #AI #Google

https://deepmind.google/discover/blog/sima-generalist-ai-agent-for-3d-virtual-environments/
🌭2
Boston Dynamics и будущее робототехники (часть 1/2)
18.03.2024
Вместе с Центром робототехники послушали недавнее интервью подкасту Лекса Фридмана (Lex Fridman) Марк Райберт (Marc Raibert). Ооснователь Boston Dynamics, углубился в обширную область робототехники, размышляя о ее прошлом, настоящем и потенциальном будущем.
Во время свой работы в Boston Dynamics Райберт сыграл ключевую роль в разработке культовых роботов компании. Теперь, будучи главой Бостонского института искусственного интеллекта, он стремится объединить физическую ловкость своих роботов с когнитивными навыками. Эта инициатива направлена на расширение возможностей восприятия, обучения и принятия решений разработок Boston Dynamics.

Резюме
- Несмотря на 50 лет работы над роботами, технологии еще далеки от того, чтобы роботы могли манипулировать своими частями тела так же, как люди.
- Роботы должны научиться анализировать и повторять действия человека – в этом им поможет AI.
- Важно, чтобы люди привыкали к роботам, повышая доверие к технологии.

О рынке гуманоидных роботов
- Марк Райберт упоминает 12 компаний-производителей гуманоидных роботов – они создают конкуренцию на рынке.
- Важно наблюдать за тем, как будет развиваться конкуренция роботов с точки зрения когнитивных способностей.
- Роботы будут становиться дешевле и доступнее.
- Сегодня создаются как человекоподобные, так и четвероногие роботы.
- Важно создавать новые категории и виды роботов и разрабатывать новые сценарии их использования.
- Следует следить за прогрессом Илон Маска в робототехнике, т. к. его ресурсы и амбиции могут привести к значительным результатам.
- Опыт Hyundai в производстве автомобилей может быть полезен для создания дешевых и надежных роботов.

Важность AI в развитии роботов
- На текущем этапе развития большинству роботов не хватает когнитивных способностей – AI поможет решить эту проблему.
- Отсутствие когнитивной составляющих является одной из главных проблем для развития робототехники.
- Цель создания Бостонского института искусственного интеллекта – изучение внедрения когнитивного интеллекта в роботов.
- Важно создавать роботов, которые умеют наблюдать за тем, что делает человек, понимать это и повторять.
- Марк Райберт делает ставку на ИИ и машинное обучение для робототехники.

Развитие технологий в робототехнике
- Гидравлическая технология управления нравится Марку, хотя в мире ее считают старомодной.
- При разработке роботов также важно уделять внимание внешнему каркасу, красоте и естественности движений.
- Ходьба остается сложной задачей для роботов Boston Dynamics: «ходьба – это всегда падение».
- Роботы необязательно должны быть похожи на человека.
- Чтобы роботы научились ходить, они должны сначала научиться бегать.
- В Boston Dynamics изучали движения гепардов, кенгуру, лошадей и страусов для улучшения моторики роботов.
- При разработке роботов важно изучить движения человека и животных, разбить их на сегменты и разработать навыки, необходимые роботу для выполнения той или иной задачи.

#от_редактора #робототехника
👍5🌭2
Boston Dynamics и будущее робототехники (часть 2/2)

Также в интервью Марка выделили несколько рекомендаций

Рекомендации для PR роботов
- Нужно использовать геймификацию, игровые механики и соревновательный дух при взаимодействии людей с роботами.
- Нужно быть честными с потенциальными пользователями – делать простые видео (с точки зрения монтажа, без эффектов и лишних логотипов), которые максимально демонстрируют возможности прототипа в реальности.
- Важно показывать как успешные испытания роботов, так и неудачные, чтобы зрители видели прогресс и ценили успешные попытки.
- Стоит быть готовым показывать роботов в разных сценариях использования.
- Видео-демонстрации помогают показать зрителю возможности робототехники и вызвать у него эмоции, вдохновляют молодых людей заниматься робототехникой.

Рекомендации для HR и руководителей команд робототехники

- Инженеры делают то, что им нравится и получают ремесленное удовольствие от работы над проектом. Они художники и творцы, а не только ученые.
- Для привлечения инженерных кадров нужно создать среду для эффективного развития нестандартных проектов.
- В качестве кандидатов можно рассматривать людей без профессионального образования, но имеющих опыт работы в смежных сферах.
- Хорошая инженерная команда состоит из следующих компонентов: веселье, техничность, бесстрашие и трудолюбие ❤️

Рекомендации для команды инженеров-робототехников
- Важно испытывать роботов в сложных условиях, максимально приближенных к реальным.
- Важно «заглядывать в будущее» и представлять, каким может быть робот, его движения и функции, и что нужно сделать, чтобы это стало реальностью.
- Нужно соблюдать баланс между тем, что хочет достичь команда, и ее текущими возможностями.
- Важно не бояться неудач – роботу Atlas понадобилось 109 попыток, чтобы успешно подняться по ступенькам. Команда разработчиков записывала на видео каждую из них.
- При создании роботов можно почувствовать, насколько сложно устройство человека.

#от_редактора #робототехника
👍4🌭2
Стартап Cognition представил нейросеть, способную самостоятельно разрабатывать ПО

Devin обучена рассуждать, самостоятельно планировать, создавать ПО, а также принимать по ходу выполнения проектов различные решения, исправлять допущенные ошибки и ориентироваться в контексте.

Devin показала рекордные результаты в тесте SWE-Bench (датасет для проверки возможности AI решать типовые задачи с GitHub), решив 13,86% задач без какой-либо помощи. Ранее лучший результат показала Claude 2 от Anthropic — 4,8%, но он был получен с помощью подсказок от человека.

Devin общается с пользователем через чат, в котором показывает свои действия. Также в рабочем пространстве есть редактор, в котором виден написанный AI-код, консоль для работы с файлами и браузер, где нейросеть может самостоятельно открывать сайты и показывать результаты.
По оценкам экспертов, модель не вытеснит программистов, но существенно повысит производительность труда в отрасли.

Стартап Cognition на текущий момент привлёк $21 млн в ходе раунда А. Основной инвестор — фонд Founders, который возглавляет Петер Тиль (Peter Thiel), соучредитель PayPal, а также ряд бизнес-ангелов, среди которых бывший топ-менеджер Twitter Элад Гил (Elad Gil).

#news #AI

https://www.bloomberg.com/news/newsletters/2024-03-12/cognition-ai-s-devin-assistant-can-build-websites-videos-from-a-prompt
🌭2
Калифорнийский стартап Hippocratic AI, который делает AI-агентов для больниц и поликлиник, получил инвесторскую оценку в $500 млн после раунда финансирования в $53 млн от венчуриство из General Catalyst и Premji Invest с участием Andreessen Horowitz и SV Angel.

Стартап, основанный ровно год назад, создает "агентов", которые могут помочь больницам и клиникам.

В понедельник компания объявила о партнерстве с Nvidia, лидером рынка по созданию чипов искусственного интеллекта. Гиппократ будет использовать GPU для уменьшения "задержки" AI-агентов ИИ, чтобы реагировать в режиме реального времени на пациентов. Идея в том, чтобы в голосовом диалоге мгновенно отвечать на вопросы пациентов и врачей.
Стартап утверждает, что его компания построила "созвездие" больших языковых моделей, проверяющих друг друга, вместо того, чтобы полагаться только на одну, чтобы снизить риск.

#от_редактора #AI #медицина
🌭3🍌1
Дельфино-подобные дроны Zipline доставляют груз с точностью до парковочного места

Zipline известна тем, что доставляет грузы с помощью дронов самолетного типа. Грузы спускаются на парашюте. Точность таких «приземлений» не высока, да и не понятно, как забирать парашют (он ведь тоже денег стоит). Поэтому, дизайнеры и инженеры стартапа придумали дополнительного дрона (вдохновившись милыми дельфинами), которые могут компенсировать ветер при посадке и точно доставлять груз (если честно, то у нас ребятами из Центра робототехники патент на ровно такую систему).

Но Zipline молодцы и таки построили прототип этой системы (обещают запустить в продакшн) в конце этого года (наблюдаем).

В интервью Spectrum детально рассказали для чего и как делали такую двойную систему доставки. Можно посмотреть на видео, а можно внимательно прочитать довольно длинную статью.

#от_редактора #дроны
👍1🌭1
Саудовская Аравия планирует вложить $40 млрд в AI.

В последние недели представители Фонда государственных инвестиций Саудовской Аравии обсудили потенциальное партнерство с Andreessen Horowitz, одной из ведущих венчурных фондов Долины. Также, привлечены другие финансисты. Запланированный технологический фонд сделает Королевство крупнейшим в мире инвестором в области AI. Это также продемонстрирует глобальные деловые амбиции богатой нефтью страны, а также ее усилия по диверсификации экономики и поможет утвердится в качестве влиятельного игрока в геополитике. Ближневосточная страна преследует эти цели через свой суверенный фонд благосостояния, который имеет активы на более чем 900 миллиардов долларов.

Саудовская Аравия хочет привлечь к себе ряд AI-стартапов, включая производителей чипов и дорогие, построить новые ЦОДы, которые становятся все более востребованным (как сказал Альтман «computing - валюта будущего»).

Новый инвестиционный фонд заработает во второй половине 2024 года.

#от_редактора #AI
👍4🌭2
OpenAI представила первого embodied AI — робота Figure

На демонстрационном видео антропоморфный робот, управляемый мультимодальной моделью OpenAI, ведёт диалог с человеком на естественном языке, голосом, выполняет устные команды, ориентируется в обстановке, распознаёт и двигает предметы, также помнит контекст диалога, может объяснить и оценить свои действия. Разработчики утверждают, что всё это происходит в реальном времени и автономно — робот не был запрограммирован заранее и не управлялся дистанционно.

Визуально-языковая модель OpenAI получает данные с камер и кодирует речь пользователя, нейросети Figure преобразуют поток информации в действия робота. Робот двигается достаточно быстро и уверенно, действует обеими руками, но при этом стоит неподвижно. 

Разработка представляет собой один из наиболее зрелых примеров «овеществлённого» (embodied) AI. В планах компании — создать модель для управления «миллиардами единиц» человекоподобных роботов.

#news #AI #роботы

https://www.youtube.com/watch?v=Sq1QZB5baNw
🌭1
GPT-4 исполнился год!

По этому поводу нейропсихолог Гэри Маркус написал свои наблюдения:

- Возможно, мы достигли плато с точки зрения чистых возможностей. Никто не смог превзойти GPT-4 решительно. Google и Anthropic потратили много денег. Никто не преуспел. Вместо этого, по-видимому, существует конвергенция на уровнях GPT-4.

- Тем не менее, был достигнут большой прогресс как в обнаружении потенциальных приложений, так и в применении моделей класса GPT-4 на практике.

- Но ввод LLM в пром дается трудно; большая часть работы на сегодняшний день была предварительной. Компании начинают смягчать свои ожидания. Многие первоначальные ожидания были нереалистичными.

- Злоумышленники используют LLM для киберпреступности и дезинформации.

- Некоторые основные проблемы пока не решены, особенно галлюцинации, нестабильность и случайные бессмысленные ошибки.

- OpenAI были первыми, но нет огромного разрыва; другие игроки, похоже, догоняют. Мы можем ожидать ценовых войн.

- Судебные разбирательства будут серьезной проблемой; многие вопросы об источниках и законности этих источников остаются.

- Необходимо учитывать влияние LLM на климат, особенно по мере того, как модели продолжают расти.

- Прибыльность остается под вопросом. Большие модели стоят больших долларов, а получение выдаюшихся результатов может стоить огромных долларов; лицензионные и юридические расходы могут быть значительными.
👍1🔥1🌭1
🤔 Как выбрать великую цель и сделать все правильно?

Выдающихся ученых, бизнесменов, деятелей культуры или политиков объединяет одно – у них у всех была цель изменить что-то в нашем мире.

Как же правильно выбрать цель своей жизни и достигать ее? Вице-президент, директор Управления исследований и инноваций Сбербанка Альберт Ефимов расскажет, почему так важно целеполагание, что отличает великую цель от всех остальных и почему стоит стремиться к тому, что еще никто не достиг и не создал.

21 марта, 10:30 - 11:30
Регистрируйтесь и приходите или подключайтесь онлайн

#от_редактора
🔥3👍2🌭1
В России создали сверхпроводящую логическую ячейку для нейросетей и квантового компьютера

Команда исследователей из МГУ им. М.В. Ломоносова и ННГУ им. Н.И. Лобачевского разработали сверхпроводящую логическую ячейку, которая может быть как составной частью квантового компьютера, так и элементом нейросети. Она представляет собой интерферометр — прибор, изменяющий магнитное поле по заданным параметрам. Меняя параметры индуктивностей ячейки и внешнего потока, исследователи смогли использовать её в качестве вспомогательного кубита. Устройство работает при температурах от 0,03 кельвина до 1 кельвина (от -272,15 до -273,12 градуса Цельсия), что подтверждает возможность использовать её на практике для создания нейросетей, работающих с квантовой информацией.

В перспективе на основе таких ячеек могут создаваться элементы для нейроморфной обработки информации в квантовых процессорах — «квантовые» нейросети.

#news #кванты #AI

https://new.ras.ru/activities/news/predlozhena-sverkhprovodyashchaya-logicheskaya-yacheyka-dlya-neyrosetey-i-kvantovogo-kompyutera/
🔥5👍2🤯2🤩2🌭2🤔1
Forwarded from Сколтех
👀 В кампусе Сколтеха открылся интерактивный стенд Научной премии Сбера, сопредседателем которой является наш ректор Александр Кулешов.

На стенде можно узнать о:

🔸 лауреатах премии;
🔸 номинациях;
🔸 технологиях, которые развивает Сбер;
🔸 стажировках и вакансиях в технологических подразделениях Сбера.

Также на стенде можно оформить лимитированный платёжный стикер, созданный при помощи нейросети Kandinsky, поучаствовать в научной викторине и выиграть персональную экскурсию в павильон Сбера на ВДНХ.

📍Сколтех, R2-2019 (у лестницы).
🔥4👍3🌭1🦄1
Юго-Восточная Азия перехватывает инициативу в производстве полупроводников

Поскольку торговые правила США вытесняют из Китая многих производителей полупроводников, корпорации вынуждены переносить мощности в другие страны. Так, в Малайзии лидеры рынка  Micron и Intel, а также другие компании отрасли активно наращивают производство. В феврале 2023 г. была пройдена важная веха: Малайзия стала лидером по поставкам чипов в США, обойдя даже Тайвань, а объём иностранных инвестиций в страну за этот год составил $12,8 млрд — больше, чем за весь период с 2013 по 2020 гг. Пока в стране выпускаются полупроводники «устойчивых» больших техпроцессов, но правительство активно работает над тем, чтобы привлечь производство передовых чипов.

По оценкам министра торговли США Джины Раймондо (Gina Raimondo), Таиланд также может выиграть от перестройки этого глобального рынка. Полупроводниковая промышленность королевства, в которой доминируют компании Micron, Maxim (США), NXP (Нидерланды), Toshiba, Sony (Япония), KEC (Корея), в основном сосредоточена на поздних (back-end), менее технологичных, стадиях производственного процесса — корпусирования и тестирования чипов, — что ставит Таиланд на один уровень с Вьетнамом и Индией. Цель страны — развиваться в сторону более сложных и дорогих начальных этапов (front-end) — изготовления кремниевых пластин, литографии и т.д. И сейчас есть все шансы этих целей достичь: некоторые компании уже говорят о запуске участков front-end в Таиланде.

#news #чипы

https://www.reuters.com/business/us-firms-keen-diversify-supply-chains-supercharge-thai-investments-says-us-2024-03-13/
👍5🔥2🌭1
ООН приняла первую всемирную резолюцию по искусственному интеллекту

Организация призывает поощрять защиту персональных данных, развивать механизмы и технологии управления рисками искусственного интеллекта (AI), сокращать технологический разрыв между странами и разными слоями общества, а также укреплять защиту прав человека и поддерживать языковое разнообразие. Проект резолюции предложили США и 40 других стран, поддержали — свыше 120 стран, включая Китай. В итоговом голосовании на генеральной ассамблее за резолюцию высказались все 193 страны — члены организации. Документ носит рекомендательный характер и является основополагающим для дальнейшей международной работы над проблематикой AI.

#news #AI #регулирование

https://news.un.org/en/story/2024/03/1147831
🌭2👍1
Сбер и «Российский Красный Крест» открыли благотворительный счёт для сбора средств пострадавшим и семьям погибших во время теракта в Крокус Сити Холле.

Финансовую помощь можно оказать переводом средств через приложение СберБанк Онлайн, банкоматы, терминалы, а также в офисах банка.

◼️ Ссылка на сбор средств онлайн

◼️ Полные реквизиты для переводов:

Наименование: РОССИЙСКИЙ КРАСНЫЙ КРЕСТ, РКК

ИНН/КПП: 7728014523/ 772801001

Расчётный счёт: 40703810100020000067

Банк: ПАО Сбербанк

БИК: 044525225

Корр. счет: 30101810400000000225

Назначение платежа: Благотворительное пожертвование на помощь семьям погибших, семьям пострадавших и пострадавшим при теракте в «Крокус Сити Холл».
6🙏3👍2
Innovation & Research pinned «Сбер и «Российский Красный Крест» открыли благотворительный счёт для сбора средств пострадавшим и семьям погибших во время теракта в Крокус Сити Холле. Финансовую помощь можно оказать переводом средств через приложение СберБанк Онлайн, банкоматы, терминалы…»
Apple ведёт переговоры с Google об использовании Gemini на iPhone

AI-сервис может быть интегрирован уже в iOS 18, которую представят в этом году. Таким образом модель Google получит масштабирование на примерно 2 млрд активно используемых устройств, а Apple — полноценного AI-агента. Ранее сообщалось, что компания ведёт переговоры с OpenAI об интеграции ChatGPT в iPhone, но их результаты неизвестны. Apple также вела собственные разработки — инсайдеры называли модели генеративного AI Ajax и Apple GPT — но все они оказались недостаточно хороши для вывода на рынок.

Gemini уже внедрён на новых смартфонах Samsung — корейская корпорация тоже разрабатывала свою AI-модель Gauss, но в итоге выбрала Gemini. Расширение доли Google за счёт Apple неминуемо привлечёт внимание антимонопольных органов, поэтому у сделки могут быть препятствия регулятивного характера. Однако уже можно говорить о тенденции объединения производителей устройств вокруг крупных разработчиков AI. Очевидно, что собственные AI-модели производителей электроники не могут конкурировать с развитыми сервисами софтверных гигантов, и экосистемы последних будут прирастать за счёт новых пользователей сторонних устройств.

#news #Apple #Google #AI

https://www.bloomberg.com/news/articles/2024-03-18/apple-in-talks-to-license-google-gemini-for-iphone-ios-18-generative-ai-tools
🌭2