Innovation & Research
2.88K subscribers
416 photos
57 videos
149 files
4.47K links
“Push-the-envelope” Channel
Download Telegram
Neura продемонстрировал человекоподобного робота 4NE-1

Дроид в рекламном ролике гладит белье, режет овощи и перемещает различные предметы. О возможностях 4NE-1 трудно судить, поскольку видео состоит из множества смонтированных коротких кадров. Главный посыл ролика — заявить о присутствии на рынке и сотрудничестве с Nvidia.

Видео появилось на фоне выступления Nvidia на конференции Siggraph, где компания продемонстрировала инструменты для обучения человекоподобных роботов посредством телеопераций. Машина копирует движения человека, оцифровку которых производит Apple Vision Pro. Данные, попадая в приложение NVIDIA Isaac Sim, моделируют движения в виртуальной среде. Затем разработчики генерируют синтетические наборы данных в микросервисе MimicGen NIM.

Nvidia ранее предоставила десяткам компаний ранний доступ к инструментам для разработки и внедрения антропоморфных роботов. Помимо Neura в список партнеров вошли 1X, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, RobotEra и Skild AI.

Роботы-гуманоиды уже работают в полевых условиях, но в основном находятся на стадии пилотирования. На следующий этап более широкого внедрения перешла только Agility, которая поставляет машины логистической компании GXO. Однако даже эта сделка далека от широкомасштабного развертывания.

Neura Robotics основана в 2019 г. в Штутгарте, Германия. Компания оценивается в $430 млн.

#роботы #AI  #стартапы #news

https://techcrunch.com/2024/07/31/neura-shows-off-humanoid-robot-4ne-1/
Робот-стоматолог впервые провел процедуру на человеке

Управляемая AI автономная машина впервые подготовила зуб к установке коронки на пациенте, причем примерно в восемь раз быстрее стоматолога. Процедура, на которую у врача обычно уходит два часа, заняла у робота 15 минут.

Стоматологическая система включает ручной аппарат для визуализации, AI-алгоритм для диагностики и рекомендаций по лечению, а также робота-хирурга. На ее разработку бостонский стартап Perceptive собрал $30 млн. Среди инвесторов — Pacific Dental Services, Y Combinator и Эд Цукерберг, стоматолог и отец Марка Цукерберга. Партнерами проекта выступают ADA-Forsyth и Гарвардская школа стоматологии.

Система Perceptive использует интраоральный 3D-сканер, который с помощью оптической когерентной томографии (ОКТ) строит подробную модель полости рта, включая зубы, десны и нервы. ОКТ выявляет кариес с точностью 90% и выше без ионизирующего излучения, характерного для других технологий сканирования. Аналогичные 2D-сканеры имеют точность около 45%. Таким образом, система позволит диагностировать проблемы на ранних стадиях.

Робот еще не одобрен Управлением по контролю качества пищевых продуктов и лекарственных препаратов США (FDA), и недоступен для приобретения.

#роботы #AI  #стартапы  #news

https://newatlas.com/health-wellbeing/robot-dentist-world-first/
Робот от Google играет в настольный теннис не хуже людей

Google DeepMind продемонстрировала прогресс в области роботов-манипуляторов, представив доклад «Достижение человеческого соревновательного уровня в настольном теннисе» и видео-демонстрацию к нему. Совместно с экспертами-тимлидами из Центра робототехники Сбера мы подготовили обзор этого проекта.

В видео показано, как роботизированная рука с ракеткой играет в настольный теннис с человеком. Разработанная система демонстрирует потенциал AI в освоении сложных физических задач, которые требуют быстрой реакции и адаптивности — робот способен в реальном времени адаптироваться к различным игровым стилям и приемам.

Ключевые технические новшества включают:

1. Иерархическую и модульную архитектуру, сочетающую низкоуровневые контроллеры для специфических навыков с высокоуровневым контроллером для выбора оптимальной стратегии.

2. Успешный переход от симуляции к реальному миру без дополнительного обучения (zero-shot sim-to-real transfer).

3. Систему технического зрения, построенную на «честном» детектировании шарика и трекинге ракетки противника при помощи mocap-системы, что обеспечивает точное восприятие игровой ситуации в реальном времени.

Для оценки уровня игры робота было проведено несколько матчей против 29 игроков разного уровня: от новичков до профессионалов. Робот выиграл все игры против новичков, 55% матчей против игроков среднего уровня, но пока не смог обойти ни одного из профессионалов. Общая доля побед робота составила 46%.

Хотя в данный момент робот демонстрирует игру на уровне среднего человека, его способность к взаимодействию с игроками разных уровней и итеративному дообучению указывает на его потенциал.

В будущем устранение ограничений робота могут повысить его производительность против более продвинутых игроков. Этот проект также открывает перспективы для дальнейших исследований в области робототехники, в частности в достижении человеческого уровня мастерства в различных реальных навыках. В целом, хотя текущие способности робота впечатляют, всё ещё есть возможности для улучшения, особенно в сравнении с профессиональными игроками. Тем не менее, этот проект является значительным этапом в развитии робототехники и AI, демонстрируя потенциал интеграции передовых технологий машинного обучения и компьютерного зрения в физические системы.

С точки зрения практических перспектив проекта, без всяких сомнений, робот, который играет в настольный теннис будет востребован в сфере развлечений, причём как в профессиональных спортивных клубах, где занимаются настольным теннисом, так и в развлекательных центрах, парках аттракционов, отелях, аэропортах. Стоит отметить, что это не первый подход к созданию роботизированного партнёра по настольному теннису, но, безусловно, один из самых успешных.

Это интересное решение как с точки зрения технологий, так и с точки зрения опыта взаимодействия с ним. Когда мы увидим такого робота в обычном развлекательном центре? Главный вопрос здесь в масштабируемости решения и стоимости каждой инсталляции. Разработчикам еще нужно пройти долгий и непростой путь, превращая лабораторную установку в аттракцион, доступный каждому.

#news #роботы

https://sites.google.com/view/competitive-robot-table-tennis
Китай стремится повторить успех индустрии электромобилей, захватывая рынок роботов

Более двух десятков китайских компаний продемонстрировали андроидов, предназначенных для работы на фабриках и складах, на Всемирной конференции робототехники (World Robot Conference) в Пекине. Примечательно, что многие из этих корпораций ранее успешно поучаствовали в буме электромобилей, включая производство аккумуляторов и датчиков.

Стремление Китая поднять новую отрасль, включившись и здесь в гонку с Tesla, опирается на формулу, которая 10 лет назад легла в основу развития индустрии электромобилей: государственная поддержка, жесткая ценовая конкуренция со стороны большого числа участников рынка и глубокая цепочка поставок.

«Китайская индустрия гуманоидных роботов демонстрирует явные преимущества в плане интеграции в производственные процессы предприятий массового выпуска», — утверждают аналитики китайского исследовательского института LeadLeo.

Когда в 2019 г. Tesla открыла завод в Шанхае, китайские чиновники заявили, что пионер в области электромобилей окажет «эффект щуки» на промышленность страны: появление крупного конкурента заставит «карасей»-производителей плавать быстрее. Робот Optimus компании Tesla оказал схожий эффект.

Компания Маска использует для Optimus наработки в AI, смоделированные на основе ПО «Полностью автономное вождение» (Full Self-Driving) для электромобилей. Китайские конкуренты и аналитики говорят, что Tesla имеет раннее лидерство в области AI, но у Китая есть возможность снизить цену производства.

КНР является мировым лидером по количеству вводимых в эксплуатацию промышленных роботов: в год в стране устанавливают примерно 290 тыс. единиц или более 50% от общемирового показателя. К 2025 г. планируется развернуть и массовое производство человекоподобных моделей.

#роботы #AI #news

https://www.reuters.com/technology/chinas-robot-makers-chase-tesla-deliver-humanoid-workers-2024-08-23/
Эксперты Центра робототехники Сбера оценили разрабатываемый Apple манипулятор для бытового применения

Настольный домашний робот сочетает в себе дисплей, похожий на iPad, и роботизированную руку. Это может быть колонка с исполнительным устройством (манипулятором), которая будет либо стационарной, либо — крепиться на направляющие над рабочей поверхностью кухонного гарнитура.

Проект был одобрен в 2022 г., при этом в последние месяцы работы над ним активизировались. В разработку вовлечено несколько сотен человек. Apple намерена представить продукт в 2026-2027 гг., его предполагаемая цена — $1 тыс. Такая низкая для робота цена может указывать на то, что исполнительное устройство будет поднимать не более 100-200 граммов, и будет выпускаться в серии в несколько десятков тысяч экземпляров, как это было с VR-гарнитурой VisionPro. Кроме того, цена пока только предварительная — следует дождаться официальных анонсов, чтобы делать более конкретные выводы.

Анализируя общие тренды и поведение пользователей, корпорация, вероятно, пришла к выводу, что люди проводят большую часть времени за персональными устройствами, выделяя все меньше времени на бытовые задачи. Предположительно, Apple планирует создать помощника для работы на кухне. Управление, скорее всего, будет голосовым, так как руки часто заняты или загрязнены. Возможно, бигтех планирует использовать продукты OpenAI, о сотрудничестве с компанией было объявлено ранее. Благодаря внедрению новых моделей и мультимодальных агентов, Apple, вероятно, достигнет генерализации нейросетевого алгоритма для решения бытовых задач – т.е. способного на выполнение не одной-двух стандартных функций, а целого спектра в зависимости от запроса пользователя.

Очевидно, что бигтех ищет новые идеи для своих продуктов. Рынок мобильных устройств переживает стагнацию из-за отсутствия технологических прорывов и большого количества китайской продукции с сопоставимым качеством. Поэтому компания анализирует и тестирует иные высокотехнологичные B2C-ниши, подбирает наиболее перспективные, чтобы занять в них лидерские позиции. Это может говорить о том, что Apple видит в домашних роботах-манипуляторах перспективу массового использования в ближайшие 10 лет.

#news #роботы #AI

https://www.bloomberg.com/news/articles/2024-08-14/apple-pushes-ahead-with-tabletop-home-device-in-shift-to-robotics?embedded-checkout=true
Skyline Robotics выпустил робота для мытья окон

Skyline Robotics (подразделение New York Robotics Network) и Palladium Window Solutions выпустили робота Ozmo для мытья окон. По оценкам разработчиков, машина справляется с этой работой в три раза быстрее человека.

Установка представляет собой один или два манипулятора KUKA на стационарной платформе, которая ставится в люльку для высотных работ, и затем спускается вдоль фасада. Спуском и подъёмом управляет человек-оператор. Система оборудована датчиками, которые определяют, как сильно надо надавить на окно, чтобы полностью его очистить. Лидар обеспечивает ориентацию робота в пространстве. Из‑за того, что лидар плохо обнаруживает стеклянные поверхности, робот укомплектован дополнительными ультразвуковыми датчиками и датчиками для обнаружения подоконников. Машинное обучение позволяет системе адаптироваться к новым условиям на основе предыдущего опыта.

Поскольку каждое здание уникально, ПО Ozmo ориентировано на многофакторную внешнюю среду. Оно собирает данные с нескольких камер и датчиков со скоростью около 200 раз в секунду для постоянной оптимизации траектории движения манипулятора. Система водонепроницаема и выдерживает экстремальные температуры. Радиус действия одного манипулятора робота-мойщика составляет 1,1 м.

В то время как для ручной чистки стеклянного фасада требуется команда из 3-4 человек, для работы с Ozmo требуется один оператор на крыше для управления платформой, краном и источниками электроэнергии и воды. Открытым остаётся вопрос доставки тяжелых манипуляторов на крышу и их погрузки-выгрузки в люльку.

За свою разработку компания получила премию PropTech Breakthrough Award в номинации «Решение года в области строительной робототехники». Глобальная цель Skyline — автоматизировать все виды работ на высоте. Как полагают разработчики, роботизация мойки окон повысит качество уборки и позволит решить проблему нехватки рабочей силы: так, сейчас 75% мойщиков окон в США старше 40 лет.

#роботы #стартапы #news

https://www.therobotreport.com/skyline-robotics-deploys-ozmo-window-cleaning-robot-new-york-city/
Tencent Robotics X Lab выпустил робота общего назначения "The Five" с гибридной мобильностью

Робот пятого поколения The five (или Xiao Wu) от Tencent Robotics может ходить, перевозить предметы и взаимодействовать с людьми в реальной среде — например, толкать инвалидную коляску.

The Five представляет собой тело с двумя руками и четырьмя ногами с колесами вместо ступней. Скорость перемещения на колесах по прямой поверхности — 3 м/с и 0,33 шага/с при подъеме по лестнице. Робот весит 80 кг, имеет высоту 1,4-1,8 м и ширину 590 см, а также может складываться. Модель может поднимать грузы весом до 50 кг, и имеет 29 степеней свободы.

The Five поддерживает четырехколесный, двухколесный и гибридный (колесо и нога) режимы передвижения. Сочетание колес и ног обеспечивает устойчивость как в статическом, так и в динамическом положении.

Tencent Robotics — ведущая китайская робототехническая компания, которая владеет значительным миноритарным пакетом акций UBTECH. Роботы Walker S и Walker S Lite от UBTECH недавно были внедрены на заводе FAW Volkswagen в Циндао и "умном" заводе компании Zeekr.

#news #роботы

https://www.youtube.com/watch?v=PKo0ISekSd8
В Пекине выдали первую лицензию на использование роботов в сфере общественного питания

Лицензию от Пекинского муниципального управления по регулированию рынка получила компания EncoSmart.

Lava от EncoSmart выглядит как роботизированная рука, которая опускает продукты во фритюр, достает их по готовности, стряхивает остатки масла и отправляет на выдачу. Благодаря машинному зрению робот может распознавать ингредиенты и рассчитывать необходимое время приготовления. Пока роботы умеют только жарить картошку и курицу. Однако, по заявлению разработчиков, система может самостоятельно обучаться новым рецептам.

EncoSmart планирует до конца года провести пилотное тестирование роботов в крупнейших ресторанных сетях Китая. Конкретные названия не разглашаются. В настоящее время компания занимается беспилотными роботами-киосками в районе Хайдянь в Пекине.

#news #роботы

https://www.scmp.com/tech/tech-trends/article/3279023/beijing-humanoid-chef-could-cook-your-next-meal-city-allows-robots-catering?module=top_story&pgtype=section
На новых складах Amazon будет задействовано в 10 раз больше роботов

Бигтех объявил о планах по созданию новых роботизированных складов доставки. Первый центр выполнения заказов «следующего поколения» расположен в Шривпорте, штат Луизиана. Склад площадью 280 тыс. кв. м. занимает 5 этажей. Этот объект обещает стать кульминацией роботизации Amazon. Подход розничного гиганта в значительной степени вращался вокруг включения роботов в существующие рабочие потоки, чтобы не нарушать обычные операции. Новая модель предполагает, что процессы будут строиться с нуля сразу на базе робототехники и AI.

Amazon пока не объявила конкретные цифры по количеству развернутых роботов, но утверждает, что их будет в 10 раз больше, чем в стандартном фулфилмент-центре. При этом компания уже развернула около миллиона роботизированных систем в центрах по всей территории США.

Наряду с автономными мобильными роботами (AMR) в стиле Kiva и сортирующими роботизированными руками Robin, Cardinal и Sparrow корпорация внедряет Sequoia — современную многоуровневую контейнерную систему инвентаризации, которая позволяет сотрудникам быстрее и безопаснее хранить и выбирать товары. На новых складах Sequoia может вмещать более 30 млн единиц товара.

Эта версия в 5 раз больше первой системы инвентаризации Sequoia, которую компания развернула в Хьюстоне год назад.

#роботы #бигтехи #news

https://techcrunch.com/2024/10/09/amazons-new-warehouses-will-employ-10x-as-many-robots/
#Дайджест за 14 – 18 октября 2024 года

#AI #роботы
📌Boston Dynamics объединяется с Toyota Research Institute (TRI) для внедрения AI


Человекоподобные роботы Atlas будут оснащаться новой моделью AI, разработанной совместно с TRI. Это, по словам участников соглашения, поможет существенно сократить сроки обучения робота и необходимое для этого количество повторений. Цель сотрудничества — настоящая универсальная машина, то есть система, которая способна учиться и делать все то, что может делать человек, и, возможно, даже больше. Аппаратная часть роботов в настоящее время находится гораздо ближе к этому уровню, чем AI-модели.

Главные конкуренты Boston Dynamics в области антропоморфных роботов, включая Agility, Figure и Tesla, ведут разработки AI собственными силами. Сделка Boston Dynamics с TRI особенно интересна, учитывая, что организациями управляют Hyundai и Toyota — прямые конкуренты на рынке автомобилей.

У Boston Dynamics также есть дочерняя организация The AI Institute (ранее The Boston Dynamics AI Institute) — достаточно независимая структура, цель которой — исследования в области AI для робототехники. Но, похоже, команда The AI Institute ещё не сформирована в должной мере, чтобы отвечать запросам материнской организации.

От редактора. Добавлю еще чуть инсайта и личного контекста. В далеком 2012 году в DARPA был программный менеджер Гилл Пратт. Собственно ему принадлежала идея купить несколько Атласов у Boston Dynamic и раздать их участникам DARPA robotics challenge. Совершив эту сделку, Гилл ушел из DARPA в специально созданный под него Toyota Research Institute, который основан как часть сделки с Американским правительством за отзыв более семи миллионов машин в 2012 (и несколько смертей). Сейчас просто замыкается круг и давние, неофициальные отношения Гилла и Марка Райберта обретают формальные контуры )). На фото слева - Гилл Пратт, 2015 год

https://techcrunch.com/2024/10/16/boston-dynamics-teams-with-tri-to-bring-ai-smarts-to-atlas-humanoid-robot/
Робот Walker S1 от UBTech начал обучение на заводах крупнейшего в мире производителя электромобилей BYD

Новую модель промышленного гуманоидного робота представили в середине октября, и Ubtech уже получил более 500 заказов от автопроизводителей из Китая, в том числе Geely, Dongfeng Motor и др.

Робот работает совместно с другими беспилотными логистическими транспортными средствами и интеллектуальными системами управления производством. Высота новой модели — 172 см, масса — 76 кг, она может проводить визуальный контроль качества, перевозить посылки разных размеров, использовать электрическую отвертку для затягивания винтов, собирать детали и сортировать компоненты.

Около 70% рабочей нагрузки на автоматизированных заводах в настоящее время выполняется роботизированными руками, а остальную часть выполняют люди. UBTech намерена заменить около 20% из оставшихся 30% нагрузки человекоподобными роботами, оставив лишь 10% для работников-людей, которые будут сосредоточены в основном на управлении системами.
Китай сталкивается с растущей нехваткой промышленных рабочих и роботизированные системы призваны восполнит этот дефицит.

#news #роботы

https://www.scmp.com/economy/china-economy/article/3282740/humanoid-robot-could-recharge-chinas-manufacturing-labour-shortage