Apple: 8 лет попыток создать беспилотный автомобиль. The Information поговорили с парой десятков человек, в разное время работавших в проекте Titan и опубликовали большую статью о том, как менялись его руководители, а с ними взгляды и подходы компании к разработке беспилотников.

TL;DR: Со старта проекта в 2014 году, руководители и подходы менялись примерно раз в пару лет. То мы сами делаем свой электрокар с системой помощи водителю; то мы делаем полностью беспилотную технологию для шаттлов и партнеримся с автопроизводителями; то мы снова делаем свою тру-бесилотную машину без руля, педалей и прочей чеупхи; или вообще давайте вложимся в deep learning, откажемся от HD карт и утрем нос Веймо и прочим традиционалистам, которые не смогут нормально масштабироваться. При этом во главе проекта чаще стояли люди из автоиндустрии, а не из технологий, что не могло не сказаться на качестве самой системы. Ниже подробнее драма в двух постах.

В 2014 году Эппл решили зайти на рынок электрокаров, чтобы расширить свое продуктовое портфолио. Во главе проекта встал Стив Задески. Бывший инженер Ford, он ставил целью создание “Теслы, только лучше” — электрокара с более продвинутыми системами помощи водителю. Уже в то время в проекте появились сторонники “полного беспилота”, что создавало определенное напряжение в команде. Но споры спорами, а Эппл начали работу над прототипом микроавтобуса, в разработке которого основной фокус был на пассажирах. Инженеры хотели, чтобы машина могла определить, если у водителя случился сердечный приступ, и отвезти его в ближайшую больницу, или разрабатывали аудиосистему, которая позволит каждому пассажиру слушать свою музыку, или вообще проектировали полностью стеклянный автомобиль. При этом делали еще кучу другой ненужной работы, вроде пепреизобретения колеса и других задач, уже давно решенных традиционным автопромом. К массовому производству планировалось приступить в 2019 году.

К концу 2015 года проект к не сильно продвинулся в сторону продуктового решения и Кук решил, что создание собственной машины с нуля — занятие слишком рискованное и затратное. Пост главы проекта принял Боб Мэнсфилд. Под его руководством команда перешла от разработки ADAS к созданию беспилотной системы. При этому от создания собственной машины не отказались, правда теперь это был не минивэн, а седан. Идею очень поддерживал Джонатан Ив, в те годы глава промдизайна Эппл, который считал, что беспилотник компании должен будет перевернуть автоиндустрию, как когда-то первый айфон сделал это с индустрией мобильных телефонов.

Впрочем бег в нескольких направлениях одновременно не принес ощутимых результатов. В 2017 Мэнсфилд решил, что надо ставить более реалистичные цели и переключил команду на создание автономных шаттлов совместно с Volkswagen. Шаттлы должны были возить сотрудников компании из Пало-Альто в штаб-квартиру компании в Купертино. Этот проект претерпел ряд изменений и был вскоре вообще свернут. Команда решила наконец заняться тем, что делали все остальные игроки индустрии — собирать тестовые прототипы на базе обычных авто, и катать на них по улицам для проверки и совершенствования технологии.

В 2017 году, спустя 3 года со старта проекта, у компании наконец появился первый тестовый полигон, а тестовые авто впервые выехали на улицы Купертино. Первые прототипы стоили по миллиону долларов и были оборудованы сразу 14-ю лидарами Velodyne. Эксепртизы Мэнсфилда, специализировавшегося на производстве чипов, не хватало для руководства таким многосторонним проектом, и в 2018 году он нашел себе замену — Дуга Филда, у которого за плечами было 5 лет работы на руководящих постах в Тесле.

Как и первый руководитель проекта Титан Стив Задески, Дуг начинал свою карьеру в Форде и был больше про машины, чем про технологии. При нем фокус опять сместился на разработку самого автомобиля. Что касается технологии, то по словам бывшего сотрудника, во время тестовых заездов по тихим улочкам Саннивейла помощь человека требовалась беспилотнику примерно раз в минуту. Спасти ситуацию был призван deep learning подход. Условно — меньше ручной разметки и строгих правил, больше самостоятельного обучения системы на собранных данных. Несмотря на то, что даже на сегодняшний день такой подход еще не доказал своей эффективности для беспилотников, Эппл сделали на него ставку и привлекли к разработке двух именитых исследователей в этой области. В итоге в начале 2020 года команда даже провела ряд успешных демонстраций для Кука и Департамента автотранспорта, но пока это было возможно только на одном маршруте, на отработку и полировку которого у команды ушло значительное количество сил и и времени.

Несмотря на то, что дела вроде пошли в гору, и сотрудники вспомниают период под руководством Дуга Филда, как лучший в истории проекта, тот покинул свой пост в сентябре 2021 года, а следом за ним ушел еще ряд ключевых руководителей старшего и среднего звена. Проект Титан возглавил Кевин Линч, бывший руководитель разработки софта для Apple Watch. Под его руководством команда продолжила тратить много сил на дизайн будущего беспилотника, а технология продолжала буксовать.

В этот период компания решила отказаться от использования HD-карт, специальных предзаписанных карт, которые помогают бесилотникам определять свое местоположение и понимать семантику дорог и перекрестков. Некоторые эксперты считают, что потребность в создании карт будет ограничивать зоны применения беспилотников и усложнять процесс масштабирования. Эппл решили, что новый подход позволит им сделать беспилотник, который сможет ездить буквально везде.

Однако, пока что такой подход себя не оправдал. По словам сотрудников тестовые машины Эппл систематически наезжают на бордюры и часто ошибаются в выборе полос при проезде перекрестков. В начале этого года беспилотник компании даже чуть не сбил пешехода, когда тот пытался пересечь улицу по неразмеченному пешеходному переходу. Ситуацию спас водитель-испытатель, в последний момент нажавший на тормоза. После этого инцидента Эппл даже приостановили тестирование на несколько дней, и возобновили его после того, как добавили этот переход в карты.

Не обошлось в статье из без традиционного “при Джобсе такого бы не было”. Сотрудники говорят, что Кук не слишком много внимания уделяет разработке беспилотников, а в отсутствие одного главного продуктового визионера проект продолжает кидать из крайности в крайность. Штош, будем дальше наблюдать удастся ли Эпплу выработать стабильную долгосрочную стратегию, или компания решит, что хватит тратить по миллиарду в год на что-то, что девятый год подряд не приносит ощутимый результат.

https://www.theinformation.com/articles/inside-apples-eight-year-struggle-to-build-a-self-driving-car

В отличие от осьминога, человек плохо приспособлен для операций с различными объектами под водой, особенно если речь о хрупких или мягких вещах. Пытаясь их удержать в скользкой среде, легко сломать или повредить предметы или существа.
Вдохновлённые осьминогом инженеры сумели создать перчатки, оснащённые умными чувствительными присосками, сделанными из синтетических материалов и управляемых микроконтроллерами, получающими сигналы с оптических микролидаров.
Octa-glove позволяют крепко удерживать объекты, не сильно их сжимая — умение, которое пригодится и спасателям, и строителям и просто аквалангистам в куче разных ситуаций. Ну и просто красивое решение :)

https://www.eurekalert.org/news-releases/958426–

Сейчас учёные, работающие с телескопом JWST, обсуждают повреждение, полученное одной из ячеек зеркала в результатах попадания микрометеорита. Если кратко, трагедии не случилось, ухудшение оптического качества в пределах изначально заданной для телескопа погрешности.
Меня во всей этой истории цепляет довольно фантастичная деталь. Качество зеркала определяется величиной среднеквадратичной погрешности волнового фронта, зеркало содержит встроенные механические средства корректировки этой погрешности и они использовались для уменьшения вреда, нанесённого микрометеоритом. Фантастичность в том, что эта самая среднеквадратичная погрешность, которую с Земли успешно регулируют на телескопе, измеряется десятками нанометров (миллиардных долей метра), а сам телескоп находится примерно в полутора миллионах километров от Земли. Обыденность такого контраста масштабов в рамках одной операции как-то особенно инженерно красива :)
https://www.discovermagazine.com/the-sciences/first-image-of-micrometeoroid-damage-to-the-james-webb-space-telescope

Даже жаль, что Yanko Design публикует дизайнерские концепты, а не реально существующие или хотя бы разрабатываемые объекты. Фантазия о том, как можно было бы вполне реальные майкрософтовские очки HoloLens модифицировать в модульный гаджет для массового пользования, смотрится изящно, я б такие попробовал.
Увы, автор заметки и сам понимает: Unfortunately though, the very idea of Microsoft making such a device seems rather unlikely. It would require creating a separate OS channel, renewed hardware efforts, but most importantly, it would bring little value to the company.
https://www.yankodesign.com/2022/07/15/meet-the-microsoft-holo-glasses-concept-a-consumer-grade-fashion-friendly-version-of-the-hololens/

Очень приятное и местами полезное чтение дождливым вечером в горах (это я про свою ситуацию :) ) — популярный разбор основных научно-космических красот на уже ставшей знаменитой фотографии дальнего космоса, первой рабочей картинке с ИК-телескопа JWST. Можно, например, поразглядывать яркий галактический кластер, сознавая, что запечатлённый телескопом свет был испущен в те времена, когда Земли нашей еще не было как планеты.
Но меня больше всего впечатляет картинка для учебников физики, для глав про общую теорию относительности: телескоп запечатлел иллюстрацию к утверждению о том, что гравитационные эффекты являются деформацией пространства-времени. Она далеко не первая, конечно, но самая красивая :)
Эйнштейн бы наверняка сильно порадовался, красоту он ценил.
https://www.livescience.com/james-webb-telescope-deep-field-explained

Очень яркая антиутопическая красная тряпка для алармистов и технопессимистов: в Китае запустили беспилотные полицейские электромобили, оснащённые камерами наблюдения с системой распознавания лиц. Все страшилки в одном флаконе. Более того, этот флакон еще и интегрирован с прочими: автономные наблюдатели work in concert with the police officers, drones and other video systems и покрывают те районы и территории, где более традиционное видеонаблюдение отсутствует.
Впрочем, часть экспертов полагает, что эффект может быть психологическим и не требовать реально высоких технологий — для устрашения часто хватает муляжей и пиара вокруг них, а точные характеристики систем мы все равно не узнаем.
https://americanmilitarynews.com/2022/07/driverless-police-surveillance-cars-hit-streets-of-xinjiangs-karamay/

Автоматизация сбора тестов на ковид в Китае.

В канале @derplearning наткнулся на злободневную шутку:
8< 8< 8< 8< 8<
Как увеличить тревожность среди художников:
- ищем абстрактный диджитал арт
- спрашиваем в комментах, какой промт был использован
8< 8< 8< 8< 8<
Но некоторым не до шуток: в большой статье в Wired обсуждается, что, в сущности, хлеб отчасти крадут у кураторов. Учитывая плодовитость и неутомимость генеративных сетей, важным действием со стороны человека становится выбор из предлагаемых вариантов. Наряду с придумыванием промтов (кто не в теме — это уже устоявшийся термин для обозначения того набора слов, который подаётся на вход сетка типа DALLE или MidJourney) анализ и выбор из нагенерированного следует считать актом эстетического самовыражения типа того, которое раньше было доступно кураторам. AI art expands the multifaceted notion of curation and continues to blur the line between curation and creation.
Но, конечно же, автор рассматривает алгоритмы строго как инструмент — а что еще ожидать от PhD по философии. Интересно, рассмешила бы его шутка из начала поста?
https://www.wired.com/story/dalle-art-curation-artificial-intelligence/

Пока кто-то тащится от метавселенной, а кто-то звереет от одного этого слова, Майкрософт выкатил сервис, который как раз отлично демонстрирует существующую индустриальную метавселенную — а не футуристические мечтания.
Сервис называется AirSim,запускается в майкрософтовском облаке и позволяет тренировать автономные дроны в виртуальном мире, прежде чем выпустить их летать в материальном. Доступны миллионы маршрутов и множество сценариев: последняя миля доставки, инспекция инфраструктуры, городская мобильность и т.д. Проект развивался пять лет, и только сейчас начинается его коммерческая эксплуатация.
Кто гонял Flight Simulator, вряд ли этой новости удивится, но дронам немножко позавидует.
https://uk.pcmag.com/drones/141533/microsoft-offers-to-train-autonomous-drones-in-virtual-worlds

Очень доходчивая картинка про бизнес Амазона с его стомиллиардными оборотами. Не будь у них облака, были бы в минусах :)
https://digg.com/money/link/how-amazon-makes-money-visualized-HWvBaFF1jB

Стремление Дубая стать технологическим лидером (и отнюдь не только региональным) привело к тому, что концепции метавселенной там стали частью государственной риторики и стратегии. В ее рамках, например, Дубай will create 40,000 new virtual jobs and add $4 billion to the city’s GDP in five years. Очень весомый пример влияния цифровой стороны нашего мира на привычные финансовые и экономические метрики материального мира. И, как всегда в новых делах, без образования никуда, поэтому государство обещает обеспечить necessary support in metaverse education aimed at developers, content creators and users of digital platforms in the metaverse community.
Ждём, когда этот язык массово разойдётся по миру и среди политиков; в случае ИИ мы это уже проходили. И, как и в случае с ИИ, за хайпом прячется реальная польза: особенно, если помнить, что метавселенная бывает не только потребительская, но и индустриальная.
https://fortune.com/2022/07/19/dubai-metaverse-strategy-crypto-emerging-tech-web3/

Актуальное чтение в период отпусков и поездок, когда многие предпочитают останавливаться в съемном жилье: как проверить помещение на наличие скрытых камер, не используя дорогих профессиональных детекторов (которые еще и не везде легальны). Авторы обращают внимание на то, что вопрос регулируется законом (хоть и по-разному разных Штатах) — но всегда находятся желающие его нарушить. По некоторым опросам, 11 percent of respondents had discovered a hidden camera in an Airbnb. И, как справедливо отмечается, мы даже не хотим знать, как можно использовать такие записи.
Как в любой системе безопасности, важней всего человеческий фактор; мне понравился финальный совет: если вы общаетесь с хозяином напрямую, задайте ему прямой вопрос о наличии камер и доверьтесь своей интуиции, выслушивая ответ.
https://computer.howstuffworks.com/hidden-cameras-in-vacation-rentals.htm

Еще в мае я писал тут, что пока масковский Нейролинк хвастается успехами на обезьянах, другой стартап без лишнего шума получил первое разрешение на введение нейроинтерфейса в мозг человека.
И вот есть первый пациент с нейроинтерфейсом! Операция проведена в Нью-Йорке, является минимально травмирующей: массив электродов вводится через кровеносные сосуды, никаких трепанаций черепа. Цель операции — вернуть парализованному пациенту возможность управлять электронными устройствами и так коммуницировать с внешним миром. Таких людей в мире миллионы; есть повод с надеждой следить за ходом эксперимента.
https://www.businesswire.com/news/home/20220719005248/en/Synchron-Announces-First-Human-U.S.-Brain-Computer-Interface-Implant
(Вот тот майский пост — https://t.iss.one/techsparks/3504)

Семь лет спустя после закрытия невезучего проекта Google Glass компания снова начинает тестирование AR-очков в реальном мире, а не только внутри лабораторий и закрытых пространств.
Устройства имеют сильно ограниченный функционал — хотя они снабжены камерами, фото- или видеосъемка невозможна; камеры нужны для контекстного дополнения реальности: например, чтобы очки могли показать носителю перевод надписи на незнакомом языке, когда он на неё посмотрел. Будут доступны и навигационные функции, синхронный перевод устной речи.
Сильно обжегшись прошлый раз, теперь разработчики заверяют: пусть уж лучше мы будем двигаться медленно, важнее нигде и ни в каком сценарии использования не подвергнуть риску прайваси самого носителя очков или кого-либо вокруг.
Становится интересно — конкуренция в AR явно обостряется, и в ней участвуют опытные игроки; ещё ведь и Apple должен подтянуться.
https://blog.google/products/google-ar-vr/building-and-testing-helpful-ar-experiences/https://blog.google/products/google-ar-vr/building-and-testing-helpful-ar-experiences/

Baidu представила новую модель своего автономного такси, и в ней впечатляют не технические детали типа съёмного руля, чтоб не мешался в салоне (хотя тоже красиво). Впечатляет обыденность цифр про беспилотник: стоимость производства Apollo RT6 составляет всего $37 000 за штуку, а флот таких такси будет составлять десятки тысяч авто. “We are moving toward a future where taking a robotaxi will be half the cost of taking a taxi today” — и эти слова уже не звучат как чистый пиар и шапкозакидательство.
Ну и выглядит машинка вполне ничего.
https://www.bloomberg.com/news/articles/2022-07-21/baidu-unveils-new-robotaxi-it-says-could-halve-commuting-costs

Посты про внедрения систем распознавания лиц где-то в мире обычно в реакциях здесь собирают довольно много какашек. Посмотрим, что будет под этим текстом:)
На ж/д переходах в Подмосковье начали устанавливать камеры фотовидеофиксации с функцией распознавания лиц. Фиксировать они будут переход путей на красный сигнал светофора или в неположенном месте. Такие переходы — нешуточная проблема: с начала года в области зафиксировано 150 (!) смертельных случаев на путях, больше, чем в прошлом году. Основная масса нарушителей — перебегающие перед приближающимся поездом на красный свет или “зайцы”, перебегающие пути так, чтобы попасть на перрон минуя турникеты.
Количество трупов впечатляет, конечно :(( Посмотрим, достаточно ли люди испугаются камер, чтобы остаться в живых. https://tass.ru/moskovskaya-oblast/15287011

В Гугле не выдержали и все-таки уволили сотрудника, заявившего, что их большая языковая модель обрела самосознание. Теперь журналисты по второму кругу цитируют содержательные ответы алгоритма и продолжают тревожиться. Комментарий Гугла «We found Blake’s claims that LaMDA is sentient to be wholly unfounded and worked to clarify that with him for many months... We will continue our careful development of language models, and we wish Blake well.” И еще, полагаю, они желают уже себе поменьше таких сотрудников ;) https://bigtechnology.substack.com/p/google-fires-blake-lemoine-engineer

Когда технологическая пресса совсем недавно бурно обсуждала количество детей Маска и его очередную пассию, по совместительству топ-менеджера одной из его же компаний, я удерживался от публикаций на не совсем технологическую тему, хотя и с героями из мира китов хайтека.
Но когда сегодня выяснилось, что Брин разводится со своей женой из-за ее романа с Маском (причём, похоже, роман пришёлся как раз на время, когда у Илона родилась двойня от той самой коллеги Шивон) — не могу не сослаться. Тем более день сегодня нерабочий.
Маск, оказывается, не только топовый менеджер и пиарщик, он еще и ловелас редкостного уровня. И ведь на всё и всех его хватает ;)
https://www.dailymail.co.uk/news/article-11043893/Elon-Musk-affair-Sergey-Brins-wife-led-divorce.html

Китайцы продолжают ударными темпами строить свою орбитальную станцию. Сегодня на орбиту прибыл и успешно пристыковался к основному модулю после 13-часового полета лабораторный модуль Wentian массой 23 тонны. Опубликованы фотографии экипажа станции в свежеприбывшем модуле. В октябре планируется доставка на орбиту второго лабораторного модуля.

https://apnews.com/article/astronomy-science-china-biology-8ded1e6fd4d1c4246d4283f399713c60

В Торонто готов к летным испытаниям изготовленный в масштабе 1:2 прототип удивительного по своей компоновке летательного аппарата с электроприводом. Образец обладает размахом крыльев 6,7 м и весом 227 кг, совсем не маленькая игрушка. Этот агрегат планируется использовать как аэротакси с вертикальным взлётом; уникальность компоновки в том, что создающие вертикальную тягу винты спрятаны в крыльях, они открыты во время взлета и посадки, но на горизонтальном участке полета створки их закрывают и крыло имеет обычный для самолета профиль.
Выглядит штуковина как что-то из кино, но вполне вызывает доверие; совсем не удивлюсь, если этот электролет в итоге станет рабочей лошадкой
https://newatlas.com/aircraft/horizon-cavorite-evtol-prototype/