Риалтайм предсказание положения тела по одной ego-камере

Одна шакальная камера на голове, о качестве можете судить сами в правом верхнем углу. В середине — предсказанное положение тела и облако из SLAM-точек. + можете сравнить с тем, что было на самом деле. https://t.iss.one/ai_newz/3427

Одна из главных проблем всех этих ваших виаров и эйаров заключается в том, что нужно раскидать камеры по всей комнате для трекинга положения тела. Я тоже решал эту проблему, когда работал в Reality Labs - мы предложили диффузионную модель AGRoL, которая по трекингу рук и головы синтезирует движение всего тела в 3D. Теперь зацените свежачок от интернов из Meta Reality Labs.

Тут пошли еще дальше и используют только одну RGB камеру на голове (которая итак стоит во всех VR/AR очках), они смогли в реальном времени (70FPS на A100) с задержкой всего 0.17 секунд отследить положение всех конечностей, даже если они не попадают в кадр.

Ребята решили взять максимум из того, что есть: они скормили диффузионке данные о положении головы, цветную картинку и набор SLAM-точек (думайте об этом как о гауссовских сплатах на минималках). Кроме того, добавили CLIP-эмбеддинг для извлечения семантической информации (что находится в кадре). Всё это обучили на 200 часах видеоконтента с данными от motion capture костюма для захвата движений.

В результате получилась модель, которая не только лучше предшественников, но и работает супербыстро, что позволяет использовать её для онлайн-процессинга. Правда, пока SLAM работает только в статике — если, например, передвинуть стол, модель этого не заметит.

Очевидно, бенефициар этой технологии — это AR и VR. Игрушки выйдут топовые, хоть на поле 100 на 100 игроков устраивай, как это показывал Snapchat на последней презентации своих очков. Нужно только рядом кластер с хотябы 1xA100 на человека поставить 😁.

Помимо игр, технология пригодилась бы в робототехнике, в частности, для обучения робогуманоидов нормально ходить и ориентироваться в пространстве. Такие данные сложно получить сразу в большом объёме, поэтому сейчас, например, используют imitation learning, как в этом посте про живую сталь.

Пейпер
Код (скоро)
Project page

_______
Источник | #ai_newz
@F_S_C_P

Узнай судьбу картами Таро:
✨Anna Taro bot

Икея...
— Здравствуйте, это отдел возврата?
— Здравствуйте, да, что вы хотели вернуть?
— Я хочу вернуть вот это...
— А что это?
— А я не знаю. Пока собирал, чем только не было: и диван, и тумба, в какой-то момент даже Первый канал ловило…

Уже знакомые нам по предыдущим сериям ученые из Вашингтонского университета опубликовали очередной акустический эксперимент.
_________

1. Сначала был рой мини-колонок с микрофонами, которые ползали по комнате и изолировали параллельные беседы, создавая подвижную распределенную в пространстве микрофонную решетку.

2. Потом «семантическое прослушивание» в наушниках — оно умело изолировать любые звуки. Например, подавляло вой пылесоса, но при этом не давало пропустить стук в дверь, а около детской площадки позволяло наслаждаться пением птиц.

3. Потом добрались до ликвидации конкурентов за внимание собеседника — можно было настроить наушники на голос конкретного человека и разговаривать с ним только вдвоем посреди оживленной улицы.
_________

4. Свежий кейс — Sound Bubble. Наушники создают вокруг вас зону отчуждения, куда не проникают ненужные звуки извне. Например, в ресторане вы слышите только сидящего с вами за столиком человека и подошедшего официанта, а все остальные разговоры и шум не слышите.

В оголовье наушников вмонтированы шесть дополнительных микрофонов. Небольшой бортовой компьютер управляет нейронной сетью, которая анализирует расстояние до разных источников звука и отфильтровывает шум за пределами заданной зоны. Голоса собеседников внутри зоны усиливаются.

➡️ Ссылка на видео

_______
Источник | #vcs_su
@F_S_C_P

Стань спонсором!

🧟 Они уже среди нас: 10 реальных историй о коллегах-зумерах

Они бывают ответственные и ленивые, амбициозные и депрессивные, неожиданные и исполнительные. Такие же как мы, но почему-то совершенно другие. Обсуждений о зумерах всё больше, как и их резюме на столах. Брать или не брать? Узнать их лучше помогут истории ниже, которые собрал для вас в одном из чатов пиарщиков.

1. «Ко мне недавно пришёл на собеседование человек с очень корректным резюме. Так как я не смогла ответить ему в первые семь минут, что он принят, он запустил в меня горшок с цветком со стола. Спойлер: не получил работу».

2. «У меня работала девушка новых веяний. Когда все решали, что заказать на посиделку-корпоратив, она сказала, что у нее особенное питание и попросила меня приготовить ей гречку отдельно – принести в контейнере».

3. «Ленивые, депрессивные, болеющие...
Девочка: одну неделю работает, две –болеет. Болит у неё всё: ноги, руки, голова, ж**а. Каждый раз больничный от разных спецов: терапевт, невролог, эндокринолог. Я её не трогаю вообще, боюсь, что рассыпется».

4. «Коллега из смежного учреждения спросила, кто мне делал сайт. Я дала контакт своего программиста. Они берут его в штат на 0,5 ставки. Говорят «делай полгода, мы платить тебе будем помесячно». Он у них числится полгода, сайт не делает. Через шесть месяцев пишет заявление с формулировкой «сайты стоят намного больше»и увольняется».

5. «Девочка новенькая написала, что не выйдет, потому что у её друга какие-то нехорошие мысли с утра и надо ему помочь».

6. «Пришла обаятельная девушка. С порога объяснила, что она невероятных компетенций человек и ей нужен мгновенный рост. Вторым вопросом поинтересовалась, в течение скольки месяцев она сможет занять мое место. Я предложила хоть завтра. Но ее разочаровала предлагаемая оплата и необходимость тестовых заданий».

7. «Есть и позитивные истории. Работает у меня девочка, маленькая совсем.
Постоянно моет офис, ходит прямо с салфетками везде. На посиделках первая хватает посуду идёт моет, это из разряда бзиков, наверное... Если нет работы, перерыв, она чистит микроволновку, холодильник. Очень мило говорит, что в холодильнике чья-то еда состарилась, можно ли её выбросить и прочее. Мой кабинет как-то вымыла, я в шоке была...(утром, до моего прихода на работу)».

8. «К нам пришла на стажировку девочка, хотела быть корреспондентом. Я помню первый диалог. Захожу в кабинет: эта сидит как сидела (обычно в моем регионе сотрудники встают, если заходит руководитель). Я ей: «здрасьте», а она – «забор покрасьте».

9. «Из плюсов: т.н. "зумеры" редко лезут в чужую жизнь, очень ценят границы, как свои, так и чужие. Для многих из них работа – это работа. Это здорово, потому что напоминает о приоритетах. И у них нет авторитетов, это тоже освежает. Скажем так: классно, что никто из них не встает, когда кто-то входит по умолчанию».

10. «У меня в контент-центре есть девочка: толковая, креативная, голова посажена, куда следует. Но не любит свою работу. (По мне так такие сотрудники самые гиблые). Непонятно, зачем пошла в журналистику, и тем более к нам на работу. Разве что за деньгами. Убрать не могу, она типа продуктивная – задачи быстро раскидывает. И ребята мои против.

А есть у меня там же девочка Оля, она ко мне пришла сама, краснодипломница. Написала мне напрямую: «возьмите меня на работу». А когда ушла на госслужбу написала снова: «забери меня с собой». И я забрала. При этом она работает со мной, как и я, круглосуточно. Инициативная, креативная, впитывает как губка. Ответственная. Любое поручение – 💯 гарантия исполнения. Я без нее как без рук».

Источник: https://t.iss.one/gospub/199
@F_S_C_P

Узнай судьбу картами Таро:
✨Anna Taro bot

Импровизация в реальном времени на синтезаторе АНС.
youtu.be
Уникальное архивное видео, снятое в 2013 в Музее музыки - впервые в истории легендарного синтезатора АНС композитор Олеся Ростовская исполняет импровизацию, создаваемую в реальном времени.
В прошлом композиторы либо использовали АНС как студийный инструмент - рисовали отдельные звуки, записывали их на магнитофонную плëнку и склеивали композицию из кусочков - , либо импровизировали, по-разному прогоняя через считывающее устройство уже готовую партитуру.
Здесь вы можете увидеть как композиция создаëтся в реальном времени - одновременно происходит рисование звука, управление движением партитуры и звуковая фиксация.
———
Что такое синтезатор АНС youtu.be
О легендарном синтезаторе АНС и началах оптического синтеза звука рассказывает композитор и радиоинженер Станислав Крейчи (1936 - 2021).
Звук АНСа все знают по фильмам "Солярис", "Бриллиантовая рука", мультфильму "Маугли", но немногие знают инструмент, на котором он создавался.
В этом видео Станислав Крейчи простыми словами рассказывает об истории оптического синтеза звука и об устройстве синтезатора АНС. После Евгения Мурзина - изобретателя АНСа - именно Крейчи был бессменным хранителем инструмента в течение десятков лет.

#технопорно
@F_S_C_P

▪️Генерируй картинки в боте:
Flux + MidJourney

Читаю переписку Альтмана и Маска. Вот из письма 2015 года, когда они обсуждают найм в OpenAI, пару месяцев после основания компании: «Either we get the best people in the world or we will get whipped by Deepmind. They are obviously making major progress and well they should, given the talent level over there» — пишет Маск.

Из переписки очевидно, что и Илье и Илону уже в 2015, за два года до публикации пейпера про трансформеры, были очевидны не только законы масштабирования deep learning’а, но и то что, скорее всего, это приведет к AGI в скором времени и еще в 2016 Маск пишет «AI, arguably the most powerful of all technologies».

_______
Источник | #cryptoEssay
@F_S_C_P

Стань спонсором!

Грошовый обзор #263

Кто меняет консенсус в Биткоине, цензура в Лайтнинге и рыночные данные

Читать 💸 Донатить

_______
Источник | #hypecoinnews
@F_S_C_P

-------
Секретики!
-------

Призрак сараев

_______
Источник | #thewanderingreport
@F_S_C_P

Стань спонсором!

_______
Источник | #digitaloutrage
@F_S_C_P

Стань спонсором!

В Nature интересное исследование про AI-поэзию:

– Люди не способны отличить поэзию созданную человеком от написанной нейронкой

– Более того, в слепом тесте, люди чаще выбирают и выше оценивают поэзию созданную АИ

– И самое смешное: как только люди узнавали, заранее, что стих написан нейронкой, а не человеком, они значительно занижали оценки таким стихам

Такой вот мы вид, предвзятый и не объективный 🤡

P.S. Мы когда-то, забавы ради, сделали генератор поэзии на английском – можете бесплатно тут поиграться (но потребуется рега)

_______
Источник | #denissexy
@F_S_C_P

▪️Генерируй картинки в боте:
Flux + MidJourney

Налог на доход в Китае в зависимости от уровня доходов
В Китае система налогообложения физических лиц является прогрессивной

_______
Источник | #EconomicState
@F_S_C_P

▪️Генерируй картинки в боте:
Flux + MidJourney

Как анализ данных предсказывает успех художника?

Портрет «Мужчина в золотом шлеме», который считался считался жемчужиной Берлинской картинной галереи, долгое время приписывали Рембрандту. Когда выяснилось, что он написан кем-то другим, стоимость картины снизилась в разы — как и поток туристов, желающих на нее посмотреть.

Это показательная история о том, что на ценность картины влияют факторы, не связанные с ее художественными достоинствами напрямую. Например, имя автора. Или престиж художественного направления, в котором этот автор работал. Или даже просто попадание в престижный музей.

На основе данных о 767 473 выставках и 127 208 аукционах исследователи построили сеть из 16002 галерей и 7568 музеев и выявили большое и плотно связанное сообщество музеев, которые имеют доступ к богатейшим коллекциями и активно обмениваются ими друг с другом. Изучив данные из 143 стран за 36 лет, ученые выдвинули гипотезу о том, что предопределяет успех художника.

Анализ данных показал, например, что попадание в престижный музей на раннем этапе карьеры с большой вероятностью определит дальнейшую карьеру творца. Работы тех авторов, которые с самого начала выставлялись в престижных местах, продаются в среднем в 4.7 раз чаще и стоят в 5.2 раз дороже, чем у тех, кто изначально оказался в непрестижных музеях и галереях. Более того, из тех художников, кто начинал выставляться в малопрестижных местах, лишь чуть больше 10% пробились в престижные музеи к концу жизни.

Подробнее об исследовании можете прочитать в нашей статье, а в комментариях предлагаем вам поделиться мнениями о том, где здесь причина, а где – следствие. Это престижные музеи хорошо умеют отбирать талантливых художников? Или талантливыми признаются те художники, которые были отобраны престижными музеями?

🤖 «Системный Блокъ» @sysblok

_______
Источник | #sysblok
@F_S_C_P

Стань спонсором!

_______
Источник | #digitaloutrage
@F_S_C_P

-------
Секретики!
-------

Visionere Chanal - блог моего друга Рази о том, как он живёт с диссоциативным расстройством идентичности (с множественными личностями).

Он создал блог недавно и начал рассказ своей истории с самого начала. Советую читать с первого поста.

Ссылка: @visionere_chanal
Ссылка на первый пост, чтобы прочитать хронологически: https://t.iss.one/visionere_chanal/3

_______
Источник | #runetstalking
@F_S_C_P

-------
Секретики!
-------