Снепчат качает мобильный AR
Оставляя конкурентов на годы позади (Instagram, TikTok, WebAR, приложения).
На днях Lens Studio (инструмент для создания AR) версии 5.0 вышел из беты. Напомню, что это полноценный 3D движок (почти как Unity): со скриптами, нодами, шейдерами, где можно делать все: от простых фейс-фильтров до сложных мультиплеерных игр.
Что добавили:
— ML Face Effect — можно создавать простые ИИ-фильтры для всей головы, используя промты или референсые изображения.
— Immersive ML — фильтры применяются ко всему изображению (да, это все реалтайм!)
— 3D Asset Generation — генерация 3D объектов прямо внутри Lens Studio. Используется Meshy.
— Head Morph — заменяет голову пользователя на сгенерированный 3D-объект.
— Генерация текстур для 3D-моделей. Тоже Meshy.
— Возможность импортировать 2D-дизайны из Figma
— Поддержку рендеринга Gaussian Splats (Карл!)
А сотни других фичей: улучшение производительности, мультиоконный режим, новые API и прочее.
Качаем тут и делаем AR.
🔴 @reptiloidnaya × #snapchat #ar
Оставляя конкурентов на годы позади (Instagram, TikTok, WebAR, приложения).
На днях Lens Studio (инструмент для создания AR) версии 5.0 вышел из беты. Напомню, что это полноценный 3D движок (почти как Unity): со скриптами, нодами, шейдерами, где можно делать все: от простых фейс-фильтров до сложных мультиплеерных игр.
Что добавили:
— ML Face Effect — можно создавать простые ИИ-фильтры для всей головы, используя промты или референсые изображения.
— Immersive ML — фильтры применяются ко всему изображению (да, это все реалтайм!)
— 3D Asset Generation — генерация 3D объектов прямо внутри Lens Studio. Используется Meshy.
— Head Morph — заменяет голову пользователя на сгенерированный 3D-объект.
— Генерация текстур для 3D-моделей. Тоже Meshy.
— Возможность импортировать 2D-дизайны из Figma
— Поддержку рендеринга Gaussian Splats (Карл!)
А сотни других фичей: улучшение производительности, мультиоконный режим, новые API и прочее.
Качаем тут и делаем AR.
🔴 @reptiloidnaya × #snapchat #ar
Media is too big
VIEW IN TELEGRAM
Копи-паст объектов из реального мира все ближе.
1. Распознавание объектов в реалтайме (я тоже такое делал пару лет назад)
2. Генерация меша.
3. Генерация текстур.
4. AR.
Под капотом моделька 3D-генерации Rodin (уже доступна, можно поиграться).
🔴 @reptiloidnaya × #ai #generativeai #ar
1. Распознавание объектов в реалтайме (я тоже такое делал пару лет назад)
2. Генерация меша.
3. Генерация текстур.
4. AR.
Под капотом моделька 3D-генерации Rodin (уже доступна, можно поиграться).
🔴 @reptiloidnaya × #ai #generativeai #ar
Forwarded from Denis Sexy IT 🤖
Media is too big
VIEW IN TELEGRAM
Пока мы с вами тут обсуждаем ИТ и около, этих робо-собак воспитывают ненавидеть все человечество
Media is too big
VIEW IN TELEGRAM
Spatial видео в метаверсе
Вчера всю ночь ковырялся и запилил поддержку Apple Spatial видео и фото на метаверс-платформе Spatial (лол).
Первая панелька — видео, вторая — фото, третья — тоже фото, но в режиме parallax occlusion mapping, чтобы вы хоть немного могли увидеть 3D-эффект без VR. Работает все на Unity.
Конечно, показывать можно не только эппловские видео или фото — можно генерировать 3D-эффект для любых плоских артов, фото, видео и даже прямых трансляций с обычных камер.
Попробовать можно с Quest3 тут: https://www.spatial.io/s/parallax-test-667444a456fbf3162f0b6c88 (по ссылке, либо ищите в поиске миров «parallax test»).
Заходить нужно в VR, с компьютера или телефона вы ничего не увидите!
🔴 @reptiloidnaya × #vr
Вчера всю ночь ковырялся и запилил поддержку Apple Spatial видео и фото на метаверс-платформе Spatial (лол).
Первая панелька — видео, вторая — фото, третья — тоже фото, но в режиме parallax occlusion mapping, чтобы вы хоть немного могли увидеть 3D-эффект без VR. Работает все на Unity.
Конечно, показывать можно не только эппловские видео или фото — можно генерировать 3D-эффект для любых плоских артов, фото, видео и даже прямых трансляций с обычных камер.
Попробовать можно с Quest3 тут: https://www.spatial.io/s/parallax-test-667444a456fbf3162f0b6c88 (по ссылке, либо ищите в поиске миров «parallax test»).
Заходить нужно в VR, с компьютера или телефона вы ничего не увидите!
🔴 @reptiloidnaya × #vr
Сможете решить загадку?
В твиттере срач на 1.7 млн просмотров. Кто-то говорит, что легко, кто-то — сложно.
Сама загадка из теста для ИИ на абстрактное мышление и понимание паттернов.
Мне хватило буквально полминуты. Ответ — завтра.
🔴 @reptiloidnaya
В твиттере срач на 1.7 млн просмотров. Кто-то говорит, что легко, кто-то — сложно.
Сама загадка из теста для ИИ на абстрактное мышление и понимание паттернов.
Мне хватило буквально полминуты. Ответ — завтра.
🔴 @reptiloidnaya
Тут ИИ-генератор мемов подвезли.
Вводите про кого мем, получаете картинку.
https://glif.app/@fab1an/glifs/clxtc53mi0000ghv10g6irjqj
🔴 @reptiloidnaya × #ai
Вводите про кого мем, получаете картинку.
https://glif.app/@fab1an/glifs/clxtc53mi0000ghv10g6irjqj
🔴 @reptiloidnaya × #ai
This media is not supported in your browser
VIEW IN TELEGRAM
Лица роботов будут сделаны из человеческой кожи.
Свежая статья в NewScientist рассказывает о недавнем эксперименте, в рамках которого была выращена кожа из живых человеческих клеток и помещена на искусственное «лицо».
Пока что, из-за отсутствия кровеносной и лимфатической систем, кожа не может долго выживать на открытом воздухе.
Если эта проблема не решится, роботам регулярно будет требоваться свежая кожа.
И ты знаешь, где они ее возьмут. Всегда знал.
🔴 @reptiloidnaya × #роботы #киберпанк #трансгуманизм
Свежая статья в NewScientist рассказывает о недавнем эксперименте, в рамках которого была выращена кожа из живых человеческих клеток и помещена на искусственное «лицо».
Пока что, из-за отсутствия кровеносной и лимфатической систем, кожа не может долго выживать на открытом воздухе.
Если эта проблема не решится, роботам регулярно будет требоваться свежая кожа.
И ты знаешь, где они ее возьмут. Всегда знал.
🔴 @reptiloidnaya × #роботы #киберпанк #трансгуманизм
Media is too big
VIEW IN TELEGRAM
Прогресс в ИИ-генерации 3D
Одна из главных проблем в генерации 3D на сегодняшний день — топология. Сгенерированные модели хоть и красивые, но просто не подходят для анимации и серьезного продакшна — куча корявых полигонов, разбросанных как попало.
И тут на днях китайцы показали MeshAnything: эта штука пытается построить что-то более-менее вменяемое. Все еще далеко до идеала, но уже намного лучше того, что было.
Думаю, в течение нескольких лет вопрос решится и ворклфлоу 3D-моделлинга значительно изменится. Врядли будет генерация всего и сразу, но однозначно появится качественная генерация каких-то несложных объектов. Плюс интерфейсы управления более комплексными объектами — например, выбрать часть модели и перегенерировать геометрию по текстовому запросу или референсу, вместе с материалами и текстурами — также, как сейчас работает инпеинтинг для изображений.
🔴 @reptiloidnaya × #ai #generativeai #3d
Одна из главных проблем в генерации 3D на сегодняшний день — топология. Сгенерированные модели хоть и красивые, но просто не подходят для анимации и серьезного продакшна — куча корявых полигонов, разбросанных как попало.
И тут на днях китайцы показали MeshAnything: эта штука пытается построить что-то более-менее вменяемое. Все еще далеко до идеала, но уже намного лучше того, что было.
Думаю, в течение нескольких лет вопрос решится и ворклфлоу 3D-моделлинга значительно изменится. Врядли будет генерация всего и сразу, но однозначно появится качественная генерация каких-то несложных объектов. Плюс интерфейсы управления более комплексными объектами — например, выбрать часть модели и перегенерировать геометрию по текстовому запросу или референсу, вместе с материалами и текстурами — также, как сейчас работает инпеинтинг для изображений.
🔴 @reptiloidnaya × #ai #generativeai #3d
РЕПТИЛОИДНАЯ
Однозначно — мы вступаем в новую эру. В эру генерации видео. В 2022 все смеялись над корявыми картинками из DALLE. В 2023 смеялись над Уиллом Смитом, который ест спагетти. Смеялись над еле шевелящимися картинками в Gen2 и Pika. Смеялись над Animate Diff…
Media is too big
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
Чипированный Neuralink'ом парень рассказывает о своем опыте мысленного управления в игре Call of Duty.
Будущее уже наступило. Еще видео в предыдущем посте.
🔴 @reptiloidnaya × #трансгуманизм
Будущее уже наступило. Еще видео в предыдущем посте.
🔴 @reptiloidnaya × #трансгуманизм
Media is too big
VIEW IN TELEGRAM
AR в Telegram
Давно ничего не писал в канал, возвращаемся!
Последние пару недель я активно прототипировал различные AR/AI пайплайны, делюсь одним из них: бот с мини-аппом в Телеграме.
Представьте канал магазина, где можно примерять одежду c помощью AR (на видео) или AI (на фото). Или канал про искусство с интерактивными скульптурами. Или канал очередной крипто-фармилки😀 с полноценной AR-игрой, за ачивки в которой отсыпают монет или еще что-нибудь.
Как это все работает:
1) Бот работает в личке, в группе или канале — присылает кнопку.
2) При нажатии на кнопку открывается мини-аппка прямо внутри Телеграма
3) В аппке загружается webAR на базе Snap — там работает практически все: трекинг лиц, изображений, 3D-объектов, примерка одежды с физикой, игры, порталы, что угодно.
4) К сожалению, Snap не умеет записывать видео и фото — решить эту задачу оказалось ой как непросто, но теперь все работает хоть на винде, хоть на андроиде, в реальном времени с красивым интерфейсом.
5) Отснятый контент присылается ботом в чат.
Возможности абсолютно неограничены — UGC можно автоматически публиковать в других группах или каналов, анализировать vision-моделями на выполнение каких-либо условий, награждать юзеров за контент.
В общем, пишите, если интересно.
Давно ничего не писал в канал, возвращаемся!
Последние пару недель я активно прототипировал различные AR/AI пайплайны, делюсь одним из них: бот с мини-аппом в Телеграме.
Представьте канал магазина, где можно примерять одежду c помощью AR (на видео) или AI (на фото). Или канал про искусство с интерактивными скульптурами. Или канал очередной крипто-фармилки
Как это все работает:
1) Бот работает в личке, в группе или канале — присылает кнопку.
2) При нажатии на кнопку открывается мини-аппка прямо внутри Телеграма
3) В аппке загружается webAR на базе Snap — там работает практически все: трекинг лиц, изображений, 3D-объектов, примерка одежды с физикой, игры, порталы, что угодно.
4) К сожалению, Snap не умеет записывать видео и фото — решить эту задачу оказалось ой как непросто, но теперь все работает хоть на винде, хоть на андроиде, в реальном времени с красивым интерфейсом.
5) Отснятый контент присылается ботом в чат.
Возможности абсолютно неограничены — UGC можно автоматически публиковать в других группах или каналов, анализировать vision-моделями на выполнение каких-либо условий, награждать юзеров за контент.
В общем, пишите, если интересно.
Please open Telegram to view this post
VIEW IN TELEGRAM
Media is too big
VIEW IN TELEGRAM
Симуляция ткани с коллизиями с реальным миром на Apple Vision Pro.
Мой коллега по AR Лаки из Zero10 опять разносит.
Я игрался с этой цифровой тряпкой минут 30, и хочется еще.
Будущее медитативно прекрасно.
🔴 @reptiloidnaya × #ar #apple #visionpro
Мой коллега по AR Лаки из Zero10 опять разносит.
Я игрался с этой цифровой тряпкой минут 30, и хочется еще.
Будущее медитативно прекрасно.
🔴 @reptiloidnaya × #ar #apple #visionpro
Forwarded from Neural Shit
This media is not supported in your browser
VIEW IN TELEGRAM
Робособаки — прошлый век.
Встречайте, Р О Б О К О З А
Встречайте, Р О Б О К О З А
This media is not supported in your browser
VIEW IN TELEGRAM
Когда хочется потрогать траву, но нет ничего кроме MR
Наткнутся на такой вот очень красивый эксперимент. Сделано в Unity, работает на Quest 3.
Источник
🔴 @reptiloidnaya × #ar #meta #quest3
Наткнутся на такой вот очень красивый эксперимент. Сделано в Unity, работает на Quest 3.
Источник
🔴 @reptiloidnaya × #ar #meta #quest3
РЕПТИЛОИДНАЯ
AR в Telegram Давно ничего не писал в канал, возвращаемся! Последние пару недель я активно прототипировал различные AR/AI пайплайны, делюсь одним из них: бот с мини-аппом в Телеграме. Представьте канал магазина, где можно примерять одежду c помощью AR (на…
Продолжаю эксперименты
Веб-приложение (может быть отдельным, или ботом в Телеграме, или интегрировано на сайт) теперь поддерживает консистентный AI-процессинг, как поверх обычной камеры, так и поверх AR.
AR может обрабатываться как напрямую, так и в скрытом режиме (в камере может быть невидимым, но использоваться как ControlNet для AI, «помогая» нейронке рисовать нужное).
AI-пайплайн полностью кастомный, крутится в облаке, стоимость генерации пока что в районе $0.01 — думаю, должно получиться снизить раза в два.
🔴 @reptiloidnaya × #ar #ai #generativeai
Веб-приложение (может быть отдельным, или ботом в Телеграме, или интегрировано на сайт) теперь поддерживает консистентный AI-процессинг, как поверх обычной камеры, так и поверх AR.
AR может обрабатываться как напрямую, так и в скрытом режиме (в камере может быть невидимым, но использоваться как ControlNet для AI, «помогая» нейронке рисовать нужное).
AI-пайплайн полностью кастомный, крутится в облаке, стоимость генерации пока что в районе $0.01 — думаю, должно получиться снизить раза в два.
🔴 @reptiloidnaya × #ar #ai #generativeai