Смерть WebAR стартапов уже близка
И вот почему.
Для начала давайте вспомним, какие технологии и платформы для создания дополненной реальности нам доступны сегодня:
1) Native ARKit (Apple), AR Core (Android). Сложная среда разработки (код).
2) Unity (AR Foundation). Визуальная среда разработки, но все еще сложная.
3) Social AR (Spark, Lens Studio, Effect House). Очень простая среда разработки.
4) И, конечно, WebAR. Это дополненная реальность, которая работает прямо в браузере, без установки приложений, что очень удобно для новых пользователей — например, для гостей выставки или покупателей в онлайн-магазине.
Несмотря на большое количество платформ и стартапов, все они выглядят жалко — если трекинг лица, то без мимики, просто статичная маска. Если трекер пола, то нестабильный, лагающий. В одном я видел плохонький трекинг тела. Никаких шейдеров, камер, рендер пассов, сегментации, трекинга рук, лидара, кастомных материалов и прочего. Кое-что из этого есть в 8thwall, который стоит безумных денег, и в целом все также плох.
Разумеется, никакой среды с нодами или патчами, как в Spark, Lens, Unity там нет. Превью в реальном времени — нет. Вьюпорта, где разработчик может видеть и настраивать сцену, двигать объекты — нет, либо он самый базовый.
Так вот. Вчера на LensFest, ежегодном ивенте от Snap, было анонсировано скорое пришествие Camera Kit в веб. Если кто не знает, Snap дает возможность интегрировать свой AR-движок в любые iOS/Android приложения, получив все их крутейшие фичи + простую и удобную среду разработки.
Понятно, что не все фичи сразу появятся в вебе — но даже самый базовый набор + возможность создавать AR-сцены в привычном Lens Studio автоматически сделает 99% webAR стартапов просто ненужными, за исключением тех, кто будет предоставлять какой-то очень специфический функционал.
Отлично сыграно.
🔴 @reptiloidnaya × #ar #augmentedreality #webar
И вот почему.
Для начала давайте вспомним, какие технологии и платформы для создания дополненной реальности нам доступны сегодня:
1) Native ARKit (Apple), AR Core (Android). Сложная среда разработки (код).
2) Unity (AR Foundation). Визуальная среда разработки, но все еще сложная.
3) Social AR (Spark, Lens Studio, Effect House). Очень простая среда разработки.
4) И, конечно, WebAR. Это дополненная реальность, которая работает прямо в браузере, без установки приложений, что очень удобно для новых пользователей — например, для гостей выставки или покупателей в онлайн-магазине.
Несмотря на большое количество платформ и стартапов, все они выглядят жалко — если трекинг лица, то без мимики, просто статичная маска. Если трекер пола, то нестабильный, лагающий. В одном я видел плохонький трекинг тела. Никаких шейдеров, камер, рендер пассов, сегментации, трекинга рук, лидара, кастомных материалов и прочего. Кое-что из этого есть в 8thwall, который стоит безумных денег, и в целом все также плох.
Разумеется, никакой среды с нодами или патчами, как в Spark, Lens, Unity там нет. Превью в реальном времени — нет. Вьюпорта, где разработчик может видеть и настраивать сцену, двигать объекты — нет, либо он самый базовый.
Так вот. Вчера на LensFest, ежегодном ивенте от Snap, было анонсировано скорое пришествие Camera Kit в веб. Если кто не знает, Snap дает возможность интегрировать свой AR-движок в любые iOS/Android приложения, получив все их крутейшие фичи + простую и удобную среду разработки.
Понятно, что не все фичи сразу появятся в вебе — но даже самый базовый набор + возможность создавать AR-сцены в привычном Lens Studio автоматически сделает 99% webAR стартапов просто ненужными, за исключением тех, кто будет предоставлять какой-то очень специфический функционал.
Отлично сыграно.
🔴 @reptiloidnaya × #ar #augmentedreality #webar
This media is not supported in your browser
VIEW IN TELEGRAM
Воровство одежды в Web AR
Наткнулся на прикольный эксперимент — захват одежды нейронкой ibm-vton (про нее 🔴 тут) и натягивание одежды на 3D модель в AR. Работает все в 8thwall.
Ссылку на попробовать автор не дает, но почти наверняка устроено так:
Автор подготовил 3D модель аватара и его рендер, причем он сделал так, что UV модельки является плоской проекцией на рендер.
Далее ibm-vton натягивает шмотку на рендер аватара, и полученная текстура просто применяется к модели. Все!
Кстати, автор не просто так показывает модельку только спереди — при использовании проекции на спине не будет ничего (точнее, будут шакалы).
🔴 @reptiloidnaya × #ar #augmentedreality #webar #fashion
Наткнулся на прикольный эксперимент — захват одежды нейронкой ibm-vton (про нее 🔴 тут) и натягивание одежды на 3D модель в AR. Работает все в 8thwall.
Ссылку на попробовать автор не дает, но почти наверняка устроено так:
Автор подготовил 3D модель аватара и его рендер, причем он сделал так, что UV модельки является плоской проекцией на рендер.
Далее ibm-vton натягивает шмотку на рендер аватара, и полученная текстура просто применяется к модели. Все!
Кстати, автор не просто так показывает модельку только спереди — при использовании проекции на спине не будет ничего (точнее, будут шакалы).
🔴 @reptiloidnaya × #ar #augmentedreality #webar #fashion
Крутейшие новости от Снепчата
Для начала хочу напомнить, что Снепчат — одна из ведущих компаний, создающих AR-продукты и технологии, а не просто какая-то там соцсеть.
Так вот. Две новости.
1. Снепчат выпустил приложение Snap Camera в виде расширения для Google Chrome.
Теперь вы можете использовать AR-линзы (включая свои собственные) в звонках. Для этого нужно установить расширение, зайти в Google Meet, запустить расширение и выбрать Snap Camera в списке доступных камер.
2. Hosted Web AR Lenses.
Мало кто знает, но у Снепчата есть Web AR (это AR, который работает просто в браузере). Он все еще в полу-бете, но уже работает достаточно хорошо — и, самое главное, линзы можно разрабатывать в том же самом, удобном и привычном Lens Studio.
Так вот — если ранее Snap Web AR требовал поднимать собственный сайт с кодом для загрузки линзы, то теперь Снепчат хостит линзы у себя — ссылку можно сгенерировать в один клик в разделе My Lenses.
Моя линза из прошлого поста, которая ворует одежду, просто РАБОТАЕТ В БРАУЗЕРЕ вместе с НЕЙРОНКОЙ (ЧЕГО??? они даже ML туда подвезли???), причем хостинг бесплатный.
Лица разрабов под 8thwall с коммерческой лицензией за $3000 в месяц представили?
🔴 @reptiloidnaya × #ar #augmentedreality #snapchat #webar
Для начала хочу напомнить, что Снепчат — одна из ведущих компаний, создающих AR-продукты и технологии, а не просто какая-то там соцсеть.
Так вот. Две новости.
1. Снепчат выпустил приложение Snap Camera в виде расширения для Google Chrome.
Теперь вы можете использовать AR-линзы (включая свои собственные) в звонках. Для этого нужно установить расширение, зайти в Google Meet, запустить расширение и выбрать Snap Camera в списке доступных камер.
2. Hosted Web AR Lenses.
Мало кто знает, но у Снепчата есть Web AR (это AR, который работает просто в браузере). Он все еще в полу-бете, но уже работает достаточно хорошо — и, самое главное, линзы можно разрабатывать в том же самом, удобном и привычном Lens Studio.
Так вот — если ранее Snap Web AR требовал поднимать собственный сайт с кодом для загрузки линзы, то теперь Снепчат хостит линзы у себя — ссылку можно сгенерировать в один клик в разделе My Lenses.
Моя линза из прошлого поста, которая ворует одежду, просто РАБОТАЕТ В БРАУЗЕРЕ вместе с НЕЙРОНКОЙ (ЧЕГО??? они даже ML туда подвезли???), причем хостинг бесплатный.
Лица разрабов под 8thwall с коммерческой лицензией за $3000 в месяц представили?
🔴 @reptiloidnaya × #ar #augmentedreality #snapchat #webar
Media is too big
VIEW IN TELEGRAM
А вот как работает в Web AR еще одна моя снепчатовская линза.
Что важно — это не просто 3д-моделька в пространстве или на картинке.
Тут тоже работает нейронка (для выделения объектов), причем в реальном времени — и работает весьма неплохо.
До качества работы внутри приложения, конечно, еще далеко — но работает же!
Оригинальный пост про линзу.
Попробовать в Web AR
🔴 @reptiloidnaya × #ar #augmentedreality #snapchat #webar
Что важно — это не просто 3д-моделька в пространстве или на картинке.
Тут тоже работает нейронка (для выделения объектов), причем в реальном времени — и работает весьма неплохо.
До качества работы внутри приложения, конечно, еще далеко — но работает же!
Оригинальный пост про линзу.
Попробовать в Web AR
🔴 @reptiloidnaya × #ar #augmentedreality #snapchat #webar