Разработчики Meta* представили нейросеть, которая генерирует видео 🤯

Нейросеть Make-a-Video – это ИИ-модель, которая позволяет генерировать короткие видео по текстовым подсказкам.

Meta* обещает выпустить демоверсию нейросети, но пока доступа к ней не дает. Видео выходят в низком качестве, без звука и длинной не больше 5 секунд.

С картинками наигрались, пора переходить на видеопродакшн! Протестить нейронку, можно здесь 🚀

* – запрещенная на территории РФ организация

Компания Harmonai создала настоящий инструмент для генерации музыки 🔊

Модель Dance Diffusion от компании Harmonai – это нейросеть с открытым исходным кодом, обученная на наборах данных, полностью состоящих из образцов музыки и аудио, которые не защищены авторским правом.

Сейчас плагинов, которые использует ИИ для создания новых мелодий мало, поэтому Harmonai ставит своей целью заполнить эту нишу. Компания планирует создавать свои инструменты для цифровых звуковых рабочих станций (DAW, Digital Audio Workstation), чтобы в будущем ИИ мог работать в режиме реального времени бок о бок с создателем.

Цукерберг показал возможности новой VR-гарнитуры от Meta* 🦾

Марк продемонстрировал возможности новой VR-гарнитуры в смешанной реальности, пригласив двух чемпионов по фехтованию и заодно показав новые контроллеры в действии. В Quest Pro установлены камеры с более высоким разрешением и разные датчики, которые позволяют сделать смешанную реальность более «реальной» и с крутой цветопередачей. Meta* также сообщила, что гарнитура имеет встроенные датчики отслеживания глаз и лица для управления аватарами в социальных сетях.

Официальный анонс Quest Pro состоится 11 октября на Connect, ежегодном AR/VR мероприятии компании Meta*💥

* – запрещенная организация на тарритории РФ

Метаверс умер, да здравствует Метаверс AR!

Речь Тима Кука у остывающего тела корпорации Meta* взбудоражила профессиональное сообщество. «Наконец кто-то осмелился назвать короля голым», — восторгаются одни. «Ты подарил нам свободу от „мертвоглазого“ метаверса и веру в светлое AR-будущее, Тим», — восклицают другие.

И действительно, — в главном Кук прав: мало кто понимает, что такое Метаверс. Но тех, кто понимает, что такое AR, — едва ли больше. А тех, кто понимает, в чем разница между Метаверсом Цукерберга и миром AR-технологий, так воодушевляющим Тима Кука, — меньше ещё на пару порядков. Особенно невнятно (или цинично?) это противопоставление выглядит, когда глава Apple рисует вдохновляющую картину будущего AR-технологий, пересказывая сюжет промо-ролика Meta, выпущенного в июне:

«Я думаю, что AR — это глубокая технология, которая повлияет на все. Представьте, что у вас внезапно появляется возможность преподавать с помощью AR и таким образом демонстрировать вещи. Или в медицинской сфере и так далее». (машинный перевод с нидерландского)

В действительности AR-манифест Тима Кука не повлиял ни на что кроме того, что все метастартаперы мира помоют рот с мылом и к завтрашнему утру поменяют слово «метаверс» на «AR» в своих промо-материалах.

А Meta* продолжит своё пике, стартовавшее в феврале 22-ого года после введения новых мер «по защите конфиденциальности пользователей» устройств Apple, лишившего Meta десятой части выручки.

О, Стив, на кого ты нас оставил!

Иван Суслин, руководитель Центра экспериментальных технологий Цифровой лаборатории ГПМ ЦИ, специально для D. lab

* — запрещенная на территории РФ организация

Инструмент Pentopix генерирует раскадровку по тексту сценария 💥

Этот инструмент с искусственным интеллектом создан специально для сценаристов. Pentopix в режиме реального времени генерирует изображения по тексту сценария. Алгоритм полностью совместим с одной из самых популярных программ для написания сценариев – FinalDraft!

Протестировать сервис можно здесь 👀

Программа от Google, которая позволяет оказаться внутри пейзажной фотографии 😳

В новой программе можно взять фотографию пейзажа, а затем использовать ИИ, чтобы «влететь» в него, как птица, при этом программа генерирует пейзаж благодаря машинному обучению.

Чтобы создать эффект полета программа «Perpetual View Generation of Natural Scenes from Single Images» использует технологии inpainting (для генерирования части изображения, которая скрыта, например, за деревьями), outpainting (для генерирования той части изображения которая находится за пределами фотографии) и суперразрешение, что бы все выглядело качественно 🔝

Первый в мире Outpainting для Photoshop 🙉

Разработчики из Flying Dog Software (те самые ребята, которые создали плагин Stable Diffusion Plugin для графического редактора Krita с открытым исходным кодом) привносят тот же самый рабочий процесс ИИ в Photoshop, который уже протестирован многими дизайнерами.

Функция Outpainting — дорисовка алгоритмом исходного изображения 🔥

Stable Diffusion перенесли в VR

Один разработчик объединил Stable Diffusion с программой Touchdesigner и назвал свой результат «иммерсивным скрытым пространством в реальном времени».

Объекты в видео постоянно перерисовываются, когда ты смотришь на них длительное время и это все без какого-либо 3D. Чистая проекция двухмерной графики!

Демонстрация была создана на Nvidia 2080 Ti с 11 ГБ 💥💥💥

Quest Pro – новый VR-шлем от Меты* за $1500 💥

Мета* заявила, что новые очки – самая легкая гарнитура, которая вышла на рынок. Ни Oculus, ни HoloLens не сравнятся с ними по весу. В Quest Pro поместили линзы, которые на 40% тоньше и 75% контрастнее предыдущей версии. А управляет всем новый процессор Snapdragon, который мощнее на 50% чем Quest 2.

Джойстики тоже абсолютно новые, у них исчезла арка и появилось несколько сенсорных датчиков, Цукерберг обещал, что они станут скорее продолжением рук, чем пультами управления 🙃

Официально Quest Pro представили вчера, но в продажу они поступят только 25 октября.

* — запрещенная на территории РФ организация

В метавселенные заходят меньше тысячи пользователей в день при миллиардных инвестициях 😱

Данные DappRadar говорят о том, что у платформ Decentraland и The Sandbox менее 1 000 ежедневно активных пользователей, несмотря на их общую оценку в 1,5 млрд. долларов!!! Там пусто прямо как на фотографии!

Правда платформы утверждают, что эти цифры не отражают полной картины и говорят, что оценивать нужно не по «активным» пользователям, а по «уникальным». Разница между этими пользователями заключается в том, что «активные» – те, которые совершили действие с уникального кошелька со смарт-контрактом платформы, а «уникальные» – те, которые посетили платформу хотя бы 1 раз.

«Уникальных» пользователей, разумеется, больше 1 000 в день, но это несопоставимо с общей рыночной капитализации обоих платформ.

Новая продвинутая AR-линза 🥸

Швейцарский стартап Creal разрабатывает оптику для гарнитуры, которая объединяет естественный и цифровой свет для создания правдоподобной дополненной реальности. Сама линза представляет из себя абсолютно прозрачную пленку толщиной с человеческий волос, которая пропускает через себя почти весь видимый свет без каких-либо эффектов.

Такая технология была опробована крупными компаниями, но уникальность Creal заключается в том, что они увеличили площадь, на которою проецируется голографическое изображение!

Microsoft добавит DALL-E 2 в приложение для графического дизайна 🥳

Приложение, получившее супер оригинальное название «Microsoft Designer», будет доступно в пакете Microsoft 365 и будет использовать как Microsoft AI, так и DALL-E 2, чтобы помочь творческим людям сэкономить время и улучшить результаты их работы. Схема работы проста: Microsoft Designer генерирует изображения по текстовым подсказкам.

В дальнейшем этот функционал Microsoft планируют интегрировать в Microsoft Edge и Bing.

Партнерство Microsoft и OpenAI идет уже давно: еще в 2019 году Microsoft инвестировал в них 1 млрд долларов 💰

Сентябрьский дайджест ON AIR 🔊

Из него вы узнаете, что:

🟣 VK разрабатывает аналог игрового маркетплейса Steam

🟣 Яндекс за лето удалил на 42% больше пиратских ссылок

🟣 Instagram*, YouTube и Яндекс тестирует новые способы монетизации

🟣 Snapchat проанализировал перспективы использования AR брендами

🟣 Netflix создает собственную игровую студию

И многое другое 🔥

* — запрещенная на территории РФ организация

Студия Demeo превращает квартиру или офис в AR-шутер с помощью приложения Spatial Ops 💥

Шутер Spatial Ops работает на гарнитурах Quest Pro и Quest 2. Он смешивает реальное окружение с компьютерной графикой, создавая интенсивный AR-шутер, прямо как лазертаг!

Gartner представил отчет по технологическим трендам на 2023 год 🔥

Из отчета вы узнаете, как на бизнес могут повлиять такие технологические тренды, как адаптивный ИИ, отраслевые облачные платформы, метавселенные и многое другое!

Остальные тренды и что они означают, можно прочитать в оригинале или в этом отчете на русском языке.

Новое VR-приложение, которое позволяет оказаться внутри видео, снятых на смартфон 📱

Стартап Wist Labs разрабатывает VR-приложение, которое преобразует ваши видеоролики, снятые на смартфон, в 3D-видео! Происходит это с помощью датчиков LiDAR, а само видео можно посмотреть с помощью VR-гарнитур (например, Quest VR) 🥳

Проект находится на стадии альфа-тестирования и доступен только на iOS, но только представьте, что будет, если Wist поженить с нейрорендерингом или с функцией дорисовки от Stable Diffusion 😱

Пять главных Web3 тенденций в 2023 году по версии Forbes

Среди них оказались:

1️⃣ Децентрализованная метавселенная
Над метаверсом работают все крупные игроки рынка, но DecentralandMANA и The Sandbox – самые популярные примеры именно децентрализованных метавселенных. У них данные хранятся на блокчейне EthereumETH и они не имеют одного владельца. По мнению Forbes, именно над разработкой такой метавселенной будут работать остальные Web3 компании.


2️⃣ «Полезные» NFT
Аналитики говорят, что их истинная ценность будет заключаться в токенизации предметов, данных и даже идей в цифровой и физической областях. Акцент будет сделан на «Полезные» NFT, которые будут иметь практическое применение, а не на NFT, которые просто представляют виртуальные произведения искусства.


3️⃣ Децентрализованные соцсети
Сторонники Web3 утверждают, что основным преимуществом децентрализованной соцсети будет то, что она будет устойчива к цензуре. Если это станет реальностью в 2023 году, то это может произойти благодаря не кому иному, как Илону Маску 😏


4️⃣ Тренд на экологичность
Все больше усилий будет приложено к использованию технологии для достижения «зеленых» целей, например, недавно Ethereum уже перешел на более «зеленый» алгоритм работы, что снизило энергозатраты на 98% или «регенеративное финансирование» (ReFi). Оно направлено на развитие проектов, которые занимаются восстановлением или сохранением природных ресурсов.


5️⃣ Усиление присутствие правительств в Web3
В 2023 году государства будут позиционировать себя как «дружественные Web3» и, вероятно, делать они будут это с помощью понижения налоговой ставки для Web3-организаций и создания цифровых валют CBDC (Central bank digital currency). Уже есть примеры таких валют как индийская электронная рупия, китайский цифровой юань (или цифровой рубль, разрабатываемый Банком России). Также в этом году Колорадо стал первым штатом, официально принимающим криптовалюту в качестве оплаты налогов и государственных сборов.

Очередная попытка обмануть большого брата с помощью стрёмных шмоток 🙃

Группа исследователей из Мэрилендского университета, сотрудничающая с Facebook AI, разработала свитер, который делает вас «невидимым» для обычных моделей машинного обучения по обнаружению людей.