VR в образовании - исследовательские направления

В свете недавнего выступления по тематике метавселенных и виртуальной реальности (пост) возник ряд вопросов о том какие направления наиболее ярко показали себя в плане применения VR и MixR в образовании.

На эту тему коллеги поделились презентацией с недавнего выступления Лидии Ятлук, исследовательницы и разработчика образовательного опыта из Школы управления СКОЛКОВО,

В презентации в частности рассматривается:

📟 Что именно исследуется в облаcти образовательного VR

📟 Какие педагогические подходы и технологии востребованы в этом поле

📟 Каковы основные типы VR обучения

📟 Каковые наbболее интtресные исследования в области образовательного VR в школе и в вузе

📟 Каковы обобщенные результаты этих исследований

📟 Каковы основные тренды в области изучения образовательного VR

📟 Какие выводы можно сделать из всего прочитанного

#ARVR #newtech #teor

Армия клонов или полномасштабное наступление цифровых двойников в обучении

На фоне громких побед ChatGPT тема цифровых двойников в обучении, казалось бы, отошла на второй план? Ничуть – не так давно был анонсирован целый ворох решений в этом поле.

Пионером тут конечно же выступает Nvidia. Прошлый год RnD компании потратил на изучение восприятия 3D аватаров пользователями.
Было установлено, что «роботизация» реалистичного лица воспринимается несколько хуже чем анимированный персонаж на основе того же лица.

Несмотря на это Synthesia (видео ) напротив, делает упор на реалистичность. Их решение снабдило аватаров от Nvidia живой мимикой. Теперь они могут подмигивать, поднимать брови, хмуриться, двигать головой для отрицания или согласия, а также коротко многозначительно кивать.

Кстати многие подозревают что на CES 2023 спикерами с презентации Nvidia были именно эти аватары топ менеджеров компании а не живые люди. Ссылка .
Посмотрите — чёткие паузы, ровный голос и повторяющиеся жесты.

В 2023 году NVIDIA предоставила ранний доступ к инструментарию по работе с аватарами в том числе с уклоном в мультяшность. Avatars Cloud Engine (сокращённо — ACE) (видео).

ACE это набор инструментов:

• Video-to-animation — создание анимации на основе ИИ-анализа видео;
• Audio2Face (https://youtu.be/h3xT_F_tEuU) — анимация лица с помощью речи из аудиофайла;
• Audio2Gesture (https://youtu.be/o6hhCRlTa9o) — перевод голосовых команд в ростовую анимацию;
• Video-to-2D-portrait-face-animation — анимация рисунков людей или портретов с помощью видео;
• Text-to-speech (https://developer.nvidia.com/riva) — перевод текста в синтезированную ИИ речь.

В качестве первых партнёров к Nvidia уже присоединились Epic Games c MetaHuman Creator и Ready Player Me.

Майкрософт выпустил диффузионную модель, которая способна построить 3D аватар по одной фотографии человека. Пример на видео – слева 1 фото и текстовое описание.

На выходе модель дает рендер 3D головы человека. С помощью изменения текстового описания можно редактировать то, как как аватар будет выглядеть.

Статья 1 и 2. Сайт проекта.

Не сказать что сама тема 3D аватаров так уж нова - на рынке существует уже ряд решений и от Realsoft (ссылка на видео) и от iClone (ссылка)

Но тем не менее именно за последний год тема 3D аватаров реальных людей получила активное развитие и в этом году с высокой долей вероятности мы увидим полноценные решения в области цифровых двойников и в образовании.

И наша лаборатория (ссылка на проект) и целый ряд российских стартапов уже начал активную работу в этом поле. Будем следить за их успехами.

#ARVR #newtech