➖RoBWOV (beta 0.1)➖

Алгоритм, впитавший в себя целый ансамбль нейронных сетей, предназначенных для восстановления видеозаписей. Сейчас в него входят: DeOldify, Fast-SRGAN, DeepRemaster и DAIN. В последующих обновлениях появятся: регулировка резкости/размытия, а также возможность удаления шумов. После реализации вышеперечисленного выкачу код на Google Colab и расшарю, чтобы у каждого появилась возможность поковыряться и перенастроить под свои задачи. Следите за обновлениями на этом канале.

❗️ENTAR v.1.0❗️

А вот и обещанный ансамбль нейросетевых инструментов реставрации старых видео. От названия RoBWOV было решено отказаться. Новый алгоритм имеет куда больший список технологий. С полным списком сеток можно ознакомиться в описании к репозиторию:
https://github.com/tg-bomze/ENTAR/blob/master/README.md
Для самостоятельного тестирования предлагается использовать вычислительные мощности Google на облачной платформе Colab:
https://colab.research.google.com/github/tg-bomze/ENTAR/blob/master/ENTAR_Rus.ipynb
Я постарался максимально доходчиво расписать последовательность действий, чтобы не возникло трудностей даже у тех, кто никогда не занимался программированием. Со временем в ENTAR будут добавляться новые и обновляться старые нейросети, поэтому если вам интересно, то не теряйте ссылку на Colab.

🔹StyleGAN2 (Face Modificator)🔹

Все помнят омоложение Моны Лизы? Так вот, у меня для вас есть небольшой сюрприз. Я решил, что стоит поделиться с вами этой прекрасной сборкой. На свой GitHub (https://github.com/tg-bomze/StyleGAN2-Face-Modificator) я уже выкатил ноутбуки, которые вы можете запустить на облачном Google Colab и самостоятельно поковыряться в них. Переходите по ссылке и тыкайте на кнопку "Open in Colab".

P.S. Юный Александр Сергеевич, представленный в прикрепленном видео, был также сгенерирован при помощи StyleGAN2 😉

🔸Face Image Motion Model🔸

Многие уже знакомы с моделью "First Order Motion Model", с помощью которой можно переносить движения лица из видеофайла на фотографию. У нее есть ряд недостатков: занижает FPS, уменьшает разрешение выходного видео до 256px, не переносит звук, а также требует много ручной подготовки входных материалов. От большинства из них я избавился и по традиции все оформил в удобный Колаб на своем GitHub: https://github.com/tg-bomze/Face-Image-Motion-Model. Переходите по ссылке и нажимайте на кнопку "Open in Colab", чтобы самостоятельно протестировать модель. Оставшиеся нерешенные проблемы будут исправляться в дальнейших обновлениях.

P.S. Если вдруг кто-то не узнал персонажа в прикрепленном видео, то это главный герой из серии игр Doom. Детализацией занимался отдельно, используя Remini и, в том числе, инструмент “StyleGAN2 (Face Modificator)” из предыдущего поста.

P.P.S. Может возникнуть ошибка. Это из-за лимитов Гугла. Если такое случается, то скрипт должен заработать снова в течении суток.

🧩 Video to Anime Converter 🧩

Не так давно на многих тематических каналах публиковали нейросеть, которая трансформировала изображение под стилистику аниме. Я решил сделать Колаб для конвертации коротких видеороликов, который опубликовал у себя на GitHub: https://github.com/tg-bomze/Video2Anime. Каждый желающий может зайти, нажать на кнопку "Open in Colab" и самостоятельно попробовать поиграться с этим инструментом. Проведя некоторое количество тестов я заметил, что этот эффект отлично накладывается на видеоролики с пейзажами. С людьми он пока работает недостаточно хорошо. В дальнейших обновлениях это будет исправлено.

✍️ Stylizer Video to Drawing ✍️

На этот раз у нас нейронка, стилизующая кадры портретного видео в рисунки. Найти Колабы, в которых её можно опробовать, не составит труда, если перейти по ссылке: https://github.com/tg-bomze/Video2Drawing. Данное видео (25 fps), длящееся 20 секунд, она обрабатывала 7 минут. Скорость - ее основной минус. Тем не мене качество весьма достойное, что является плюсом.

P.S. Простите за мой плохой финский.

Дорогие подписчики.

Изначально планировал подвести итоги и рассказать как, опубликованными на этом канале нейросетям, я реставрировал "Тайную вечерю", но в последний момент решил, что лучше просто поведаю о планах на этот канал. Публикация Колабов не закончится (всеж это то, почему многие вообще подписались). Как часто это будет? Сложно сказать, но я буду стараться делать их чаще. Много времени уходит на основную работу и на собственный проект, который я собираю с января (пока не могу сказать какой, но он точно связан с нейронками... думаю вам понравится). Помимо этого хотел попробовать записать подкасты или видеотуториалы по самостоятельному обучению или по разборам уже существующих.

В любом случае хотел сказать спасибо всем и каждому за то, что проявляете интерес к моему труду. Спасибо всем, кто пишет вопросы, советуется или советует, делится своими находками и размышлениями. За время ведения своего канала я познакомился с множеством удивительных людей. Мне очень приятно видеть в них заинтересованность к теме современных технологий. Чтож ... оставайтесь с нами. Дальше будет интереснее.