Только что увидел рождественскую свинко-собачку, созданную StableDiffusion. Генеративные модели становятся все лучше и лучше, и они действительно впечатляют!

Конкретно в этой меня впечатлило, что ИИ понял с чего люди умиляются и сгенерировал какое то не существующее, но очень милое и уютное животное.

Вот вам инструкция как сделать своих таких (профессия будущего - промт инженер)

Data2vec 2.0: очень эффективный self-supervised метод для зрения, речи и текста

Сегодня Meta представила data2vec 2.0, новый алгоритм, который значительно эффективнее и превосходит по производительности своего предшественника. Он достигает той же точности, что и самый популярный из существующих алгоритмов self-supervised для компьютерного зрения, но делает это в 16 раз быстрее.

Подобно первой версии алгоритма data2vec, data2vec 2.0 предсказывает контекстуализированные представления данных. Например, представление слова козлы будет основано на всем предложении, в котором встречается это слово, и поэтому легче представить правильное значение этого слова ("плохие люди" или "установка для столярного дела").

📖 Статья
👌 Блог-пост
🦝 Код

Изучаем дюны на Марсе с помощью нейросеток

Вышла новая статья, в которой описывается исследование образования ряби на поверхности Марса.

Исследователи использовали искусственную нейронную сеть для изучения размера и формы более миллиона дюн на поверхности планеты. Для выделения контуров дюн на Марсе авторы использовали Mask R-CNN.

Они обнаружили, что размер самых маленьких дюн уменьшается с увеличением плотности атмосферы, что соответствует образованию более крупной ряби. Это позволяет предположить, что крупная марсианская рябь может формироваться в результате той же гидродинамической неустойчивости, что и ветровые дюны и подводная рябь на Земле. Исследование дает новое представление об эволюции атмосферы Марса и предлагает новый инструмент для изучения планетарных поверхностей.

📖 Статья

Кстати про космос. Что может быть символичнее протекающего Союза?

А про жидкость саму по себе интересно, можем ли мы чего-нибудь нейросеткой посчитать узнать про инцидент?

Ссылка

MaskViT - предсказание будущего трансформерами (что?!)

У людей есть встроенная когнитивная функция - прогнозирование событий на основе сенсорных сигналов. Если шарик катится к краю стола, скорее всего он упадет.

А как насчёт задачи компьютерного зрения - предсказания, что произойдет в следующих кадрах? По-моему, быстрое likely future prediction не только полезно, но и очень крипи. Прям смелый шаг в "Особое мнение"

☑️поиск разыскивамых преступников по данным камер наблюдения (в 50-тысячной толпе)
☑️вынесение приговора после обязательной консультации с нейронкой (и написанием развернутого объяснения в случае расхождения)

-вы находитесь здесь-

🔲предотвращение преступлений (скажем, детекция агрессивного поведения)
🔲приговоры за еще не совершенные преступления (замахнувшийся человек все ещё может остановиться)

Кароч, если ещё выражаете гнев токсично, есть время записаться к психологу. Понадобится несколько лет. На anger management. Киберпанк-то уже здесь.

📖статья
🔮код
🎞страница инструмента
@GingerSpacetail

LLM + voice cloning, чтобы будущие поколения родственников могли спросить у вас совета

Что думаете насчёт подарить себе и близким на НГ диджитал бессмертие?
Чтобы потомки смогли черпнуть мудрости у вашей бестелесной версии. А то как же они без нас там в будущем справятся👽

Есть простая, но уже воплощенная идея: записываете интервью, отвечая на вопросы для голосового общения.

Есть стартап, который планирует в 2023 с помощью LLM, voice cloning, а потом и VR (не раскрывают подробности), создавать виртуальную персону (Versona).

Обожаю такое, красивая идея и столько спорного:
- бесконечная ретравматизация, если оцифрованный практиковал токсичные методы общения;
- застревание в горевании: одно неверное движение, и мы в эпизоде "Черного зеркала", где девушка воссоздала себе погибшего мужа по записям в социальных сетях;
- создание цифровой версии объекта преследования людьми с психопатическими расстройствами...

♾️ прикоснуться к вечности тут или бета клонироваться тут
🌌 SD промпт в комментах
@GingerSpacetail

🤖👨‍🔬 Пока мы все приходили в себя от ChatGPT — вышла PubMedGPT 2.7B

PubMedGPT 2.7B — это новая языковая модель, обученная исключительно биомедицинским рефератам и статьям из The Pile. Эта GPT может достигать высоких результатов в различных биомедицинских задачах НЛП.

PubMedGPT была разработана Stanford CRFM и MosaicML.

Так что, если ты на биофаке и тебе пора писать диплом, ты знаешь что делать.. PubMedGPT + ChatGPT и погнали.

🧪 потестить демо на 🤗

Топ 10 постов в канале NN for Science за 2022 год. 10ое место.

Близиться Новый год, а значит пора подводить итоги и разбирать что произошло дальше.

10ое место (21.5к прочтений) занимает июньский пост про то, как инженер из гугла стал громко кричать, что языковая модель Lamda разумна и, что ей нужны права.

За это время у нас появилась ChatGPT, и надо признать, что я сам теперь, как сумасшедший хожу и спекулирую по поводу определения сознания (консенсуса по которому все равно нету). Мне кажется это определение надо срочно адаптировать к тому факту, что у нас появился AI.

Image Stacking

Пишем промпт, сохраняем картинку, используем ее для следующего промпта, повторяем пока не получаем что хотели.

Идея сама по себе не нова, но исполнение отличное

Ссылка

Топ 10 постов в канале NN for Science за 2022 год. 9ое место.

Близится Новый год, а значит пора подводить итоги и разбирать что произошло дальше.

9ое место (21.9к прочтений) занимает октябрьский пост про то, как Stable Diffusion можно использовать в Augmented Reality (AR).

С тех пор инференс SD ускорили в несколько раз, а значит и на мобильных устройствах он работать стал быстрее.

Коммерческих продуктов пока не встречал, но думаю что они не за горами, вопрос уже не в технологии, а в том, что бы найти хорошее применение (например прикрутить туда Dreambooth, находить объект, дергать 20 более менее разных кадров, дообучать и стилизировать объект в AR).

Ох, что нас ждёт в 2023!!!