ComfyUI: теперь как нормальная прога для Windows, macOS и Linux

ComfyUI больше не надо ковырять через терминал — ставишь как обычное приложение на 200 МБ, без лишней возни с установками.

Что нового:

— Установка в один клик (Windows, macOS, Linux)
— В комплекте PyTorch 2.5 и ComfyUI Manager
— Новый интерфейс: вкладки, горячие клавиши, библиотека моделей
— Можешь сразу загружать недостающие модели через URL
— Комьюнити-реестр кастомных нод (CNR) для расширенного тюнинга

Для тех, кто хочет протестировать новую версию, уже открыта запись на бета-тестирование здесь. Подробнее о нововведениях можно узнать в официальном блоге Comfy.

Пульс нейросетей

Друзья, сегодня расскажу про самые главные новости прошлой недели + этой

Ждите контент!

Пульс нейросетей

Stable Diffusion 3.5: Обновлённые Large и Medium версии в работе

Stability AI выпустили SD 3.5 с двумя версиями модели: Large и Medium. Теперь доступен ускоренный режим Turbo, а также возможность работы в разрешении до 2 мегапикселей для Medium. Обновления нацелены на улучшение качества генерации и поддержку кастомизации для комьюнити.

Детали и контекст:
После прошлых неудач с моделью Medium 3.0, Stability AI пытаются восстановить позиции, представив SD 3.5 Large с 8B параметрами и версию Turbo, работающую всего в 4 шага. Эти модели стремятся улучшить качество генерации, но пока отстают по детализации от моделей-конкурентов, таких как Flux.

Medium версия SD 3.5, выпущенная недавно, выделяется улучшенной архитектурой MMDiT-X и поддерживает разрешение до 1440x1440 пикселей. С оптимизациями модель помещается в 8 ГБ VRAM, делая её более доступной для пользователей с ограниченными мощностями.

Пульс нейросетей

Anthropic показал обновленные модели Sonnet 3.5 и Haiku 3.5 и внедрил управление компьютером

Anthropic представил обновленные модели Claude 3.5 Sonnet и Claude 3.5 Haiku, улучшив их производительность в задачах кодинга и взаимодействии с интерфейсом. Теперь доступны функции автономного управления компьютером через API, где модель может двигать курсором, нажимать кнопки и заполнять формы на основе текстовых команд.

Детали и контекст:
Модель Claude 3.5 Sonnet v2 улучшена в производительности на 5% по сравнению с предыдущей версией, особенно в задачах написания и анализа кода.

Одна из главных новинок — функция Computer Use, позволяющая модели выполнять действия на компьютере, как в научно-фантастических фильмах. На текущем этапе модель может взаимодействовать с интерфейсом. Эта функция уже доступна разработчикам через API, хотя пока требует доработки для стабильной работы.

Функция Computer Use может изменить подход к рутинным задачам, особенно в сферах, связанных с автоматизацией и RPA.

Пульс нейросетей

Также Anthropic добавил возможность генерировать и запускать код, а также представил инструмент для анализа данных. Маркетологи могут загружать данные о воронке продаж, и Claude автоматически выявит ошибки и предложит шаги для повышения конверсии. Проджект-менеджеры получили серьёзного помощника: Claude на основе данных о вовлеченности пользователей спланирует спринты и распределит приоритеты. Финансовые и инженерные команды также оценят новую функцию для анализа производительности и создания финансовых отчетов.

Этот инструмент доступен на Claude работает по принципу Code Interpreter от OpenAI, позволяя строить визуализации, запускать код и наблюдать результаты.

Пульс нейросетей

Genmo Mochi 1: новый видеогенератор с открытым исходным кодом

Genmo представили Mochi 1 — новую open-source модель для генерации видео. Модель состоит из 10 миллиардов параметров, но с ограничениями: разрешение 480p и требование минимум 4 H100 GPU для работы. На платном сайте доступна версия с улучшенным качеством.

Детали и контекст
Mochi 1 основана на архитектуре Asymmetric Diffusion Transformer, что обеспечивает высокое качество изображений при статичных сценах, хотя с движением объектов модель пока не справляется. Генерация на сайте Genmo возможна бесплатно — по 2 видео в 480p, 30 fps, до 5 секунд в день на аккаунт.

Для локального использования требуется значительная мощность, однако сообщество уже создало адаптации для одного GPU. Например, Jukka Seppänen разработал враппер для Mochi, позволяющий запускать её на 24 GB VRAM. Также доступна облегченная версия модели в формате bf16 на Huggingface.

Пульс нейросетей

Act One от Runway: новый уровень лицевого мокапа

Runway анонсировали новый инструмент Act One для переноса мимики на персонажей, напоминающий LivePortrait, но с новыми возможностями. Он обещает стать настоящим прорывом для аниматоров, хотя доступ к нему пока ограничен.

Детали и контекст
Act One позволяет использовать обычное видео, чтобы анимировать персонажей без необходимости в специальном оборудовании. Этот инструмент похож на LivePortrait, но предлагает более продвинутые функции. У Runway есть примеры работы Act One.

Стоимость использования составляет 10 кредитов за секунду, с минимальным тарифом в 50 кредитов на видео и максимальной длиной в 30 секунд. В безлимитном тарифе доступен Explore Mode, который позволяет пользователям экспериментировать с различными эффектами.

Пульс нейросетей

Miles Brundage уходит из OpenAI: опасения по поводу готовности к AGI

Miles Brundage, старший советник OpenAI по вопросам готовности к искусственному общему интеллекту (AGI), объявил о своем уходе из компании. В своем заявлении он выразил серьезные опасения о том, что ни OpenAI, ни другие ведущие лаборатории не готовы к AGI, а также подчеркнул необходимость более независимой работы в области политики ИИ.

Детали
В своем прощальном сообщении Brundage отметил, что его решение покинуть OpenAI связано с желанием иметь больше свободы для публикаций и исследований. Он указал на недовольство внутри компании по поводу её перехода от некоммерческой модели к коммерческой, что, по его мнению, ослабляет первоначальную миссию OpenAI по обеспечению безопасного AGI. Это решение стало частью более широкой тенденции: за последние месяцы компанию покинули несколько высокопрофильных сотрудников, включая главного технолога Mira Murati и других ключевых фигур.

Контекст
Brundage присоединился к OpenAI в 2018 году и занимался вопросами безопасности и политики в области ИИ. Его уход отражает растущее беспокойство среди сотрудников о том, как компания управляет рисками, связанными с ИИ. В прошлом Brundage уже высказывал свои опасения относительно направления компании и её способности справляться с вызовами, связанными с AGI.

Пульс нейросетей

OpenAI запускает модель Orion в декабре

OpenAI планирует выпустить новую модель Orion в декабре, которая может быть в 100 раз мощнее GPT-4. Однако доступ к ней вначале получат лишь избранные партнёрские компании, такие как Microsoft, для интеграции в свои продукты.

Детали:
Модель обучалась на 10,000 графических процессоров H100 от Nvidia, что должно обеспечить ей впечатляющие возможности. В отличие от предыдущих релизов, Orion не будет доступна через ChatGPT сразу после запуска, что создаёт вопросы о её позиционировании в линейке моделей OpenAI.

Контекст:
OpenAI только что привлекла рекордные $6.6 млрд инвестиций, что подчеркивает переход компании в статус коммерческой организации. Глава OpenAI, Сэм Альтман, намекнул на скорое "восхождение зимних созвездий", имея в виду созвездие Орион, которое видно зимой, что создает дополнительный интерес к релизу.

Пульс нейросетей

Скорость Llama 3.1 70B выросла в 4 раза

Cerebras значительно обогнали конкурентов, увеличив скорость инференса модели Llama 70B до 2200 токенов в секунду по данным Artificial Analysis. Ранее скорость была всего 450 токенов в секунду, но в личном тесте скорость составила 2600 токенов в секунду, а некоторые пользователи сообщают о более чем 4000 токенов в секунду.

Детали:
Несмотря на такие впечатляющие показатели, Llama 3.1 70B сталкивается с проблемой короткой длины контекста — всего 8000 токенов. В то время как конкуренты, такие как Groq и SambaNova, поддерживают контексты в 128,000 и 64,000 токенов соответственно. С учетом новых трендов, таких как inference time scaling после релиза o1, спрос на высокоскоростные провайдеры будет только расти.

Контекст:
Модель o1 часто требует более минуты для обработки, что ограничивает её использование в быстрых приложениях. Без достаточной длины контекста участники "золотой лихорадки" на рынке инференса могут не получить необходимых преимуществ.

Пульс нейросетей

ElevenLabs запускают Voice Design для создания голосов по текстовому запросу

ElevenLabs представили новую функцию Voice Design, позволяющую генерировать голоса по текстовому запросу. Пользователи могут легко создать уникальный голос для персонажа, сохраняя эмоции и акценты, поддерживая при этом русский язык.

Детали и контекст
С помощью Voice Design достаточно выполнить несколько простых шагов: зайдите во вкладку Voices на сайте ElevenLabs, нажмите «Add a new voice», выберите «Voice Design» и заполните необходимые поля. После этого нейросеть создаст три варианта голоса, из которых вы сможете выбрать лучший. В начале предоставляется 10K кредитов, что позволит озвучить около часового текста. Однако стоит учесть, что этические нормы (такие как использование детских голосов или нецензурной лексики) не будут соблюдены в этой функции.

Пульс нейросетей

IC-Light V2: новая эпоха в редактировании изображений**

IC-Light V2 — это серия моделей на базе архитектуры Flux, созданная автором Фокуса и Форджа. Модель предлагает не только фотогенерацию, но и возможность создания стилизованных картинок, сохраняя при этом детали исходного изображения на высоком уровне.

Детали:
Новая модель обладает впечатляющей функциональностью, позволяя пользователям быстро менять фон на изображениях. Она обеспечивает качественные результаты и подходит для различных проектов.

Контекст:
Демо-версия уже доступна для пользователей, что дает возможность оценить мощность модели. Исходный код будет опубликован в ближайшее время, что откроет новые горизонты для разработчиков и энтузиастов.

Пульс нейросетей

ChatGPT добавил поиск по чатам: находите нужные диалоги за секунды

В веб-версии ChatGPT появилась функция поиска по чатам. Просто введите запрос в строку поиска, и ChatGPT отобразит релевантные ветки с превью. Один клик — и вы уже в нужном месте чата. Функция работает не только по названиям чатов, но и по ответам, что делает её более удобной по сравнению с аналогичными возможностями в Claude.

Детали:
Функция поиска станет доступна пользователям с подпиской Plus и Team сегодня, а пользователи бесплатной подписки получат доступ в следующем месяце. Кроме того, пользователи Enterprise и Edu смогут воспользоваться этой возможностью в течение недели.

Контекст:
Чуть меньше двух лет потребовалось OpenAI, чтобы реализовать, казалось бы, простую функцию. Несмотря на длительное ожидание, её внедрение существенно упростит навигацию по чатам и повысит эффективность использования платформы.

Пульс нейросетей

Друзья, всех приветствую. Сегодня напишу о личном.

Здесь будет много текста, поэтому чтобы понять информацию в сжатой форме, переходите в самый конец.

Этот канал образовался 26.02.2024. За это время я успел поднатаскать опыт написания постов, реализовать некий потенциал работы с нейросетями, погружался с полной головой в мир ИИ, читал (и продолжу читать) каналы/статьи/вкиды со стороны кампаний.

Каналу чуть больше 9 месяцев. Я благодарю всех вас, кто остаётся со мной, читает посты (перелопаченные из множества других постов аналогичных каналов) + видели эксперименты/нововведения на канале. Спасибо вам, что вы есть❤️.

Когда я начинал делать этот канал, было лишь две мысли:

1. «Вот сейчас буду делать канал по нейросетям, по той сфере деятельности, которая мне интересна – и найду единомышленников и смогу с вами делать какой-то продукт, общаться с вами, возможно, сочетать наши опыты и реализовать какие-то общие проекты!»
2. «Вот сейчас буду делать канал и смогу на этом зарабатывать, ведя блог, продавая как рекламу, так и свой продукт – смогу выйти на активно-пассивный заработок и не буду знать себе бед!»

Но как оказалось у каждой из этих медалей есть обратные стороны:
1. Чтобы коммуницировать с подписчиками, как-то вас «завлекать» в мир нейросетей, чтобы «вам становилось интересно пользоваться ИИ» нужные следующие факторы:
1.1 Частота выходов постов: не распыляться по 4-6 постов в день, а хотя бы по 1-2 в день, а то и через день, но с большим уклоном на качество, а не количество;
1.2 Предлагать какие-то интерактивы совместные, например, совместно «поиграться» с той или иной нейросетью, обсуждать (реально обсуждать, а не просто писать «напиши в комментариях ваше мнение») новости/опыты в работе с нейросетями/общей работе с ними;
1.3 Делать, например, розыгрыши/соревнования/конкурсы, дабы подкреплять взаимодействия между мной (как админом) и вами (как подписчиками [возможно, как будущих компаньонов по «работе»]).

2. Чтобы реализовывать потенциал канала как тот же новостник есть тоже определённые факторы:
2.2 Бюджет канала (да, покупал рекламу, которая, как оказалось, была, грубо говоря, куплена не по правильной стратегии – но это всё равно не то!). Можно, конечно, развернуть свой канал и с около-органично-бесплатным трафиком (через другие популярные сети, через спаминг на других каналах, через интерактивы между каналами других каналов [тут вообще отдельный вид изощрения – если кратко сказать, после интерактивов и прироста аудитории в +200-300 пдп оказалось, что подписчики то «мёртвые», они не боты, но мой канал в архиве с другими каналами с выключенными уведомлениями]).
2.3 работа в команде. Вообще, как таковой команды и не было (да, помогали люди из моего окружения «раскрутить» канал), потому вся контентная база была только на админе (а именно ресерч + упаковка + доп информация + дополнение базы). По началу было не очень сложно этим заниматься – бери инфу, копируй как у других, меняй немного текст и –вуа-ля! – у тебя уже есть пост для канала!
Но это ж реально тупо копипастить чужую инфу и преподносить как что-то своё (поэтому к дополнению ко всему вышеперечисленному делал свои эксперименты с нейросетями/вкидывал мемы своего производства + начал вести доп канал с генерацией картинок [ну а там ещё проще – пока не занимаюсь, он как бэ и никому нахер не нужен])

Ну допустим с предыдущими абзацами мы бы справились, есть деньги + команда + есть реально свой контент. Что ещё нужно? Ах да, вы ж не знаете обо мне ничего от слова совсем. Что ж, самое время познакомится 😅

Меня зовут Артём, через 2 недели стукнет 21, учусь на 4 курсе УрФУ на кафедре «Электропривод и автоматика промышленных установок», вместе с дипломом об основной учёбе в следующем году получу второе высшее по специальности «экономика и управление предприятием». Ну и вишенка на торте – окончу военную кафедру 🙂

Возможно, появятся вопросы по типу «Как ты успеваешь делать сразу всё?» А я скажу – как получается, так и делаю. Да, я – ленивая жопа, бывали периоды, когда было много свободного времени, но я не делал посты. Почему? А вот спросите меня в тем моменты, когда я «выпадал» из инфобиза и тогда бы вам ответил (без негатива).

Так, а к чему я несу всю эту информацию в массы (в тот небольшой шлейф подписчиков, которые иногда почитывают мой канала)?

Друзья, я приостанавливаю работу в этом канале. С вышеперечисленными факторами не очень просто реализовать весь свой потенциал в полной мере, как себе представлял и хотел.

Сейчас я пробую работать на том же фрилансе, используя нейросети (пока что из предложенных 20 вакансий откликнулись на вариант работы со мной на 1). Попробую что-нибудь с этим сделать (например, накопить бюджет на канал (?)).

Возможно, как буду чуть больше свободным от внешних мыслей и дел + с копеечкой в кармане – смогу реанимировать канал (или его перелопатить и сделать что-то иное, своё). Я не говорю вам «пока», а говорю «до свидания».

Это был классный опыт вести канал по нейросетям. Всем спасибо, всем удачи. До новых встреч!

P.S. краткое описание текста, сжатый с помощью GPT:

«Автор канала делится личными размышлениями о своём опыте ведения канала о нейросетях. Каналу чуть больше 9 месяцев, и за это время он научился писать посты, экспериментировать с контентом и искать способы привлечь аудиторию. Он говорит о сложностях поддержания активности и качества контента, взаимодействия с подписчиками и продвижения. Также автор делится личной информацией о себе и своими планами: он приостанавливает работу канала из-за нехватки ресурсов и времени, но оставляет возможность вернуться в будущем.»

Для прикола пусть будет и переработанный текст с помощью того же GPT

Друзья, приветствую! Сегодня хочу поделиться личными мыслями.
Текста будет много, но если вам нужно кратко – загляните в самый конец.
Каналу уже больше 9 месяцев (начало – 26.02.2024). За это время я научился писать посты, развивать канал и глубже погружаться в мир ИИ. Читал и читаю статьи и каналы коллег, вдохновляясь опытом других.
Хочу поблагодарить всех, кто остаётся со мной, читает мои посты и следит за экспериментами и нововведениями на канале. Спасибо, что вы со мной ❤️.

Когда я начинал этот канал, у меня было две цели:
1. Создать сообщество единомышленников, с которыми можно обмениваться идеями и создавать совместные проекты.
2. Развить канал так, чтобы монетизировать его – через рекламу и собственные продукты, достигнув стабильного дохода.

Однако эти цели оказалось не так просто реализовать. Вот с какими трудностями я столкнулся:

Для коммуникации с подписчиками:

- Важно выпускать посты регулярно – лучше реже, но качественно, чем по 4-6 постов в день.
- Важно вовлекать вас, предлагая интерактивы, совместные обсуждения и эксперименты с ИИ.
- Для поддержания интереса нужны конкурсы и розыгрыши.

Для развития канала и привлечения аудитории:

- Требуется бюджет на рекламу и опыт в её продвижении. Мои первые эксперименты не принесли ожидаемых результатов.
- Нужна команда для создания уникального контента, но пока я справляюсь сам.

Ну что ж, давайте познакомимся. Меня зовут Артём, мне скоро 21. Учусь на 4 курсе УрФУ, получаю две специальности – "Электропривод и автоматика промышленных установок" и "Экономика и управление предприятием", и параллельно заканчиваю военную кафедру.

Сейчас я решил приостановить работу над каналом. Не все идеи удаётся реализовать так, как хотелось бы, и чтобы развить проект, нужны дополнительные ресурсы. Возможно, в будущем я вернусь с новыми силами и идеями. Всем спасибо за поддержку и участие, это был классный опыт! До новых встреч!

Ребята, новостей больше не будет. Я ушел в инженерию и практику. Кому интересно, как я скрещиваю железо и AI — гоу в новый канал: [Ссылка]