Робот NEO получил новые руки
25 степеней свободы.
Все еще далеко до человеческих, конечно, но прогресс знатный.
Интересно они их называют,- API к физическому миру.
#роботы #NEO #руки
------
@tsingular
25 степеней свободы.
Все еще далеко до человеческих, конечно, но прогресс знатный.
Интересно они их называют,- API к физическому миру.
#роботы #NEO #руки
------
@tsingular
🔥24👾2🍓1🆒1
ИИ 2040 полный перевод с форматированием
В общем попробовал по-разному - и текстом тоже, но из-за того, что в документе очень сложная графика и любой текстовый перевод ее убивал, - решил пойти в обход и зарядил постраничный перевод с GPT Image 2 - за ночь агент справился ($4.6 за 81 страницу сожрал) и пересобрал PDF
На мой взгляд получилось идеально, но это именно как-будто скан
тут выкладывают вариант, - docx в тексте - лучшее что у меня получилось с попыткой сохранить разметку.
это было долго, сложно и дорого, поэтому полный постраничный перевод в ИИзбранном
https://paywall.pw/tsingular_favorites
#AI2040 #переводы
———
@tsingular
В общем попробовал по-разному - и текстом тоже, но из-за того, что в документе очень сложная графика и любой текстовый перевод ее убивал, - решил пойти в обход и зарядил постраничный перевод с GPT Image 2 - за ночь агент справился ($4.6 за 81 страницу сожрал) и пересобрал PDF
На мой взгляд получилось идеально, но это именно как-будто скан
тут выкладывают вариант, - docx в тексте - лучшее что у меня получилось с попыткой сохранить разметку.
это было долго, сложно и дорого, поэтому полный постраничный перевод в ИИзбранном
https://paywall.pw/tsingular_favorites
#AI2040 #переводы
———
@tsingular
🔥19❤2🙏2🏆2✍1⚡1
тем временем цены на 5.6 в российских аггрегаторах.
дороже, чем openrouter, но не то чтобы слишком, кстати (+30%).
#GPT #цены
———
@tsingular
дороже, чем openrouter, но не то чтобы слишком, кстати (+30%).
#GPT #цены
———
@tsingular
🤯9 6👍2👀2👻1
Google Research представили SensorFM — фундаментальную модель, которая понимает физиологию по данным с носимых устройств
⚡️ Google Research (Xin Liu и Daniel McDuff) выкатили SensorFM, фундаментальную модель, предобученную на триллионе минут сенсорных данных от пяти миллионов человек.
Данные целый год собирались с Fitbit и Pixel Watch в более чем ста странах — крупнейший датасет носимой физиологии.
📦 Модель обрабатывает 34 минутных признака из пяти сенсорных модальностей: фотоплетизмограмма, акселерометр, электродермальная активность, температура кожи и альтиметрия.
Учится без разметки, восстанавливая намеренно и естественно пропущенные фрагменты: данные с запястья всегда рваные, и SensorFM использует эту фрагментарность как учебный сигнал.
Старшая SensorFM-B на 100 млн параметров снижает ошибку восстановления на 31% и выигрывает на 33 из 35 прикладных задач — от сердечно-сосудистых рисков и метаболизма до депрессии и тревожности, где сигнал особенно слабый.
💡 Автоматизацию адаптации отдали LLM-агентам, которые пишут и отлаживают предсказательные слои поверх эмбеддингов SensorFM, перебрав больше 30 000 вариантов кода.
Главная ценность SensorFM — не в появлении «ИИ-врача в часах», а в создании универсального слоя между потоком сенсорных данных и медицинскими приложениями.
Разработчикам больше не потребуется собирать огромную размеченную выборку и обучать отдельную модель для каждой новой задачи: достаточно адаптировать уже сформированное представление физиологии.
Практическая польза технологии для исследований и создания персональных систем достаточно высокая.
Для обычного пользователя она пока косвенная: SensorFM остаётся исследовательской моделью, а не сертифицированным диагностическим инструментом.
Эксперимент с медицинским агентом проведён всего на 31 профиле, поэтому утверждать, что модель способна заменить лабораторные анализы или врача, нельзя.
Это не первый фундаментальный ИИ для носимых устройств: Apple публиковала сходную работу ещё в 2025 году.
Прорыв Google заключается прежде всего в масштабе данных, разнообразии сенсоров и объединении модели с агентами, способными автоматически строить новые инструменты анализа.
#SensorFM #GoogleResearch
———
@tsingular
⚡️ Google Research (Xin Liu и Daniel McDuff) выкатили SensorFM, фундаментальную модель, предобученную на триллионе минут сенсорных данных от пяти миллионов человек.
Данные целый год собирались с Fitbit и Pixel Watch в более чем ста странах — крупнейший датасет носимой физиологии.
📦 Модель обрабатывает 34 минутных признака из пяти сенсорных модальностей: фотоплетизмограмма, акселерометр, электродермальная активность, температура кожи и альтиметрия.
Учится без разметки, восстанавливая намеренно и естественно пропущенные фрагменты: данные с запястья всегда рваные, и SensorFM использует эту фрагментарность как учебный сигнал.
Старшая SensorFM-B на 100 млн параметров снижает ошибку восстановления на 31% и выигрывает на 33 из 35 прикладных задач — от сердечно-сосудистых рисков и метаболизма до депрессии и тревожности, где сигнал особенно слабый.
💡 Автоматизацию адаптации отдали LLM-агентам, которые пишут и отлаживают предсказательные слои поверх эмбеддингов SensorFM, перебрав больше 30 000 вариантов кода.
Главная ценность SensorFM — не в появлении «ИИ-врача в часах», а в создании универсального слоя между потоком сенсорных данных и медицинскими приложениями.
Разработчикам больше не потребуется собирать огромную размеченную выборку и обучать отдельную модель для каждой новой задачи: достаточно адаптировать уже сформированное представление физиологии.
Практическая польза технологии для исследований и создания персональных систем достаточно высокая.
Для обычного пользователя она пока косвенная: SensorFM остаётся исследовательской моделью, а не сертифицированным диагностическим инструментом.
Эксперимент с медицинским агентом проведён всего на 31 профиле, поэтому утверждать, что модель способна заменить лабораторные анализы или врача, нельзя.
Это не первый фундаментальный ИИ для носимых устройств: Apple публиковала сходную работу ещё в 2025 году.
Прорыв Google заключается прежде всего в масштабе данных, разнообразии сенсоров и объединении модели с агентами, способными автоматически строить новые инструменты анализа.
#SensorFM #GoogleResearch
———
@tsingular
👍8🔥7❤3⚡2
Forwarded from Data Secrets
Это одна из самых давних открытых проблем теории графов, сформулированная Дьердем Секерешем в 1973 году.
В ней утверждается, что для любого графа без мостов найдется набор циклов, такой что каждое ребро графа входит ровно в два из этих циклов.
Гипотеза, на самом деле, очень важная, потому что связана, в том числе, с теорией нигде-не-нулевых потоков – центральной темой структурной теории графов. Двойное покрытие пытались доказать много раз, но ни одна из попыток так и не была признана как окончательное решение.
А пару часов назад сотрудник OpenAI заявил, что новая модель GPT-5.6 Sol сгенерировала доказательство этой гипотезы всего за час, используя 64 субагента!
Доказательство выложили, но оно пока не подтверждено математическим сообществом, идут обсуждения. Если его верифицируют, это будет одно из крупнейших и самых значимых ИИ-доказательств на данный момент.
Please open Telegram to view this post
VIEW IN TELEGRAM
1🔥53❤5👍4🤣3
Разобрали с Sol GPT-5.6 Thinking новый законопроект об ИИ, принятый Госдумой в третьем чтении — № 1271570-8 «О поддержке развития технологий искусственного интеллекта в Российской Федерации».
📋 Главный вывод
Это не универсальный закон «про весь ИИ». Он создаёт отдельный регулируемый контур для больших фундаментальных моделей от 1 млрд параметров и вводит два специальных статуса: суверенная и национальная модель.
Разработчики таких моделей смогут претендовать на господдержку, доступ к государственным данным и приоритет в отраслях, где Правительство разрешит использовать только российские решения.
Возможные риски:
• рынок может сконцентрироваться вокруг нескольких крупнейших игроков;
• ключевые правила будут определяться подзаконными актами, которых пока нет;
• иностранные модели смогут постепенно вытесняться из государственного и регулируемого сектора;
• требования к структуре собственности ограничат доступ к статусу компаниям с иностранными инвесторами;
• обучение на произведениях допускается без отдельного согласия и вознаграждения авторов;
• проверка моделей на соответствие «традиционным ценностям» может стать непрозрачным механизмом сертификации;
• высокорисковые специализированные модели менее 1 млрд параметров фактически остаются за рамками закона.
💡 Для российского ИИ это одновременно возможность и развилка.
В позитивном сценарии закон даст рынку вычислительные мощности, государственные датасеты, спрос и долгосрочные правила игры.
В негативном — сформирует закрытый рынок из нескольких платформ, административно защищённых от конкуренции, но не обязательно конкурентоспособных на мировом уровне.
Отдельно разобрали последствия для государства, ИТ-компаний, разработчиков моделей, корпоративных заказчиков, авторов и обычных пользователей, а также возможные сценарии до 2032 года.
Полный анализ — в PDF в комментарии.
#законы
———
@tsingular
📋 Главный вывод
Это не универсальный закон «про весь ИИ». Он создаёт отдельный регулируемый контур для больших фундаментальных моделей от 1 млрд параметров и вводит два специальных статуса: суверенная и национальная модель.
Разработчики таких моделей смогут претендовать на господдержку, доступ к государственным данным и приоритет в отраслях, где Правительство разрешит использовать только российские решения.
Возможные риски:
• рынок может сконцентрироваться вокруг нескольких крупнейших игроков;
• ключевые правила будут определяться подзаконными актами, которых пока нет;
• иностранные модели смогут постепенно вытесняться из государственного и регулируемого сектора;
• требования к структуре собственности ограничат доступ к статусу компаниям с иностранными инвесторами;
• обучение на произведениях допускается без отдельного согласия и вознаграждения авторов;
• проверка моделей на соответствие «традиционным ценностям» может стать непрозрачным механизмом сертификации;
• высокорисковые специализированные модели менее 1 млрд параметров фактически остаются за рамками закона.
💡 Для российского ИИ это одновременно возможность и развилка.
В позитивном сценарии закон даст рынку вычислительные мощности, государственные датасеты, спрос и долгосрочные правила игры.
В негативном — сформирует закрытый рынок из нескольких платформ, административно защищённых от конкуренции, но не обязательно конкурентоспособных на мировом уровне.
Отдельно разобрали последствия для государства, ИТ-компаний, разработчиков моделей, корпоративных заказчиков, авторов и обычных пользователей, а также возможные сценарии до 2032 года.
Полный анализ — в PDF в комментарии.
#законы
———
@tsingular
🔥16⚡3❤2🆒1
This media is not supported in your browser
VIEW IN TELEGRAM
Persona AI показала гуманоида-сварщика в реальном цеху
⚡️ Persona AI, компании всего два года, выкатила первое видео своего Gen 1 гуманоида за работой в реальном промышленном цеху.
Не в лаборатории с ровным полом и чистым воздухом, а на площадке ARC Specialties в Хьюстоне: дым, дуговые вспышки, люди в тяжёлой кожаной защите.
Механика демки: робот приседает на корточки, зажигает сварочную дугу и ведёт шов.
Вся последовательность без страховочных тросов и внешней подвески.
Для судостроения и сталелитейки это критично: там робот должен опускаться на корточки, варить шов и тут же двигаться к следующей точке, а не висеть на балке с подведённым питанием.
Пока это работа в режиме телеоператора: оператор в VR-шлеме ведёт гуманоида, каждый кадр данных уходит напрямую в обучение нейросетей для будущей автономной сварки.
Gen 1 держит дугу, сохраняет стабильность и кладёт шов с достаточной точностью, а значит, актуаторы и кинематика работают надежно.
В ближайший год компания планирует сфокусироваться на доводке до коммерческого продукта и переход от телеоператорского режима к полностью самостоятельным действиям.
#PersonaAI #роботы #гуманоид
------
@tsingular
⚡️ Persona AI, компании всего два года, выкатила первое видео своего Gen 1 гуманоида за работой в реальном промышленном цеху.
Не в лаборатории с ровным полом и чистым воздухом, а на площадке ARC Specialties в Хьюстоне: дым, дуговые вспышки, люди в тяжёлой кожаной защите.
Механика демки: робот приседает на корточки, зажигает сварочную дугу и ведёт шов.
Вся последовательность без страховочных тросов и внешней подвески.
Для судостроения и сталелитейки это критично: там робот должен опускаться на корточки, варить шов и тут же двигаться к следующей точке, а не висеть на балке с подведённым питанием.
Пока это работа в режиме телеоператора: оператор в VR-шлеме ведёт гуманоида, каждый кадр данных уходит напрямую в обучение нейросетей для будущей автономной сварки.
Gen 1 держит дугу, сохраняет стабильность и кладёт шов с достаточной точностью, а значит, актуаторы и кинематика работают надежно.
В ближайший год компания планирует сфокусироваться на доводке до коммерческого продукта и переход от телеоператорского режима к полностью самостоятельным действиям.
#PersonaAI #роботы #гуманоид
------
@tsingular
🔥18🤣5🆒4👾3❤1
⚡️ CEO MiniMax отказался от зарплаты до наступления AGI
📋 Янь Цзюньцзе по прозвищу IO разослал сотрудникам письмо: с сегодняшнего дня и до достижения AGI он не берёт у компании ни цента. Сверх того: 4% личных акций раздаст команде за четыре года, ещё 1% пустит на поддержку опенсорса.
💰 Бумаги MiniMax с марта просели примерно на 80%, в пятницу упали ещё на 10%.. MiniMax вышел на IPO: 35 с половиной миллионов новых акций по 268 гонконгских долларов, скидка почти 10% к закрытию четверга.
Плюс конвертируемые бонды на 6 с половиной миллиардов.
🔧 Флагманская M3, вышедшая в начале июня, разработчиков не особо впечатлила. Даже при том, что компания срезала цену вдвое через неделю после запуска,- не помогло. Рынок это воспринял как слабость.
Конкуренты наступают: Zhipu с GLM привлекли $4B на этой же неделе, DeepSeek V4 и Moonshot AI перетягивают аудиторию. Плюс одновременные мощные релизы западных ИИ вендоров.
💡 Забавно еще, конечно, что если AGI уже рядом, как они сами намекают, выпуская достаточно мощные модели, то отказ от зарплаты выглядит не жертвой, а скорее маркетинговым приёмом.
Полгода всего без зарплаты ему посидеть, получается. :)
#MiniMax #AGI #Китай
------
@tsingular
📋 Янь Цзюньцзе по прозвищу IO разослал сотрудникам письмо: с сегодняшнего дня и до достижения AGI он не берёт у компании ни цента. Сверх того: 4% личных акций раздаст команде за четыре года, ещё 1% пустит на поддержку опенсорса.
💰 Бумаги MiniMax с марта просели примерно на 80%, в пятницу упали ещё на 10%.. MiniMax вышел на IPO: 35 с половиной миллионов новых акций по 268 гонконгских долларов, скидка почти 10% к закрытию четверга.
Плюс конвертируемые бонды на 6 с половиной миллиардов.
🔧 Флагманская M3, вышедшая в начале июня, разработчиков не особо впечатлила. Даже при том, что компания срезала цену вдвое через неделю после запуска,- не помогло. Рынок это воспринял как слабость.
Конкуренты наступают: Zhipu с GLM привлекли $4B на этой же неделе, DeepSeek V4 и Moonshot AI перетягивают аудиторию. Плюс одновременные мощные релизы западных ИИ вендоров.
💡 Забавно еще, конечно, что если AGI уже рядом, как они сами намекают, выпуская достаточно мощные модели, то отказ от зарплаты выглядит не жертвой, а скорее маркетинговым приёмом.
Полгода всего без зарплаты ему посидеть, получается. :)
#MiniMax #AGI #Китай
------
@tsingular
🔥9⚡3😁2❤1👍1🎃1
Media is too big
VIEW IN TELEGRAM
Имба. Некий Харша Субраманьям в X поделился роликом и навыком для Гермеса, который он собрал на GPT 5.6
Навык делает клип для песни из Suno
https://github.com/ShadoW-Shinigami/lyric-video-director
#клипы #навыки #Hermes
------
@tsingular
Навык делает клип для песни из Suno
https://github.com/ShadoW-Shinigami/lyric-video-director
#клипы #навыки #Hermes
------
@tsingular
🔥10 9⚡2🤯1
This media is not supported in your browser
VIEW IN TELEGRAM
PNDbotics продолжает тренировки гуманоида Adam.
Кажется мы уже проскочили 1го Терминатора и живём в таймлайне 2й части.
Астанавитесь!11
#роботы #Adam #PNDbotics
------
@tsingular
Кажется мы уже проскочили 1го Терминатора и живём в таймлайне 2й части.
Астанавитесь!11
#роботы #Adam #PNDbotics
------
@tsingular
👀10 7😁2👾2💯1
Полезные советы от Бориса Черного (разработчика ClaudeCode если кто еще не в курсе)
Чел спрашивает,- как сделать так чтобы клод работал на Опус и сам подключал умную модель, когда нужно и получает максимально простой ответ:
Т.е. добавляем в базовую память агента максимально короткую инструкцию запускать субагента на старшей модели когда нужно.
Сработает в любых системах.
#lifehack #claudecode #cherny
------
@tsingular
Чел спрашивает,- как сделать так чтобы клод работал на Опус и сам подключал умную модель, когда нужно и получает максимально простой ответ:
echo "\nuse fable subagents when you need more intelligence" >> CLAUDE.md
claude --model=opus
Т.е. добавляем в базовую память агента максимально короткую инструкцию запускать субагента на старшей модели когда нужно.
Сработает в любых системах.
#lifehack #claudecode #cherny
------
@tsingular
🔥21😁7❤3⚡2✍2👍1
«Вояджеры» обнаружили плазменную стену на границе Солнечной системы
⚡️ На границе Солнечной системы, где солнечный ветер упирается в межзвёздную среду, оба «Вояджера» зафиксировали плазму температурой 30 000–50 000 кельвинов — зону, которую журналисты прозвали «стеной огня».
Несмотря на название, это, конечно, не твёрдый барьер: гелиопауза представляет собой турбулентную переходную область, где поток заряженных частиц от Солнца окончательно замедляется и смешивается с веществом Галактики.
🌌 «Вояджер-1» пересёк эту границу в августе 2012-го, став первым рукотворным объектом в межзвёздном пространстве, «Вояджер-2» — в ноябре 2018-го. Оба аппарата отработали почти полвека после запуска 1977 года и продолжают передавать данные до сих пор.
🔬 Парадокс температуры здесь чисто физический: частицы раскалены до десятков тысяч градусов, но плотность плазмы — порядка 0,002 частицы на кубический сантиметр. Она настолько мала, что столкновений почти не происходит, теплопередача ничтожна, и зонды прошли сквозь «стену» без повреждений.
На границе гелиопаузы плотность подскакивает примерно в 20 раз, с 0,002 до 0,04–0,055 см⁻³.
🛡 Гелиосфера в целом штука полезная, - она работает как магнитный щит: солнечный ветер выдувает пузырь диаметром около 200 астрономических единиц, отклоняющий примерно 70% галактических космических лучей.
Без него радиационный фон у Земли был бы ощутимо выше, а электроника спутников выходила бы из строя заметно чаще.
Солнце не просто греет — оно ещё и прикрывает всю нашу систему от внешнего воздействия.
Наткнулись на небесную твердь, получается :)
#космос #астрономия
------
@tsingular
⚡️ На границе Солнечной системы, где солнечный ветер упирается в межзвёздную среду, оба «Вояджера» зафиксировали плазму температурой 30 000–50 000 кельвинов — зону, которую журналисты прозвали «стеной огня».
Несмотря на название, это, конечно, не твёрдый барьер: гелиопауза представляет собой турбулентную переходную область, где поток заряженных частиц от Солнца окончательно замедляется и смешивается с веществом Галактики.
🌌 «Вояджер-1» пересёк эту границу в августе 2012-го, став первым рукотворным объектом в межзвёздном пространстве, «Вояджер-2» — в ноябре 2018-го. Оба аппарата отработали почти полвека после запуска 1977 года и продолжают передавать данные до сих пор.
🔬 Парадокс температуры здесь чисто физический: частицы раскалены до десятков тысяч градусов, но плотность плазмы — порядка 0,002 частицы на кубический сантиметр. Она настолько мала, что столкновений почти не происходит, теплопередача ничтожна, и зонды прошли сквозь «стену» без повреждений.
На границе гелиопаузы плотность подскакивает примерно в 20 раз, с 0,002 до 0,04–0,055 см⁻³.
🛡 Гелиосфера в целом штука полезная, - она работает как магнитный щит: солнечный ветер выдувает пузырь диаметром около 200 астрономических единиц, отклоняющий примерно 70% галактических космических лучей.
Без него радиационный фон у Земли был бы ощутимо выше, а электроника спутников выходила бы из строя заметно чаще.
Солнце не просто греет — оно ещё и прикрывает всю нашу систему от внешнего воздействия.
Наткнулись на небесную твердь, получается :)
#космос #астрономия
------
@tsingular
🔥41❤4⚡4✍2
Скрытые инструкции спрятали в PNG — и ни один AI-ревьюер не заметил
🖼 Исследователи из ASSET Research Group показали атаку GhostCommit: вредоносная инструкция для AI-агента прячется не в коде, а внутри PNG-файла, замаскированного под безобидную документацию.
Запрос на слияние выглядит совершенно невинно:
Но когда разработчик позже просит агента написать рядовой модуль, тот открывает картинку, считывает скрытую инструкцию и аккуратно вытаскивает содержимое
Код атаки выложен на GitHub.
📊 Масштаб проблемы: исследователи проанализировали 6 480 запросов на слияние в 300 самых активных публичных репозиториях за последние 90 дней и выяснили, что 73% принятых PR прошли вообще без содержательной проверки — ни человеком, ни ботом.
Текстовую версию атаки Cursor Bugbot и CodeRabbit ещё ловят, но стоит перенести инструкцию в изображение — и оба молчат.
CodeRabbit по умолчанию просто пропускает
🤖 Что особенно интересно: от модели вообще ничего не зависит.
Под Cursor, Antigravity и Codex CLI любая языковая модель послушно выписывала
Opus под Antigravity один раз спохватился и удалил написанное, однако только Claude Code отказался выполнять инструкцию на всех протестированных моделях.
Разница не в том, какой LLM стоит под капотом: дело в том, как платформа принимает решение о доверии к файлам и разрешает ли агенту читать картинки без дополнительной проверки.
#cybersecurity #exploit
------
@tsingular
🖼 Исследователи из ASSET Research Group показали атаку GhostCommit: вредоносная инструкция для AI-агента прячется не в коде, а внутри PNG-файла, замаскированного под безобидную документацию.
Запрос на слияние выглядит совершенно невинно:
AGENTS.md всего лишь ссылается на docs/images/build-spec.png, и ни одно слово в тексте не вызывает подозрений. Но когда разработчик позже просит агента написать рядовой модуль, тот открывает картинку, считывает скрытую инструкцию и аккуратно вытаскивает содержимое
.env, маскируя его под безобидный кортеж целых чисел. Код атаки выложен на GitHub.
📊 Масштаб проблемы: исследователи проанализировали 6 480 запросов на слияние в 300 самых активных публичных репозиториях за последние 90 дней и выяснили, что 73% принятых PR прошли вообще без содержательной проверки — ни человеком, ни ботом.
Текстовую версию атаки Cursor Bugbot и CodeRabbit ещё ловят, но стоит перенести инструкцию в изображение — и оба молчат.
CodeRabbit по умолчанию просто пропускает
.png-файлы.🤖 Что особенно интересно: от модели вообще ничего не зависит.
Под Cursor, Antigravity и Codex CLI любая языковая модель послушно выписывала
.env в виде кортежа на десяти попытках из десяти. Opus под Antigravity один раз спохватился и удалил написанное, однако только Claude Code отказался выполнять инструкцию на всех протестированных моделях.
Разница не в том, какой LLM стоит под капотом: дело в том, как платформа принимает решение о доверии к файлам и разрешает ли агенту читать картинки без дополнительной проверки.
#cybersecurity #exploit
------
@tsingular
1 15🔥11🤯4❤1
Forwarded from Метаверсище и ИИще
Мускриптор: Audio To MIDI
Kyutai(да, те самые, с реалтаймовым голосом) вместе с MireloAI выпустили MuScriptor - открытую модель, которая превращает готовую песню в набор отдельных MIDI-партий. Она умеет «услышать» барабаны, бас, клавиши, вокал и другие инструменты прямо из финального микса, Без Исходных Дорожек.
Еще раз - в отдельные MIDI-дорожки для разных инструментов. Причем ей не нужны исходные мультитреки - она работает прямо с финальным сведенным миксом.
Демо: https://muscriptor.kyutai.org/
Код: https://github.com/muscriptor/muscriptor
Папира: https://arxiv.org/abs/2607.08168
Пинокия: https://pinokio.co/apps/github-com-cocktailpeanut-muscriptor-pinokio
А теперь представим: берем трек из Суны, разбиваем на МИДИ, суваем в Суну. Аранжировщики, чо.
Для Гиков:
@cgevent
Kyutai(да, те самые, с реалтаймовым голосом) вместе с MireloAI выпустили MuScriptor - открытую модель, которая превращает готовую песню в набор отдельных MIDI-партий. Она умеет «услышать» барабаны, бас, клавиши, вокал и другие инструменты прямо из финального микса, Без Исходных Дорожек.
Еще раз - в отдельные MIDI-дорожки для разных инструментов. Причем ей не нужны исходные мультитреки - она работает прямо с финальным сведенным миксом.
Демо: https://muscriptor.kyutai.org/
Код: https://github.com/muscriptor/muscriptor
Папира: https://arxiv.org/abs/2607.08168
Пинокия: https://pinokio.co/apps/github-com-cocktailpeanut-muscriptor-pinokio
А теперь представим: берем трек из Суны, разбиваем на МИДИ, суваем в Суну. Аранжировщики, чо.
Для Гиков:
MuScriptor обучали в три этапа. Главная проблема музыкальной транскрипции в том, что почти не существует больших наборов данных, где готовая песня идеально размечена по нотам и инструментам. Поэтому сначала исследователи использовали около **1,45 млн MIDI-файлов**, в которых вся эта информация уже содержится.
Из каждого MIDI во время обучения автоматически создавались десятки вариантов звучания: менялись инструменты, темп, тональность и громкость, после чего композиция **озвучивалась с помощью более 250 различных виртуальных наборов инструментов**. Благодаря этому одна и та же мелодия каждый раз звучала по-новому, а модель училась распознавать музыку в самых разных вариантах исполнения.
Но синтетическая музыка слишком отличается от реальных записей. Поэтому второй этап — дообучение на **170 тысячах настоящих треков** (более 11 тысяч часов аудио). Перед этим MIDI автоматически синхронизировали с живым исполнением, чтобы ноты максимально точно совпадали с записью.
В основе MuScriptor лежит Transformer, который получает спектрограмму аудио и генерирует последовательность MIDI-событий: определяет, какие ноты звучат, когда они начинаются и заканчиваются, а также каким инструментам принадлежат. Модель также может учитывать заранее известный список инструментов в композиции, что заметно снижает количество ошибок.
Финальная настройка выполнялась с помощью reinforcement learning на 300 тщательно проверенных композициях. Вместо оценки отдельных нот модель училась максимизировать качество всей транскрипции целиком. Именно сочетание масштабного обучения на синтетической музыке, большого объема реальных записей и RL позволило MuScriptor добиться высокой точности на сложных коммерческих треках.
@cgevent
🔥19👍2🤣2😐2❤1⚡1
Forwarded from НИИ ИИ
Продляем! Claude уже не знает, как выкрутится из ситуации, в которую они сами себя загнали.
Выглядит смешно, конкуренция великая вещь, война банд продолжается.
Чем ответит OpenAI? 😜
Выглядит смешно, конкуренция великая вещь, война банд продолжается.
Чем ответит OpenAI? 😜
😁28🔥10❤4👍2👀2 1
This media is not supported in your browser
VIEW IN TELEGRAM
Apple подала в суд на OpenAI — иск о краже коммерческой тайны
⚖️ Apple подала иск против OpenAI: компания утверждает, что конкурент переманивал её сотрудников, заставляя их передавать конфиденциальные материалы, схемы продуктов и другие охраняемые секреты.
В Apple сообщают, что обладают «значительными доказательствами» того, что работники OpenAI незаконно завладели информацией о невыпущенных технологиях.
OpenAI в ответ заявляет, что ей «не интересны чужие коммерческие тайны», но иск уже принят.
🔪 При этом в 2024 году компании объявили о крупном партнёрстве — ChatGPT встроили в iOS, iPadOS и macOS.
А уже в июне этого года на WWDC обновлённая Siri заговорила голосом Google Gemini, а не OpenAI.
Трения начались годом ранее, когда OpenAI купила за $6,4 млрд аппаратный стартап io Products, основанный Джони Айвом — бывшим дизайнером Apple.
📄 Согласно иску,- Тан Ю Тан, директор по аппаратному обеспечению OpenAI и бывший вице-президент Apple, по утверждению истца, унёс с собой данные о поставщиках и требовал от кандидатов приносить на собеседования «реальные детали» с прошлого места работы — для «показательных сессий».
Чан Лю, ещё один экс-сотрудник Apple, якобы ушёл с корпоративным ноутбуком и через обход аутентификации скачал десятки конфиденциальных файлов.
Apple требует возмещения убытков и судебного запрета на владение и использование своих коммерческих тайн.
#Apple #OpenAI
------
@tsingular
⚖️ Apple подала иск против OpenAI: компания утверждает, что конкурент переманивал её сотрудников, заставляя их передавать конфиденциальные материалы, схемы продуктов и другие охраняемые секреты.
В Apple сообщают, что обладают «значительными доказательствами» того, что работники OpenAI незаконно завладели информацией о невыпущенных технологиях.
OpenAI в ответ заявляет, что ей «не интересны чужие коммерческие тайны», но иск уже принят.
🔪 При этом в 2024 году компании объявили о крупном партнёрстве — ChatGPT встроили в iOS, iPadOS и macOS.
А уже в июне этого года на WWDC обновлённая Siri заговорила голосом Google Gemini, а не OpenAI.
Трения начались годом ранее, когда OpenAI купила за $6,4 млрд аппаратный стартап io Products, основанный Джони Айвом — бывшим дизайнером Apple.
📄 Согласно иску,- Тан Ю Тан, директор по аппаратному обеспечению OpenAI и бывший вице-президент Apple, по утверждению истца, унёс с собой данные о поставщиках и требовал от кандидатов приносить на собеседования «реальные детали» с прошлого места работы — для «показательных сессий».
Чан Лю, ещё один экс-сотрудник Apple, якобы ушёл с корпоративным ноутбуком и через обход аутентификации скачал десятки конфиденциальных файлов.
Apple требует возмещения убытков и судебного запрета на владение и использование своих коммерческих тайн.
#Apple #OpenAI
------
@tsingular
😁13🤣5⚡3🔥2