Тут на реддите кипиш — исследователи из Google research представили новую архитектуру нейросетей - Titans, объединяющую рекуррентные модели и механизм внимания. Авторы задаются вопросом, неужели Attention is all we need? В отличие от трансформеров, ограниченных фиксированной длиной контекста, Titans используют нейросетевую долгосрочную память, что позволяет использовать её адаптивно и забывать ненужные данные. В тестах Titans превзошли трансформеры, эффективно обрабатывая контекст более 2 млн токенов с высокой скоростью и точностью, особенно в задачах поиска скрытых данных.

В общем назревает битва Титанов vs Трансформеров, посмотрим кто в итоге победит✨ 

Научная статья

Я тут в Suno V4 залипал, настроение #90th, #dreamcore, #eerie, #sad, #synthetic создавал, Sora мне low-poly gif воображал и всё это я даже зачем-то на youtube заливал..👨🏼‍🎤

Эмм MiniMax (да которые в видео) выпустили серию моделей MiniMax-01 с открытым исходным кодом, включая MiniMax-Text-01 с контекстным окном в 4 миллиона токенов. Модель использует гибридную архитектуру, сочетающую Lightning Attention, Softmax Attention и Mixture-of-Experts (MoE). Это позволяет обрабатывать и поддерживать огромные объемы информации, что может революционизировать AI-ассистентов и мультиагентные системы. (занавес)

Блог тут

Юзаем тут

Гитхаб тут

Как я завидую современным детям 😭 хотя учиться никогда не поздно, особенно в такой ИИнтерактивной форме 🎓

https://www.synthesis.com/

Китайская компания DeepSeek представила полноценную модель конкурента OpenAI - о1 под названием R1 (раньше был Light)

Доступна бесплатно на их сайте если выбрать режим Deep Think (доступно 50 обращений в день)

https://chat.deepseek.com/

модель выложили на github и huggingface, также выложили 6 дистиллированных моделей, созданных на основе DeepSeek-R1 (от 1.5B до 70B параметров) 32B-модель превзошла OpenAI-o1-mini в бенчмарках, установив новый рекорд для компактных ИИ👌

OpenAI, SoftBank и Oracle запускают проект Stargate для строительства ИИ-дата-центров в США

Компании OpenAI, SoftBank и Oracle объявили о создании совместного проекта Stargate стоимостью 500 млрд долл, направленного на строительство сети дата−центров для ИИ в США. Первый объект появится в Техасе, к 2029 году планируется развернуть до 20 центров. Проект обещает создать сотни тысяч рабочих мест и укрепить лидерство США в сфере ИИ.
В пресс-конференции в Белом доме участвовали CEO OpenAI Сэм Альтман, глава SoftBank Масаёси Сон и сооснователь Oracle Ларри Эллисон. Партнерами также выступят Microsoft, Nvidia, Arm и фонд MGX. OpenAI разрабатывает собственные ИИ-чипы с Broadcom и TSMC, которые могут быть готовы к 2026 году.
Stargate позиционируется как стратегическая инициатива для национальной безопасности и реиндустриализации США. Ранее The Information сообщал о планах Microsoft и OpenAI по созданию суперкомпьютера, что может быть связано с проектом.

Hello SkyNet 🌚

Гугл обновили модель Gemini 2.0 flash thinking — стала умнее и контекст увеличился с 32к до 1 млн токенов✨

Доступна в AI studio с впн США

А китайские роботы ничего так, эволюционируют (но лучше не представлять, что при этом он ещё в вас целится из прикреплённого m16🌚)

https://www.deeprobotics.cn/en/wap/deeproboticslynx.html

Представлен "Последний экзамен человечества" от CAIS и Scale AI: новый бенчмарк из 3000 сложнейших вопросов по более чем 100 предметам. Созданный почти 1000 экспертами из 500+ учреждений в 50 странах, HLE призван оценить предел возможностей ИИ, поскольку существующие тесты (MMLU) покорились моделям с точностью выше 90%. Первые результаты шокируют: даже GPT-4o показал всего 3.3% точности, а лучший результат – 9.4% принадлежит китайской R1. Организаторы считают HLE ключевым инструментом для измерения прогресса ИИ и прогнозируют достижение 50% точности к концу 2025 года. Издания New York Times и Reuters уже назвали HLE важным этапом в развитии искусственного интеллекта👌

Делаем ставки как быстро этот "экзамен" покорят нейронки

https://agi.safe.ai/

А так выглядит процесс строительства цифрового божества🌐 (проект Stargate) - оказывается первая фаза уже готова✨

источник

OpenAI представят оператора (агентов), который сможет выполнять ваши задачи онлайн (не на компе) за 200уе в мес (ждём китайский аналог через пару дней)

https://youtu.be/CSE77wAdDLg

Ого а ещё Сэм раздаёт всем бесплатный доступ к o3-mini

Полноценная короткометражка, полностью созданная в Veo2, ну вы поняли, что нас ждёт революция в кинематографе...🎬 Скорее бы дали доступ, я бы по-брутальнее что нибудь нагенерил😈

Автор тут