Forwarded from Институт AIRI
Мы выложили в открытый доступ OmniFusion 1.1. — первую в России мультимодальную модель искусственного интеллекта 🚀
🔥 О модели
OmniFusion 1.1. — это передовая мультимодальная модель искусственного интеллекта, предназначенная для расширения возможностей традиционных систем обработки языка за счет интеграции дополнительных модальностей данных, например, изображений, а в перспективе — аудио, 3D- и видеоконтента. Модель – SoTA на ряде бенчмарков (среди моделей схожего размера) и, более того, модель хорошо справляется со сложными задачами и понимает русский язык.
🔖 Открытый код
В этот раз мы выкладываем модель в открытый доступ! Делимся ссылкой на GitHub и Technical Report на arXiv. Модель можно использовать как в некоммерческой, так и в коммерческой деятельности.
🌐 Статья на Хабр
В статье мы рассказали об особенностях модели, процессе обучения и примерах ее использования. Также подсветили архитектуру, проделанные эксперименты как в части архитектурных трюков, так и в работе с данными. А еще собрали интересные кейсы использования на английском и русском языках.
На Hugging Face статья про архитектуру OmniFusion уже на первом месте в списке daily papers 🔥
OmniFusion 1.1. — это передовая мультимодальная модель искусственного интеллекта, предназначенная для расширения возможностей традиционных систем обработки языка за счет интеграции дополнительных модальностей данных, например, изображений, а в перспективе — аудио, 3D- и видеоконтента. Модель – SoTA на ряде бенчмарков (среди моделей схожего размера) и, более того, модель хорошо справляется со сложными задачами и понимает русский язык.
В этот раз мы выкладываем модель в открытый доступ! Делимся ссылкой на GitHub и Technical Report на arXiv. Модель можно использовать как в некоммерческой, так и в коммерческой деятельности.
В статье мы рассказали об особенностях модели, процессе обучения и примерах ее использования. Также подсветили архитектуру, проделанные эксперименты как в части архитектурных трюков, так и в работе с данными. А еще собрали интересные кейсы использования на английском и русском языках.
На Hugging Face статья про архитектуру OmniFusion уже на первом месте в списке daily papers 🔥
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
PowerShell-скрипт, созданный ИИ, распространяет малварь
Группа хакеров TA547 (Scully Spider) использовала PowerShell-скрипт, вероятно, сгенерированный ИИ (ChatGPT, Gemini, CoPilot), для распространения малвари Rhadamanthys в Германии.
Скрипт содержит нехарактерные комментарии, схожие с генерируемыми ИИ.
ChatGPT-4 создал похожий скрипт с аналогичными переменными и комментариями.
Хакеры начали применять ИИ для персонализации фишинга, поиска уязвимостей, создания фишинговых страниц и других вредоносных действий.
Некоторые APT-группы также используют ИИ для повышения эффективности атак и скрытности.
#Hacking #Malware #ChatGPT
-------
@tsingular
Группа хакеров TA547 (Scully Spider) использовала PowerShell-скрипт, вероятно, сгенерированный ИИ (ChatGPT, Gemini, CoPilot), для распространения малвари Rhadamanthys в Германии.
Скрипт содержит нехарактерные комментарии, схожие с генерируемыми ИИ.
ChatGPT-4 создал похожий скрипт с аналогичными переменными и комментариями.
Хакеры начали применять ИИ для персонализации фишинга, поиска уязвимостей, создания фишинговых страниц и других вредоносных действий.
Некоторые APT-группы также используют ИИ для повышения эффективности атак и скрытности.
#Hacking #Malware #ChatGPT
-------
@tsingular
Развитие ИИ опережает оценку рисков от ИИ
Скорость развития ИИ значительно опережает методы оценки производительности, точности и безопасности.
Миллиардные инвестиции подстегнули гонку технологий ИИ и сделали устаревшими прежние критерии оценки прогресса.
Общедоступные бенчмарки и системы оценки не успевают за сложностью современных моделей ИИ.
Оценка безопасности и эффективности ИИ стала сложной задачей для специалистов по тестированию.
Компаниям рекомендуется создавать внутренние тесты и полагаться на человеческую оценку наряду с бенчмарками.
Правительства также сталкиваются с проблемами управления рисками новейших моделей ИИ.
В таких условиях может возникнуть желанием вообще все запретить, а потом разбираться.
Но рынок уже не остановить.
#AI #risks #benchmarks
-------
@tsingular
Скорость развития ИИ значительно опережает методы оценки производительности, точности и безопасности.
Миллиардные инвестиции подстегнули гонку технологий ИИ и сделали устаревшими прежние критерии оценки прогресса.
Общедоступные бенчмарки и системы оценки не успевают за сложностью современных моделей ИИ.
Оценка безопасности и эффективности ИИ стала сложной задачей для специалистов по тестированию.
Компаниям рекомендуется создавать внутренние тесты и полагаться на человеческую оценку наряду с бенчмарками.
Правительства также сталкиваются с проблемами управления рисками новейших моделей ИИ.
В таких условиях может возникнуть желанием вообще все запретить, а потом разбираться.
Но рынок уже не остановить.
#AI #risks #benchmarks
-------
@tsingular
Forwarded from CodeCamp
This media is not supported in your browser
VIEW IN TELEGRAM
Пост для тех, кому лень самостоятельно писать/дебажить код — в VSCode можно интегрировать ИИ-модель Command R+.
Пару слов про Command R+: это свежая модель аж на 104 миллиарда параметров от Cohere. По бенчмаркам уделывает самые первые версии GPT-4.
Теперь о том, как добавить её в IDE: регистрируемся тут, лутаем API-шку, добавляем в VSCode расширение CodeGPT, Cohere в качестве провайдера и вставляем API.
Не благодарите.
Пару слов про Command R+: это свежая модель аж на 104 миллиарда параметров от Cohere. По бенчмаркам уделывает самые первые версии GPT-4.
Теперь о том, как добавить её в IDE: регистрируемся тут, лутаем API-шку, добавляем в VSCode расширение CodeGPT, Cohere в качестве провайдера и вставляем API.
Не благодарите.
🔥1
Infini-attention: эффективное масштабирование трансформеров на бесконечные контексты
Исследователи предложили эффективный метод масштабирования GPT моделей на бесконечно длинные входные данные с ограниченными ресурсами 🚀
Ключевой компонент - новая техника внимания Infini-attention, объединяющая сжатую память, замаскированное локальное внимание и линейное внимание в одном блоке трансформера 🧩
Метод продемонстрировал эффективность на задачах с контекстами длиной до 1 миллиона последовательностей и обобщением книг до 500 тысяч последовательностей, используя модели на 1-8 миллиардов параметров 📚
Infini-attention вводит минимальные ограничения по памяти и позволяет быструю потоковую обработку для языковых моделей ⚡️
https://arxiv.org/abs/2404.07143
Теперь нужно железо, которое это вытащит
#Transformers #LanguageModels #Infiniattention
-------
@tsingular
Исследователи предложили эффективный метод масштабирования GPT моделей на бесконечно длинные входные данные с ограниченными ресурсами 🚀
Ключевой компонент - новая техника внимания Infini-attention, объединяющая сжатую память, замаскированное локальное внимание и линейное внимание в одном блоке трансформера 🧩
Метод продемонстрировал эффективность на задачах с контекстами длиной до 1 миллиона последовательностей и обобщением книг до 500 тысяч последовательностей, используя модели на 1-8 миллиардов параметров 📚
Infini-attention вводит минимальные ограничения по памяти и позволяет быструю потоковую обработку для языковых моделей ⚡️
https://arxiv.org/abs/2404.07143
Теперь нужно железо, которое это вытащит
#Transformers #LanguageModels #Infiniattention
-------
@tsingular
🔥1
LlamaIndex vs LangChain: сравнение ИИ-фреймворков
🦙 LlamaIndex - специализированный инструмент для улучшения взаимодействия между данными и LLM. Он упрощает индексацию и извлечение данных, что особенно полезно для поисковых приложений. LlamaIndex облегчает эффективную интеграцию данных и повышает производительность LLM для быстрого и точного доступа к структурированным данным.
⛓️ LangChain - гибкий фреймворк для разработки приложений, управляемых LLM оркестратором. Модульная конструкция и расширяемые компоненты позволяют создавать приложения, которые интеллектуально взаимодействуют с пользователями, используют внешние данные и выполняют сложные рабочие процессы. LangChain подходит для создания сложных и высокоадаптивных ИИ-приложений.
Короче - LlamaIndex для поиска, LangChain для сложных ИИ-приложений.
#LlamaIndex #LangChain #AI-frameworks
-------
@tsingular
🦙 LlamaIndex - специализированный инструмент для улучшения взаимодействия между данными и LLM. Он упрощает индексацию и извлечение данных, что особенно полезно для поисковых приложений. LlamaIndex облегчает эффективную интеграцию данных и повышает производительность LLM для быстрого и точного доступа к структурированным данным.
⛓️ LangChain - гибкий фреймворк для разработки приложений, управляемых LLM оркестратором. Модульная конструкция и расширяемые компоненты позволяют создавать приложения, которые интеллектуально взаимодействуют с пользователями, используют внешние данные и выполняют сложные рабочие процессы. LangChain подходит для создания сложных и высокоадаптивных ИИ-приложений.
Короче - LlamaIndex для поиска, LangChain для сложных ИИ-приложений.
#LlamaIndex #LangChain #AI-frameworks
-------
@tsingular
Salesforce Einstein интегрирует ИИ в продажи
Платформа Salesforce Einstein предлагает набор встроенных в CRM технологий ИИ для управления взаимоотношениями с клиентами.
Einstein объединяет данные, разработку и общие возможности ИИ для CRM, включая Copilot - CRM-ассистента с использованием разговорного ИИ.
Salesforce предлагает функции предиктивного ИИ и ИИ-аналитику для поддержки принятия решений, а также инструменты для создания собственных ИИ-моделей и копилотов.
Marketing AI использует генеративный ИИ для создания контента и предиктивный ИИ для оптимизации кампаний.
Sales AI предлагает функции ИИ для поддержки продаж.
Customer Service AI помогает создавать клиентские сервисы с ИИ-ассистентами и ботами.
Commerce AI оптимизирует электронную коммерцию с помощью ИИ-рекомендаций и анализа.
Data Cloud обеспечивает хранение и обработку данных для ИИ-операций в Salesforce.
SalesForce - менеджеров по продажам заменят первыми :)! 🤖💼
#Salesforce #Einstein #CRM
-------
@tsingular
Платформа Salesforce Einstein предлагает набор встроенных в CRM технологий ИИ для управления взаимоотношениями с клиентами.
Einstein объединяет данные, разработку и общие возможности ИИ для CRM, включая Copilot - CRM-ассистента с использованием разговорного ИИ.
Salesforce предлагает функции предиктивного ИИ и ИИ-аналитику для поддержки принятия решений, а также инструменты для создания собственных ИИ-моделей и копилотов.
Marketing AI использует генеративный ИИ для создания контента и предиктивный ИИ для оптимизации кампаний.
Sales AI предлагает функции ИИ для поддержки продаж.
Customer Service AI помогает создавать клиентские сервисы с ИИ-ассистентами и ботами.
Commerce AI оптимизирует электронную коммерцию с помощью ИИ-рекомендаций и анализа.
Data Cloud обеспечивает хранение и обработку данных для ИИ-операций в Salesforce.
SalesForce - менеджеров по продажам заменят первыми :)! 🤖💼
#Salesforce #Einstein #CRM
-------
@tsingular
This media is not supported in your browser
VIEW IN TELEGRAM
так работает Mixtral 8x22B на M3 Max, 128GB RAM с 4-bit квантизацией (4.5 токена в секунду)
#Mixtral #Apple #M3
———
@tsingular
#Mixtral #Apple #M3
———
@tsingular
🔥1
Forwarded from Ppprompt | Sexy AI Prompts & Experiments | by @ponchiknews
Уже успели заценить новую нейронку для генерации музыки и песен?
У SunoAI кажись появился нехилый такой конкурент. Udio генерит музыку и песни по промптам, а также может сама писать текст. Пока продукт в бете, можно бесплатно сгенерить 1200 треков длительностью 32 секунды.
Пробуйте и делитесь своими треками в комментах: https://www.udio.com/
@ppprompt
У SunoAI кажись появился нехилый такой конкурент. Udio генерит музыку и песни по промптам, а также может сама писать текст. Пока продукт в бете, можно бесплатно сгенерить 1200 треков длительностью 32 секунды.
Пробуйте и делитесь своими треками в комментах: https://www.udio.com/
@ppprompt
You.com добавил все последние модные модели!
Opus, Gemini 1.5 Pro, Command R+!
Го пробовать.
#youcom
------
@tsingular
Opus, Gemini 1.5 Pro, Command R+!
Го пробовать.
#youcom
------
@tsingular
❤1
AWS и NVIDIA развивают сотрудничество в области генеративного ИИ
AWS и NVIDIA расширяют 13-летнее партнерство в сфере облачных вычислений и ИИ.
AWS первой предложила GPU NVIDIA в публичном облаке и продолжает внедрять новейшие технологии.
Главы компаний обсудили предоставление разработчикам доступа к мощным генеративным ИИ-инструментам.
Анонсированы совместные инициативы:
- Инстансы на базе процессора NVIDIA Grace Blackwell
- Проект Ceiba - масштабируемый кластер для ИИ-исследований
AWS представила свои сервисы генеративного ИИ: Amazon Bedrock, PartyRock, Amazon Q и другие.
NVIDIA стала одним из первых участников новой программы AWS Generative AI Competency.
#AWS #NVIDIA #GenerativeAI
-------
@tsingular
AWS и NVIDIA расширяют 13-летнее партнерство в сфере облачных вычислений и ИИ.
AWS первой предложила GPU NVIDIA в публичном облаке и продолжает внедрять новейшие технологии.
Главы компаний обсудили предоставление разработчикам доступа к мощным генеративным ИИ-инструментам.
Анонсированы совместные инициативы:
- Инстансы на базе процессора NVIDIA Grace Blackwell
- Проект Ceiba - масштабируемый кластер для ИИ-исследований
AWS представила свои сервисы генеративного ИИ: Amazon Bedrock, PartyRock, Amazon Q и другие.
NVIDIA стала одним из первых участников новой программы AWS Generative AI Competency.
#AWS #NVIDIA #GenerativeAI
-------
@tsingular
🔥1
Sanctuary AI внедряет человекоподобных роботов на автозаводе Magna
Компания Sanctuary AI проводит пилотное внедрение своих человекоподобных роботов Phoenix на заводе европейского автопроизводителя Magna.
Magna производит автомобили для Mercedes, Jaguar, BMW и других брендов.
Компании Figure и Apptronik также тестируют своих роботов с BMW и Mercedes.
Magna инвестировала в Sanctuary AI в 2021 году, почти одновременно с анонсом человекоподобного робота от Илона Маска для заводов Tesla.
Робот Phoenix имеет рост 170 см, вес 70 кг и способен ходить на ногах.
Sanctuary AI особое внимание уделяет разработке ловких рук для выполнения сложных задач.
Пилот направлен на оценку улучшения стоимости и масштабируемости роботов с использованием возможностей Magna.
Человекоподобные роботы на автозаводах - новый тренд.
#SanctuaryAI #Magna #PhoenixRobot
-------
@tsingular
Компания Sanctuary AI проводит пилотное внедрение своих человекоподобных роботов Phoenix на заводе европейского автопроизводителя Magna.
Magna производит автомобили для Mercedes, Jaguar, BMW и других брендов.
Компании Figure и Apptronik также тестируют своих роботов с BMW и Mercedes.
Magna инвестировала в Sanctuary AI в 2021 году, почти одновременно с анонсом человекоподобного робота от Илона Маска для заводов Tesla.
Робот Phoenix имеет рост 170 см, вес 70 кг и способен ходить на ногах.
Sanctuary AI особое внимание уделяет разработке ловких рук для выполнения сложных задач.
Пилот направлен на оценку улучшения стоимости и масштабируемости роботов с использованием возможностей Magna.
Человекоподобные роботы на автозаводах - новый тренд.
#SanctuaryAI #Magna #PhoenixRobot
-------
@tsingular
Ray Kurzweil & Geoff Hinton Debate the Future of AI | EP #95
В свежем эпизоде подкаста, Питер Х. Даймандис модерирует дебаты между Рэем Курцвейлом и Джеффом Хинтоном, посвящённые будущему искусственного интеллекта (ИИ).
Обсуждение касается глубоких проблем и возможностей, которые ИИ может предложить человечеству.
Основным моментом дебатов является вопрос о том, сможет ли ИИ достичь уровня сознательности и как это повлияет на общество. Курцвейл и Хинтон разделились в мнениях по поводу темпов развития ИИ и его влияния на будущее труда и образования.
Они также обсудили важность этических рамок в разработке ИИ, чтобы обеспечить его безопасное внедрение в социальную сферу.
Диалог между этими ведущими экспертами подчёркивает необходимость глубоких исследований и размышлений о будущем, которое формируется нашими технологическими выборами сегодня.
#Kurzweil #FutureOfAI #TechDebates
-------
@tsingular
В свежем эпизоде подкаста, Питер Х. Даймандис модерирует дебаты между Рэем Курцвейлом и Джеффом Хинтоном, посвящённые будущему искусственного интеллекта (ИИ).
Обсуждение касается глубоких проблем и возможностей, которые ИИ может предложить человечеству.
Основным моментом дебатов является вопрос о том, сможет ли ИИ достичь уровня сознательности и как это повлияет на общество. Курцвейл и Хинтон разделились в мнениях по поводу темпов развития ИИ и его влияния на будущее труда и образования.
Они также обсудили важность этических рамок в разработке ИИ, чтобы обеспечить его безопасное внедрение в социальную сферу.
Диалог между этими ведущими экспертами подчёркивает необходимость глубоких исследований и размышлений о будущем, которое формируется нашими технологическими выборами сегодня.
#Kurzweil #FutureOfAI #TechDebates
-------
@tsingular
Эндрю Нг 🧠💻 назначен в Совет директоров Amazon
Доктор Эндрю Нг, ведущий эксперт в области ИИ, машинного обучения и онлайн-образования, назначен в Совет директоров Amazon с 9 апреля 2024 года.
Он является управляющим генеральным партнером AI Fund, поддерживающей предпринимателей в сфере ИИ, лидером образовательной компании DeepLearning.AI, основателем Landing AI (ПО для компьютерного зрения), председателем и соучредителем онлайн-платформы Coursera.
Богатый академический и практический опыт Нга, включая более 200 научных работ по машинному обучению, робототехнике и смежным областям, поможет Amazon в решении перспектив и проблем, связанных с развитием ИИ.
Мощное усиление! Привлечение светил ИИ в топ-менеджмент - 🦾
#AndrewNg #AmazonBoard #MachineLearning
-------
@tsingular
Доктор Эндрю Нг, ведущий эксперт в области ИИ, машинного обучения и онлайн-образования, назначен в Совет директоров Amazon с 9 апреля 2024 года.
Он является управляющим генеральным партнером AI Fund, поддерживающей предпринимателей в сфере ИИ, лидером образовательной компании DeepLearning.AI, основателем Landing AI (ПО для компьютерного зрения), председателем и соучредителем онлайн-платформы Coursera.
Богатый академический и практический опыт Нга, включая более 200 научных работ по машинному обучению, робототехнике и смежным областям, поможет Amazon в решении перспектив и проблем, связанных с развитием ИИ.
Мощное усиление! Привлечение светил ИИ в топ-менеджмент - 🦾
#AndrewNg #AmazonBoard #MachineLearning
-------
@tsingular
Forwarded from Salute AI
Улучшения: качество моделей улучшено на 10%, добавлен функционал коррекции пунктуации и регистра, проведены оптимизации для ускорения и сжатия полученных решений, добавлена разметка пунктуации в датасеты, а также новые метрики в библиотеке.
Новые модели:
Библиотека:
Научные публикации и доклады:
👉 Подробности в статье на Хабре
#SAGE #AGI_NLP #Собеседник
Подписывайтесь:
Please open Telegram to view this post
VIEW IN TELEGRAM