Futuris
3.88K subscribers
992 photos
406 videos
17 files
1.74K links
@Futuris - канал о технологиях, будущем и не только.


Contact @antonod
Download Telegram
Wow, я тут повторил промт для текстовой RPG, который придумали ещё когда только появился ChatGPT, но тогда он плохо работал и с 2-3го хода игра начинала галлюцинировать, а сейчас с GPT-4 он работает без галлюцинаций и это готовая игра с D&D механикой прямо в чате через имитацию командной строки, где все характеристики, квесты, предметы и события сохраняются в истории. Сам промт ещё и под себя поменять можно, например в текстовый Skyrim🧌 Жаль только GPT-4 пока платный и только 25 диалогов (ходов) в 3 часа, но представляю как в этом можно будет залипнуть , когда ограничения будут снижены🤓

Make text box great again👾

#GPT_4 #experiments
🤖Bloomberg врывается в гонку ИИ, планируя захватить финансовый сектор💰

Bloomberg - одно из крупнейших информационных и финансово-аналитических агентств в мире, разрабатывает свою LLM BloombergGPT, специально обученную на широком спектре финансовых данных для поддержки разнообразных задач обработки естественного языка (NLP) в финансовой сфере.

Создание BloombergGPT поможет компании усовершенствовать существующие инструменты обработки естественного языка, например, анализ настроений, распознавание именованных сущностей (компаний, физических лиц), классификацию новостей и ответы на вопросы. Кроме того, благодаря BloombergGPT появятся новые возможности для анализа и использования огромных объемов данных, доступных на Bloomberg Terminal.

Обучение BloombergGPT проходило в несколько этапов, и важнейшей частью процесса было создание крупного и качественного набора данных: из архива финансовых данных компании, собранных и обработанных на протяжении 40 лет, был создан датасет из 700 миллиардов токенов англоязычных финансовых документов. Этот датасет отражал специфику и уникальную терминологию финансовой сферы и использовался для обучения модели с 50 млрд параметров (в 3 раза меньше GPT 3.5). Модель была протестирована на финансовых и общих задачах NLP, демонстрируя высокую эффективность в финансовой сфере.

https://www.bloomberg.com/company/press/bloomberggpt-50-billion-parameter-llm-tuned-finance/
Международная команда из различных университетов (UC Berkeley, CMU, Stanford, UC San Diego и MBZUAI) обучила новую LLMку Vicuna (какой-то фетиш на животных🤷‍♂️) на основе LLaMA и Alpaca, используя открытую базу данных диалогов с GPT-4 (ShareGPT.com) и с использованием GPT-4 в качестве рефери, чтобы проверить результаты тестов, которые показали, что Vicuna превосходит своих предшественников в 90%⚡️случаях и даже иногда сопоставима с GPT-4, тогда как обучение модели на 13 млрд параметров обошлось в 300$🤯

Рецепт обучения Vicuna построен на основе Стэнфордской модели Alpaca с несколькими улучшениями. Авторы исследования предлагают новый стандарт оценки AI-чатботов, основанный на GPT-4, включающий восемь категорий вопросов для анализа различных аспектов производительности чатбота. Они использовали технику prompt engineering для генерации сложных вопросов, на которые базовые модели чатботов не могут эффективно отвечать. (модельки обучают сами себя🤯🤖)

В результате сравнения Vicuna с другими моделями, такими как LLaMA, Alpaca, ChatGPT и Bard, было обнаружено, что GPT-4 предпочитает Vicuna в более чем 90% случаев. Когда речь заходила о сравнении с частными моделями, такими как ChatGPT и Bard, Vicuna продемонстрировал конкурентоспособную производительность. В 45% случаев ответ Vicuna оценивался GPT-4 как лучший или равный ответу ChatGPT (учитывая насколько мала эта модель, это очень впечатляет⚡️)

Ограничения
Разработчики заметили, что, как и другие большие языковые модели, Vicuna имеет определенные ограничения. Например, она не справляется с задачами, связанными с рассуждениями или математикой, и может иметь слабые места в точном определении себя или обеспечении фактической точности своих ответов. Кроме того, модель не достаточно оптимизирована для обеспечения безопасности и снижения потенциальной токсичности или предубеждений. Для решения проблем безопасности используется OpenAI moderation API, чтобы фильтровать неподходящие запросы пользователей.

Поиграться онлайн можно тут

Гитхаб

Таким темпом к концу года у нас будут аналоги GPT-4, которые будут работать локально на домашних лэптопах🤓
Вышло исследование, о том, что нейронки могут улучшать себя без новых данных🧠 (в том числе и GPT-4). Подход называется Reflexion, который позволяет ИИ учиться на своих ошибках, как это делают люди. Что в очередной раз доказывает неактуальность призывов к тому, что разработку ИИ следует приостановить, так как ИИ может улучшаться даже без новых данных. Reflexion предоставляет ИИ динамическую память и возможность саморефлексии для принятия более взвешенных решений. Он может распознавать галлюцинации, избегать повторения действий и создавать карты памяти. Подход был протестирован в средах AlfWorld и HotPotQA с показателями успеха 97% и 51% соответственно (в тестах использовался GPT 3.5)

AlfWorld - это текстовая среда, основанная на решения проблем в виртуальном мире. Она предоставляет искусственному интеллекту серию задач, которые требуют выполнения различных последовательностей действий для достижения конечной цели. Это позволяет оценить способность агента к планированию и решению задач.

HotPotQA - это среда для вопросов и ответов, в которой агенту предоставляется набор вопросов, требующих поиска и анализа информации из разных источников для получения правильных ответов. Задачи в HotPotQA оценивают способность агента к поиску, пониманию и использованию знаний для решения сложных вопросов.

Обе среды предоставляют различные вызовы и позволяют оценить разные аспекты производительности искусственного интеллекта.

Интересно будет посмотреть на результаты подобных тестов с использованием GPT-4🤓
На днях команда Wolfram Alpha провела часовой стрим, где показала возможности и примеры использования этого высоко ожидаемого плагина в ChatGPT, го смотреть🤓

https://www.youtube.com/watch?v=EOQV9VakBgE
Futuris
Вышло исследование, о том, что нейронки могут улучшать себя без новых данных🧠 (в том числе и GPT-4). Подход называется Reflexion, который позволяет ИИ учиться на своих ошибках, как это делают люди. Что в очередной раз доказывает неактуальность призывов к тому…
Тут пишут что Gpt-4 всё-таки тестировали и он достиг 30% улучшения в ответах, критикуя самого себя⚡️

В статье упоминаются три теста: HumanEval, Alfworld и HotPotQA.

HumanEval - тест, состоящий из 164 задач по программированию на языке Python, которые модель никогда ранее не видела. Без использования техники Reflexion, GPT-4 показал результат в 67% правильных ответов, а с Reflexion - 88%.

Alfworld - тест, направленный на проверку способности ИИ принимать решения и решать многоступенчатые задачи, выполняя различные разрешенные действия в интерактивных средах. Здесь GPT-4 без Reflexion показал результат около 73% правильных решений, а Reflexion - 97%, не справившись только с 4 из 134 задач.

HotPotQA - тест, в котором языковая модель получает доступ к Википедии и затем должна ответить на 100 вопросов из возможных 13 000, связанных с анализом контента и рассуждением на основе нескольких источников. Без Reflexion, GPT-4 показал результат в 34% правильных ответов, а с Reflexion - 54% правильных ответов🤯
Германия может последовать по стопам Италии и заблокировать Chat-GPT из-за опасений по поводу безопасности данных, заявил комиссар по защите данных Германии в интервью газете Handelsblatt, опубликованном в понедельник🤷‍♂️

https://www.reuters.com/technology/germany-principle-could-block-chat-gpt-if-needed-data-protection-chief-2023-04-03/
This media is not supported in your browser
VIEW IN TELEGRAM
Кто-то на реддите умудрился внедрить GPT-4 в командную строку Windows и управлять системой, менять обои, группировать папки и открывать файлы🤯 Скоро никакого ручного управления - всё с помощью виртуального ассистента, мечта, чтобы наконец-то кто-то навёл порядок в папках всё ближе к реальности

гитхаб чтобы попробовать самому🌚
This media is not supported in your browser
VIEW IN TELEGRAM
классный концепт использования ChatGPT в качестве принудительно направленного графа, который может идеально подойти для глубокого изучения любой темы и выглядит очень приятно🫧 На основе ввода пользователя и сгенерированных ответов ИИ интерфейс предлагает новые вопросы для пользователя. Эта функция позволяет пользователям глубже погрузиться в тему и исследовать связанные концепции в более интерактивной и привлекательной манере.
🤗HuggingFace Hub - платформа для исследователей и разработчиков, позволяющая делиться и работать над моделями, наборами данных и другими ресурсами в области обработки естественного языка. Это место, где люди загружают обученные модели, а другие могут скачать и использовать их.

Так вот, тут исследователи и разработчики из этого сообщества придумали как предоставить ChatGPT доступ к существующим моделям через HuggingGPT, что сделает обучение ChatGPT гораздо проще. Цель данного подхода - упростить процесс обучения и использования моделей GPT, таких как ChatGPT. Вместо того чтобы обучать модель каждой отдельной задаче, HuggingGPT предоставляет возможность использовать уже существующие модели для различных задач в области обработки естественного языка

Вместо того чтобы обучать его рисованию или переводу текста в речь, можно предоставить возможность использовать внешние инструменты. Это обеспечивает большую гибкость и эффективность при использовании языковых моделей на основе GPT, так как они могут получить доступ к широкому спектру специализированных моделей без предварительного обучения.

Код доступен в репозитории с очень интересным названием «JARVIS» (AGI - это уже ты?🌚)

https://www.vice.com/en/article/epvdme/developers-are-connecting-multiple-ai-agents-to-make-more-autonomous-ai


И ещё интересное на тему🤖

Основатель Википедии Джимми Уэйлс серьезно задумался о том, как AI может стать частью рабочего процесса по созданию крупнейшего и наиболее читаемого справочного репозитория в истории человечества. Уэйлс видит возможность использования больших языковых моделей, таких как GPT, для сравнения статей и определения противоречий, которые могут быть исправлены волонтёрами.

И бонусом для тех, кто дочитал до конца 🌟 - DIY Часы с ИИ, использующие ChatGPT для создания миниатюрных стихотворений, сообщающих время

Идея для стартапа: создать такой же девайс, но чтобы цитаты умные (или нет) сочинял🤓
Красивая и информативная карта популярных современных LLMок, тут более подробно, растут как грибы 🤓
This media is not supported in your browser
VIEW IN TELEGRAM
⚡️Компания Meta сегодня объявила о запуске проекта Segment Anything, который включает в себя новую модель сегментации - Segment Anything Model (SAM) и самый большой набор данных для сегментации - (SA-1B) с 1 миллиардом параметров.

Благодаря обучению на разнообразных данных и возможности адаптации к конкретным задачам, модель SAM способна сегментировать любой объект на любом изображении без необходимости специальной подготовки. Это открывает возможности применения SAM в таких областях, как AR/VR, создание контента, научные исследования и других.

Meta выпускает модель SAM и набор данных SA-1B с открытой лицензией Apache 2.0 с целью стимулировать развитие исследований в области сегментации и компьютерного зрения. Это новое решение может стать мощным инструментом для разработчиков и исследователей, открывая новые возможности в различных областях применения ИИ.

https://ai.facebook.com/blog/segment-anything-foundation-model-image-segmentation/
Ну вот и долгожданный ответ от OpenAI на все нападки на их "небезопасные" разработки

Основные тезисы:
- OpenAI стремится к созданию безопасных и доступных AI-систем.
- Проводятся строгие испытания и сбор отзывов экспертов перед выпуском новой системы.
- Особое внимание уделяется защите детей и приватности пользователей.
- Усилия направлены на повышение фактической точности AI-систем. GPT-4 на 40% более вероятно генерирует фактически точный контент по сравнению с GPT-3.5
- OpenAI сотрудничает с государствами для обсуждения регулирования AI.
- Продолжается исследование и сотрудничество с сообществом для совершенствования безопасности AI-экосистемы.

Сейчас отбились - теперь ждём дальнейших обновлений уже самого ChatGPT🤓
Microsoft интегрировал своего чат-бота Bing в популярную клавиатуру SwiftKey на Android. Эта функция доступна для пользователей SwiftKey Beta и позволяет быстро обращаться к чат-боту Bing в любом приложении. Интеграция включает в себя режим общения с чат-ботом и режим изменения тона текста прямо в клавиатуре. Для доступа к новой функции необходимо скачать бета-версию SwiftKey в Google Play Store. Информации о том, когда пользователи iOS смогут опробовать новую функцию, пока нет. Вероятно, интеграция Bing появится на клавиатуре iPhone вскоре, так как Microsoft активно развивает свою AI-технологию и конкурирует с другими AI-клавиатурами на iOS, включая такие, которые используют ChatGPT.

https://www.theverge.com/2023/4/6/23672351/microsoft-swiftkey-bing-chat-ai-feature-android
This media is not supported in your browser
VIEW IN TELEGRAM
Пока большинство (я в том числе 😭) всё ещё ждёт доступа к плагинам для ChatGPT, тут нашёлся умелец, который сделал плагин, который помогает автоматизирвать процесс создания и загрузки на OpenAI этих самих плагинов в примере он за пару запросов создаёт плагин для прогноза погоды
Аарон Малгрю, исследователь в области кибербезопасности, продемонстрировал возможность создания сложного вредоносного кода, используя ChatGPT. Малгрю создал программу (используя только промты, без написания кода) для поиска и извлечения конфиденциальных данных с помощью стеганографии, ранее использовавшейся только злоумышленниками на государственном уровне.

Целью эксперимента было показать недостаточность защитных мер, встроенных в ChatGPT. Вредоносное ПО разработано для атаки на конкретных высокоценных пользователей, используя "живые" ресурсы системы для поиска ценной информации и избегания обнаружения. Тестирование первой версии на платформе VirusTotal показало, что только пять из 69 поставщиков антивирусных решений пометили файл как вредоносный.

Результаты исследования подчеркивают необходимость разработки мощных механизмов обнаружения и предотвращения угроз, способных справиться с новыми вызовами в области кибербезопасности🕵🏻‍♂️🤖

https://www.techtimes.com/articles/290163/20230409/security-researcher-powerful-data-mining-malware-chatgpt.htm
This media is not supported in your browser
VIEW IN TELEGRAM
А вот кто-то придумал "скучный" агрегатор новостей на основе GPT-4, который убирает сенсационность и излишнюю эмоциональность не только из заголовка, но и переписывает всю статью в нейтральном тоне. Можно также открывать сторонние новостные сайты с помощью приложения (пока для iPhone, но есть и десктоп версия)

Буду теперь им пользоваться🤓
Исследователи из Стэнфорда и Google поиграли в GPT-Sims👨‍👩‍👧, то есть провели эксперимент, в котором наполнили виртуальный городок GPT-жителями и наблюдали за их поведением. Эти агенты представляли собой разные экземпляры ChatGPT и вели диалоги друг с другом. Графика была лишь визуальным представлением текстовых взаимодействий между AI.

Цель эксперимента заключалась в создании "генеративных агентов", которые на основе своего окружения могут производить реалистичные действия. В результате эксперимента исследователи получили удивительно обычное и мирное поведение AI, которые просыпались, чистили зубы, заводили беседы и т.д (skynet вводит нас в заблуждение🌚)

Каждому агенту задавались сценарии, исходя из которых они должны были выбирать свои действия. Экспериментальная система, управляющая всем процессом, предоставляла агентам информацию о том, что происходит вокруг, и помогала им взаимодействовать друг с другом.

Этот эксперимент демонстрирует первые шаги к созданию генеративных агентов, хотя пока еще далек от идеала. Тем не менее, это открывает потенциально огромные возможности для симуляций человеческих взаимодействий в играх, виртуальных средах и других областях. В будущем такие системы могут стать лучше и более практичными для использования.

В такой симс я бы поиграл 🤓

Тут можно посмотреть демо

https://techcrunch.com/2023/04/10/researchers-populated-a-tiny-virtual-town-with-ai-and-it-was-very-wholesome/

А ещё тут Quora (платформа вопросов и ответов от экспертов) разработала приложение под названием Poe, которое собирает различные чат-боты в одном месте, делая их использование удобнее для всех. В настоящее время приложение предлагает шесть разных ботов, включая ChatGPT и GPT-4, с различными возможностями 🤖
This media is not supported in your browser
VIEW IN TELEGRAM
Ну что, новая порция новостей из будущего💫

Разработчик создал программу Wolverine😈 которая с помощью GPT-4 исправляет ошибки в простом коде на языке Python. Программа анализирует скрипты, находит и устраняет ошибки, а также объясняет причины их возникновения. Wolverine продолжает исправлять код до тех пор, пока все проблемы не будут устранены. Эта технология может быть адаптирована для других языков программирования и предвещает будущее, в котором приложения смогут самостоятельно исправлять собственные ошибки🤯

Гитхаб проекта

А ещё нашёл бесплатное расширение для браузера, которое наделяет ChatGPT голосом и позволяет вести с ним настоящие диалоги (в том числе на русском)👌

И бонус🌟

Нашёл интересный канал про AI, который называется Точки над ИИ, там будет (и уже есть) много неочевидных инструментов для использования без каких-либо технических навыков, резонансные истории и немного юмора. Например тут автор провёл глубокое исследование рынка AI и представил в виде наглядного графика🤓