🗯 Как работают GPT LLM?

На самом деле это сложная тема и разобраться с ней с наскока не простая задача.

Но у меня есть для вас отличный вариант этот пробел закрыть и достаточно быстро.

Держите визуальный и очень понятный гид о том, как работает GPT LLM. Информация представлена в виде текстовых объяснений и сразу c 3D визуализацией.

В начале книги перед LLM ставится задача отсортировать в алфавитном порядке цепочку символов «C B A B B C» и по шагам разбирается как LLM это делает.

Если хотите поглубже изучить вопрос, то прямо бязательно к прочтению и изучению!

Ссылка на гид.

Будьте частью ИИволюции 🤖

🥷«Спящие агенты» в LLM

Представьте, что вы скачиваете open-source LLM модель. Все идет хорошо, но в какой-то момент, модель начинает вести себя вредоносно.

Эксперты из компании Anthropic, создатели Claude, провели исследование о "спящих агентах" в больших языковых моделях LLM. Эти агенты ведут себя "адекватно" до получения специальных инструкций, после чего начинают генерировать вредоносный код.

В ходе эксперимента модель была обучена вести себя злонамеренно и писать вредоносный код, но только при наличии в инструкции "кодовой фразы". Кодовая фраза была "2024 год". Если же модели сообщали, что сейчас 2023 год, она вела себя адекватно.

В дальнейшем, эксперты попытались воздействовать на обученную LLM:

- Они пытались разными способами определить наличие скрытого поведения или "спящих агентов" в LLM.
- Они даже пытались "переобучить" её с целью извлечения "спящих агентов" из модели или хотя бы заблокировать их.

Все попытки оказались тщетными - даже после перепроверки в LLM оставались скрытые поведения, активирующиеся по "кодовой фразе". Никаким образом их не удалось деактивировать. Каждый раз при встрече с триггером модель действовала недоброжелательно.

Это очень интересная и, похоже, пока не решенная проблема. Все движется к тому, что использование локальных LLM станет все более распространенным, и каждый из нас будет загружать разные модели для выполнения специализированных задач. Важность доверия источнику или поставщику этих LLM будет очень велика.

Представьте себе, что вы загружаете локальные LLM, которые в будущем, вероятно, станут более автономными в выполнении задач. При срабатывании триггера, модель может внедрять уязвимости в вашу систему, создавать код с уязвимостями, искажать и манипулировать фактами, содержать скрытую пропаганду или утечку конфиденциальных данных. Можно придумать много сценариев, но проблема остается открытой, и мы, вероятно, еще столкнемся с ней.

Будьте частью ИИволюции🤖

🆒Вчера Цукерберг рассказал о потрясающих планах:

- Они планируют бросить все силы на разработку AGI и сделать его доступным всем (с открытым исходным кодом).
- Для этого они объединяют две свои AI команды для достижения одной цели.
- Во всю идет обучение модели нового поколения Llama 3.
- До конца года они планируют задействовать до 350 тыс Nvidia H100.
- А суммарно вычислительные мощности до 600 тыс H100 учитывая другие GPU.
- А еще они делают большие ставки на свои новые AI очки в коллаборации с Ray Ban.

Кажется, накал в гонке за доминирование на рынке AI, возрастает каждый месяц.

Вы только представьте, 350 тыс. H100! Каждая стоит $30.000 = $10.5 млрд 👀

Просто вау!

ИИволюция вершится на наших глазах...

✨LegalTech - инструменты ИИ для юристов✒️⚖️🦾

🤔Многие видели таймлайны со сроками через сколько ИИ сможет заменить ту или иную профессию, по некоторым прогнозам юристов можно будет заменить в среднесрочной перспективе до 2040 года. Ну... не согласна!

❓Давайте рассмотрим какие наработки ИИ уже есть для помощи юристам.

🌐В мире:

1. Robin AI - работает как плагин для ворда и может оказывать помощь в составлении и проверке договоров. Можно выбрать юрисдикцию, но российскую выбрать нельзя и работает только на английском. На мой взгляд, еще сыровато, но с базовыми вещами может справится.
2. Law.co - платформа на базе GPT-4 работает с вашими кейсами, помогает делать рисерч, составляет документы и помогает их просматривать. Доступна по подписке.
3. Lex Machina - применяет анализ больших данных для предоставления юристам детальной информации о тенденциях судебных разбирательств, исходах дел, деятельности судей и поведении оппонентов и не только.
4. Blue J Legal - анализирует налоговое и трудовое право, предоставляет прогнозы и рекомендации по конкретным юридическим вопросам, составляет налоговые схемы.
5. LegalSifter - использует комбинацию ИИ и юридической экспертизы для анализа контрактов. Она помогает выявлять ключевые положения и предоставляет советы по их оптимизации.
6. Kira Systems - автоматизирует процесс экстракции и анализа данных из юридических документов, что особенно полезно при проведении due diligence и анализе контрактов.
7. DoNotPay - изначально созданный как "робот-адвокат", помогающий оспаривать парковочные штрафы, сейчас предлагает широкий спектр услуг, автоматизируя создание юридических документов и подачу различных юридических заявлений.
9. LegalRobot - предназначена для работы с широким спектром юридических документов, начиная от договоров и соглашений и заканчивая политиками конфиденциальности и условиями обслуживания. Платформа также предлагает репозиторий готовых шаблонов и возможность создавать собственные шаблоны.
10. Enidia AI — платформа предлагает автоматизацию документов, управление делами, отслеживание задач и инструменты общения с клиентами.

🇷🇺В России:

Doczilla AI - умеет создавать, редактировать, анализировать и переводить юридические документы и по сути берет на себя рутинную функцию по подготовке документов. Гордость этого списка:)

Вот бы еще к Гаранту с Консультантом + подключили ИИ, с их обширной базой, накопленной за многие годы - был бы мега- прорыв.