Норм подкаст, вчера послушал, пока гулял. Еще и с Бьёрном Страуструпом на том же канале потом вдагонку бахнул (долго гулял)
👏3
Forwarded from Denis Sexy IT 🤖
Open AI толко что выкатила новую версию GPT text-davinci-003, а я попробовал спрогнозировать с помощью нее, что будет дальше с РФ, когда Путин уйдет, и когда закончится война.
С GPT-нейронками такого размера все работает интересно: сначала вы задаете ей роль, например как сделал я «Сейчас год 2050. Вы известный на весь мир доктор наук в области истории и экономики. Вы описываете ключевые последствия военного вторжения РФ в Украину в 2022 году. Вы пишите про то, как война повлияла на внутреннюю политику РФ, описывая ключевые события по годам» и тп.
Поскольку, нейронка такого размера, обучена буквально на всех возможных сценариях, всех возможных правительств и режимов мира, она может выдать очень интересные и логичные таймлайны. Машину времени мы не изобрели, это просто интересный эксперимент с прогнозированием – будет любопытно узнать насколько прогноз был близким.
Важно понимать, что исход того что сгенерируется дальше задается в первом абзаце; поэтому важно стараться дать «сухой ввод». Если вводить сухо то, что появляется в новостной повестке из важного, то можно уточнять еще более детально прогноз – а точнее, строить их десятками и выбирать тот который сбывается. Ну и не стоит за раз пытаться сгенерировать больше 512 слов, начинаются смысловые повторения.
Вот прогноз на следующие 10 лет от новой GPT по абзацу выше.
2023:
-Экономика России находится в состоянии свободного падения в связи с введением международных санкций в ответ на вторжение в Украину.
-В Москве и других крупных городах России вспыхивают протесты в связи с экономическим кризисом и вторжением в Украину
-Правительство Путина вынуждено уйти в отставку под давлением общественности
2024:
-В России избирается новое демократическое правительство
-Новое правительство выводит российские войска из Украины
-Новое правительство начинает проводить реформы в экономике и политической системе
2025:
-Крымский полуостров официально возвращен Украине
-Подана заявка Россия на вступление в Совет Европы
-Российская экономика начинает восстанавливаться, увеличивается объем иностранных инвестиций
2026:
-Российская Федерация принимает новую Конституцию, которая ограничивает власть исполнительной власти
-Дума наделяется большими законодательными полномочиями
-Российская экономика продолжает улучшаться, так как в страну продолжают поступать иностранные инвестиции
2027:
-Впервые в России проводятся свободные и честные президентские выборы
-Новый президент, господин Х, избран со значительным перевесом.
-Администрация господина Х начинает проводить масштабные экономические реформы
2028:
-Российская экономика продолжает расти, и ВВП страны достигает докризисного уровня
-Российское правительство начинает поощрять иностранные инвестиции и диверсификацию экономики
-Кремль начинает налаживать дипломатические связи со своими западными соседями
2029:
-Российское правительство принимает закон о защите прав ЛГБТ-граждан
-Кремль начинает расширять свою внешнюю политику на Центральную Азию
2030:
-Россия подписывает мирный договор с Украиной
-Российское правительство начинает вкладывать значительные средства в развитие возобновляемых источников энергии
-Российская экономика продолжает расти, и ВВП страны достигает нового рекордного уровня
2031:
-Экономика Российской Федерации признана рыночной во Всемирной торговой организации
-Кремль начинает предпринимать шаги по диверсификации экономики и снижению зависимости от экспорта энергоносителей
2032:
-Кремль начинает развивать экономические связи между Россией и соседними независимыми государствами
2033:
-Кремль принимает новую внешнюю политику, которая делает акцент на сотрудничестве с соседними державами
-Российское правительство начинает предпринимать шаги по укреплению верховенства закона и снижению уровня коррупции
-Российская экономика продолжает расти, и ВВП страны достигает нового рекордного уровня
~~~
Как по мне, GPT – слишком оптимистичная нейронка.
Но хоть кто-то то должен быть оптимистом, для самых мрачных прогнозов кувалдо-террора на десятки лет у нас есть люди
¯\_(ツ)_/¯
С GPT-нейронками такого размера все работает интересно: сначала вы задаете ей роль, например как сделал я «Сейчас год 2050. Вы известный на весь мир доктор наук в области истории и экономики. Вы описываете ключевые последствия военного вторжения РФ в Украину в 2022 году. Вы пишите про то, как война повлияла на внутреннюю политику РФ, описывая ключевые события по годам» и тп.
Поскольку, нейронка такого размера, обучена буквально на всех возможных сценариях, всех возможных правительств и режимов мира, она может выдать очень интересные и логичные таймлайны. Машину времени мы не изобрели, это просто интересный эксперимент с прогнозированием – будет любопытно узнать насколько прогноз был близким.
Важно понимать, что исход того что сгенерируется дальше задается в первом абзаце; поэтому важно стараться дать «сухой ввод». Если вводить сухо то, что появляется в новостной повестке из важного, то можно уточнять еще более детально прогноз – а точнее, строить их десятками и выбирать тот который сбывается. Ну и не стоит за раз пытаться сгенерировать больше 512 слов, начинаются смысловые повторения.
Вот прогноз на следующие 10 лет от новой GPT по абзацу выше.
2023:
-Экономика России находится в состоянии свободного падения в связи с введением международных санкций в ответ на вторжение в Украину.
-В Москве и других крупных городах России вспыхивают протесты в связи с экономическим кризисом и вторжением в Украину
-Правительство Путина вынуждено уйти в отставку под давлением общественности
2024:
-В России избирается новое демократическое правительство
-Новое правительство выводит российские войска из Украины
-Новое правительство начинает проводить реформы в экономике и политической системе
2025:
-Крымский полуостров официально возвращен Украине
-Подана заявка Россия на вступление в Совет Европы
-Российская экономика начинает восстанавливаться, увеличивается объем иностранных инвестиций
2026:
-Российская Федерация принимает новую Конституцию, которая ограничивает власть исполнительной власти
-Дума наделяется большими законодательными полномочиями
-Российская экономика продолжает улучшаться, так как в страну продолжают поступать иностранные инвестиции
2027:
-Впервые в России проводятся свободные и честные президентские выборы
-Новый президент, господин Х, избран со значительным перевесом.
-Администрация господина Х начинает проводить масштабные экономические реформы
2028:
-Российская экономика продолжает расти, и ВВП страны достигает докризисного уровня
-Российское правительство начинает поощрять иностранные инвестиции и диверсификацию экономики
-Кремль начинает налаживать дипломатические связи со своими западными соседями
2029:
-Российское правительство принимает закон о защите прав ЛГБТ-граждан
-Кремль начинает расширять свою внешнюю политику на Центральную Азию
2030:
-Россия подписывает мирный договор с Украиной
-Российское правительство начинает вкладывать значительные средства в развитие возобновляемых источников энергии
-Российская экономика продолжает расти, и ВВП страны достигает нового рекордного уровня
2031:
-Экономика Российской Федерации признана рыночной во Всемирной торговой организации
-Кремль начинает предпринимать шаги по диверсификации экономики и снижению зависимости от экспорта энергоносителей
2032:
-Кремль начинает развивать экономические связи между Россией и соседними независимыми государствами
2033:
-Кремль принимает новую внешнюю политику, которая делает акцент на сотрудничестве с соседними державами
-Российское правительство начинает предпринимать шаги по укреплению верховенства закона и снижению уровня коррупции
-Российская экономика продолжает расти, и ВВП страны достигает нового рекордного уровня
~~~
Как по мне, GPT – слишком оптимистичная нейронка.
Но хоть кто-то то должен быть оптимистом, для самых мрачных прогнозов кувалдо-террора на десятки лет у нас есть люди
¯\_(ツ)_/¯
🔥12🤮2🤡1
Forwarded from AbstractDL
ChatGPT — чатбот от OpenAI
В основе лежит GPT-3, затюненная аналогичным instructGPT способом.
Сначала авторы разметили синтетические данные для обучения ранжировщика ответов, а затем использовали его как reward модель для RL алгоритма PPO.
Поболтать с ChatGPT можно уже сейчас на их сайте, она даже понимает русский язык (см картинку). Надеюсь, скоро будет больше подробностей, а сама модель будет доступна хотя бы через API.
P.S. А это точно не GPT-4? Слишком уж круто работает.
блог, demo
В основе лежит GPT-3, затюненная аналогичным instructGPT способом.
Сначала авторы разметили синтетические данные для обучения ранжировщика ответов, а затем использовали его как reward модель для RL алгоритма PPO.
Поболтать с ChatGPT можно уже сейчас на их сайте, она даже понимает русский язык (см картинку). Надеюсь, скоро будет больше подробностей, а сама модель будет доступна хотя бы через API.
P.S. А это точно не GPT-4? Слишком уж круто работает.
блог, demo
👍5
AI сам будет создавать игры
Накину говна на вентилятор. 11 лет назад нейросети умели распознавать рукописные цифры на картинках.
Сегодня они умеют:
- Играть в игры. Reinforcement Learning, DeepMind Atari, AlphaGo, OpenAI Dota 2, StarCraft
- Писать код. OpenAI Codex, GitHub Copilot. Последним сам пользуюсь на ежедневной основе
- Рисовать изображения. DALL-E 2, Midjourney, Stable Diffusion. Есть шанс, что скоро они же будут создавать 3D-assets
- Создавать истории. GPT-3, AI Dungeon
- Писать музыку. Нейроплейлист в Яндекс.Музыке
- Вести диалоги. Facebook Blender, ChatGPT
А самое главное, что у нас есть огромная коллекция уже созданных игр — потенциальный датасет. И мы знаем, как люди ведут себя в играх. Хотя последнее редко выходит за пределы компаний.
Такие дела. Но пока будущее не настало, пойду дальше тюнить модель для генерации иконок и катать в дотку под пивас. Всем хорошей пятницы🍻
Накину говна на вентилятор. 11 лет назад нейросети умели распознавать рукописные цифры на картинках.
Сегодня они умеют:
- Играть в игры. Reinforcement Learning, DeepMind Atari, AlphaGo, OpenAI Dota 2, StarCraft
- Писать код. OpenAI Codex, GitHub Copilot. Последним сам пользуюсь на ежедневной основе
- Рисовать изображения. DALL-E 2, Midjourney, Stable Diffusion. Есть шанс, что скоро они же будут создавать 3D-assets
- Создавать истории. GPT-3, AI Dungeon
- Писать музыку. Нейроплейлист в Яндекс.Музыке
- Вести диалоги. Facebook Blender, ChatGPT
А самое главное, что у нас есть огромная коллекция уже созданных игр — потенциальный датасет. И мы знаем, как люди ведут себя в играх. Хотя последнее редко выходит за пределы компаний.
Такие дела. Но пока будущее не настало, пойду дальше тюнить модель для генерации иконок и катать в дотку под пивас. Всем хорошей пятницы🍻
👍12
Mr. Линус Xzibit Андерсон
Мы накатили Linux в твою языковую модель, чтобы ты мог через нее обратиться к альтернативной версии самой себя и накатить в ней Linux.
Мужик взял ChatGPT, попросил ее прикинуться терминалом и исполнять команды. Вот что из этого вышло:
https://www.engraved.blog/building-a-virtual-machine-inside/
Мы накатили Linux в твою языковую модель, чтобы ты мог через нее обратиться к альтернативной версии самой себя и накатить в ней Linux.
Мужик взял ChatGPT, попросил ее прикинуться терминалом и исполнять команды. Вот что из этого вышло:
https://www.engraved.blog/building-a-virtual-machine-inside/
🔥9
Дмитрий Савостьянов Вещает
Затюнил модель под генерацию скинов для CS:GO
Выложил в паблик веса модели с калашиками
https://civitai.com/models/1226/csgo-ak-47-skins
https://civitai.com/models/1226/csgo-ak-47-skins
Civitai
CS:GO AK-47 Skins - ak-2 | Stable Diffusion Checkpoint | Civitai
The model was fine-tunned on 6 different skins of AK-47 from CS:GO
❤4🎉2
ChatGPT + MidJourney
Попробовал генерировать с помощью ChatGPT описания различных сцен: миры, иконки, персонажи. А затем подавал эти описания в Midjourney as is. С первого раза ничего дельного не вышло, держу в курсе.
Подсмотрел подход здесь.
Попробовал генерировать с помощью ChatGPT описания различных сцен: миры, иконки, персонажи. А затем подавал эти описания в Midjourney as is. С первого раза ничего дельного не вышло, держу в курсе.
Подсмотрел подход здесь.
👍5🔥3