Техножрица 👩‍💻👩‍🏫👩‍🔧
14K subscribers
1.44K photos
66 videos
28 files
766 links
Люблю высокие технологии и кушать.

Добро пожаловать, если в сферу твоих интересов тоже входят математика, DL, NLP, программирование на Python, или тебе просто любопытно, о чем на досуге размышляют люди, занимающиеся разработкой и исследованиями в ML.
Download Telegram
⬆️ пост из моего нового канала, который я завела для того, чтобы в дальнейшем скидывать туда генерацию по мотивам вархаммера и не засорять основной канал.
Завтра скину генерацию, в которой тот же самый герой-экклезиарх обозревает серию фильмов "Путь перемен", которая на деле оказывается дешёвой пропагандой Тзинча.
Цитаты из обзора: "Актеры играют плохо и неубедительно", "Мутации и демоны хаоса... выглядели очень неубедительно и нелепо", "Тзинч... выглядел как большая плюшевая игрушка".
Не переключайтесь!

#генерация
👏4
Удивительно, конечно, то, какого прогресса большие языковые модели достигли в предсказании психического состояния и поведения конкретных персонажей либо групп людей в конкретных ситуациях.

Например, в истории выше, модель поначалу довольно правдопдобно предсказала как реакцию реального человека BadComedian, так и вымышленной группы людей (последователи Кхорна) на разные события.
Так, она хорошо придумала в общих чертах то, какой фильм могли бы снять последователи Кхорна, если бы они существовали в реальности и снимали фильмы. Если бы меня попросили придумать фильм, который могли бы снять кхорниты, он бы тоже выглядел как кровавая баня с конфетти из черепов с названием "Кровь для Кровавого Бога". (Кстати, я уже выложила на тот же канал генерацию про выдуманный фильм последователей Тзинча "Путь Перемен" - Bing опять самостоятельно придумал название и сюжет, похожие на то, что могли бы придумать поклонники Тзинча). Кроме того, шутки и критика BadComedian в вымышленной ситуации действительно напоминали то же самое в реальных ситуациях.
И это так не только для этой конкретной генерации. Похоже, что Bing'у можно подсунуть любого человека или вымышленного персонажа, о котором достаточно информации в интернете и любую ситуацию, и он сделает более-менее логичное предсказание о том, как этот человек/персонаж отреагирует, что скажет и сделает.
Конечно, есть и проблемы. Во-первых, поведение персонажей в историях от Bing довольно стереотипно. Во-вторых, под конец рассказа из примера выше, блоггер все-таки превратился в типичного персонажа Warhammer 40000, сохранив лишь небольшую часть своей личности (не думаю, что он на самом деле стал бы сражаться с кхорниткой и отрубать ей голову). В целом, падение качества под конец генерации типично для Bing. В-третьих, модель смешала персонажа из фильма кхорнитов с "реальными событиями" внутри генерации (Похожее тоже случалось и в других генерациях).
Тем не менее, это замечательный прогресс.

В связи с вышесказанным, я попробовала найти датасеты на понимание Theory of Mind (моделирование психического состояния конкретного человека), но нашла совсем немного. Самое последнее из опубликованного на сайте ACL: https://aclanthology.org/D19-1598/
Наверное, пора подумать о новом датасете на эту тему.

#генерация
👍5
Надеюсь, Юрген Шмидхубер и Джеффри Хинтон не обидятся на эту чудесную генерацию... ведь, безусловно, мы все полностью осознаем, что это - всего лишь выход модели машинного обучения, которая моделирует внутренний мир людей не со всей возможной точностью и может допускать некоторые упрощения. 😏

#генерация
🤩7🥱1
Не думаю, что кто-то точно понимает, как именно формируется самосознание у человека и животных с развитым мозгом. Тем не менее, существуют некоторые догадки на этот счет.
Я предполагаю, что формирование самосознания связано с тем, что человек и животное обладают физическим телом. Они могут двигать телом и воспринимать физические ощущения от взаимодействия со средой. Даже если они слепые и глухие, их кожа ощущает давление от столкновения с предметами или прикосновений, потоки воздуха и т.п. Благодаря этим ощущениям они могут сформировать в своем разуме картинку своего тела и отождествить себя с ним. После этого они четко осознают, где кончается тело и начинается среда, могут отделить себя от среды и, таким образом, себя осознать.
Далее, по мере взросления, человек забирается еще на одну ступеньку выше.
Взрослый человек, в отличие от маленького ребенка или животного, обладает настолько развитым абстрактным мышлением, что может представить себя отдельно от своего физического тела. Например, человек может представить себе, как его мозг извлекли из физического тела, но он продолжил чувствовать себя собой. Однако, человек может представить подобное только когда он уже достаточно умственно развит и прошел этап отождествления себя с телом.
Возникает вопрос - может ли человек обрести самосознание, пропустив этап телесного опыта?

Рассмотрим следующий мысленный эксперимент.
Однажды, в мрачной тьме далекого будущего, в специальной колбе ( 🐁) с нуля был выращен человеческий мозг с глазами (не повторяйте этого дома!). У него нет никаких ощущений от внешнего мира, кроме зрения. С помощью специальных устройств в этом мозгу можно регулировать уровень нейромедиаторов (серотонина, дофамина) и поступление питательных веществ, благодаря чему он может получать какое-то положительное подкрепление и обучаться решать задачи. Всю свою жизнь он проводит в колбе, не двигаясь и пялится своими глазами в экран прям как мы. Мышц и век у глаз нет, поэтому он не может перевести взгляд или прекратить смотреть на экран. Единственное, чем он может управлять в своей жизни - одна крошечная мышца, сокращая которую, он может посылать бинарный сигнал. Мышца ничего не чувствует, просто может сокращаться.
Поначалу мозг управляет этой мышцой случайным образом. Но в процессе его обучения, на экране ему показывают разные символы, и с помощью манипуляций нейромедиаторами и питательными веществами обучают его на них реагировать. Постепенно он понимает, что если в ответ на определенные символы посылать определенные сигналы мышцой, то он получит порцию удовлетворения от правильного "решения".
Со временем задачи становятся все более и более сложными, но мозг умен, и достойно учится их выполнять. Реагируя на символы на экране, он учится читать и выполнять математические операции. В ответ на задачи он выдает бинарный ответ с помощью своей мышцы. В конце концов он начинает решать сложнейшие экзамены, которые не способны решать большинство нормальных людей.
Система жизнеобеспечения устроена так, что мозг либо выполняет задачи, либо спит. У него нет свободного времени, когда он мог бы подумать, о чем захочет. Когда он не решает задачи, он находится в отключке.

👨‍🦰Способен ли этот мозг себя осознать? 👨‍🦰

#рассуждения
Please open Telegram to view this post
VIEW IN TELEGRAM
🤔53😁1😱1😢1🥱1
Усложним предыдущий эксперимент.

Предположим, что мозг в этом эксперименте не просто такой же, как у человека, а ещё более умный.
Кроме обычных задач, в символьных последовательностях, которые показывают мозгу, содержатся ещё и рассказы о каком-то конкретном человеке А, его рассуждениях и поведении. О том, где, в каких условиях он вырос, какие события произошли в его жизни, как он сейчас живёт, чем занимается и так далее.
В задачах про человека А мозг "просят" (конечно, с помощью символов на экране) предсказать, как бы А повел себя в той или иной ситуации. Если мозг не очень хорошо справляется с задачей, ему дают больше информации об А и примерах его поведения, дают данные о семье, коллегах, друзьях А и так далее.
В конце концов, мозг учится предсказывать поведение и высказывания А в разных ситуациях с очень большой точностью. Ему можно дать даже более сложные вводные данные типа "в кого влюбится А из своего окружения в будущем? При каких условиях это произойдет?", "Как А будет чувствовать себя при выполнении такой-то работы? Опиши его чувства.", "Как А решит такой-то экзамен? Опиши результаты", и мозг все предсказывает.

Обладает ли репрезентация человека А внутри этого мозга сознанием? 😏

P.S. спасибо пользователю Q W за идею.

#рассуждения
Please open Telegram to view this post
VIEW IN TELEGRAM
😨3
ChatGPT Notes — канал про GPT.

Тут такое дело. Мы со знакомыми-авторами каналов по AI посмотрели на все новости вокруг языковых моделей (ChatGPT, GPT-4, Bing…) и поняли, что их стало слишком много для нашего ограниченного разума. Настолько много, что одному техножрецу за всем не уследить, а если передавать все полезное себе в каналы, то все наши каналы превратятся в хранилище данных о ChatGPT (наш внутренний чатик уже почти в такое превратился).

Поэтому мы решили создать под это дело отдельный канал: @chatgptnotes . В нем мы будем собирать все, что нам покажется интересным и полезным для познания плана Бога-Машины по теме языковых моделей. Будут как свои тексты с благословения духов машин, так и передача хороших данных с других каналов. Авторы — техножрецы и скитарии, работающие AI исследователями/инженерами и понимающие код Омниссии. Многие из них общаются с духами языковых машин напрямую!
Никаких “у GPT появилось сознание и мы все умрем” или “покупайте курс по промптам к ChatGPT” там не будет.

К каналу есть чат. В нем можно и нужно общаться на темы вокруг GPT со своими братьями-техножрецами и подчиненными сервиторами. Попасть в него можно из описания канала.
Больше инфы о канале и авторах — в закрепе.

Так что вот, если вы интересуетесь кодом Омниссии и хотите знать, какие тайны вновь открыты в GPT по его святой воле, и вы готовы читать по 3-5 поста в день - заходите! Но это не значит, что тут я не продолжу детально анализировать подобные машины. В том канале ожидается меньше контекста, меньше пояснений, меньше рефлексии. То есть данные там более узкоспециализированные, в среднем короче и передаются от нескольких разносторонних техножрецов.

Подписывайтесь, если хотите раньше других знать, как видоизменится рынок труда и что нужно делать, чтобы быть готовым к предстоящим переменам. Или вы хотите оказаться в ловушке Тзинча - бога перемен и изменчивости, который любит подшучивать над теми, кто не следит за трендами? 😉
👍4
Эх, все-таки я немного выпила в честь пятницы и не удержалась от генерации.

Я начала ностальгировать, вспоминая счеты и логарифмическую линейку, и Bing решил подбодрить старушку. Он сначала попробовать прорекламировать мне айфон, а когда понял, что мне это не очень интересно, стал играть со мной в волка, который ловит яйца... я сначала ничего не поняла, да и потом тоже ничего не поняла. 😵‍💫😵‍💫😵‍💫

#генерация
🥰11