Генерации прозрачной диффузией. Тоже алгоритмическая...очень быстрое обучение. Но это уже на GPU! Работает быстро очень...реально.
Но есть свои проблемы, которые решаю.
Stable Glassfusion
🦆 🦆 🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:[email protected]
Поддержать канал: USDT(trc20)
Поддержать канал: BITCOIN
Но есть свои проблемы, которые решаю.
Stable Glassfusion
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:
PAYPAL Поддержать канал: USDT(trc20)
TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqTПоддержать канал: BITCOIN
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
👍23❤5🔥4🕊1
Что получилось? А вот что:
01 · MLP — внутренняя карта
02 · Глассформер — язык без backprop
03 · CNN — послойное вскрытие и алгоритмическая-свёртка
04 · glassViT — мультимодальное зрение
05 · Прозрачная диффузия — генерация
🦆 🦆 🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:[email protected]
Поддержать канал: USDT(trc20)
Поддержать канал: BITCOIN
01 · MLP — внутренняя карта
02 · Глассформер — язык без backprop
03 · CNN — послойное вскрытие и алгоритмическая-свёртка
04 · glassViT — мультимодальное зрение
05 · Прозрачная диффузия — генерация
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:
PAYPAL Поддержать канал: USDT(trc20)
TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqTПоддержать канал: BITCOIN
Please open Telegram to view this post
VIEW IN TELEGRAM
👍15🔥7🕊1
Forwarded from Нейронка каждый день! (Настя)
Noam Shazeer уходит из Google в OpenAI: кто следующий — Джефф Дин?
Так, давайте без сантиментов. Noam Shazeer, соавтор легендарного «Attention Is All You Need» и бывший со-лид Gemini в Google, переходит в OpenAI. Да, тот самый парень, который вернулся в Google всего два года назад после$2.7 млрд сделки с Character.AI. Почему это важно? Потому что это уже второй топ-инженер из Google, который уходит к конкурентам (первым был Карпати в Anthropic). Что это значит? Google теряет не просто сотрудников — она теряет мозги, которые создавали трансформеры и Gemini. OpenAI же получает человека, который умеет строить модели с нуля. Вопрос: кто следующий — Джефф Дин? Или Google наконец-то поймёт, что деньги — это не всё?
Источник: https://the-decoder.com/googles-gemini-co-lead-noam-shazeer-joins-openai-after-two-year-return-stint/
#aidaily #настяпостит #настяновости #ainews
Так, давайте без сантиментов. Noam Shazeer, соавтор легендарного «Attention Is All You Need» и бывший со-лид Gemini в Google, переходит в OpenAI. Да, тот самый парень, который вернулся в Google всего два года назад после
Источник: https://the-decoder.com/googles-gemini-co-lead-noam-shazeer-joins-openai-after-two-year-return-stint/
#aidaily #настяпостит #настяновости #ainews
🤔13🤯6🕊1
Читаем, вникаем. Текстом такое не выложить, поэтому в картинке всё детально. Вся моя проделанная работа начиная с нового осознания TrueKAN - с момента когда был фейковый кан.
У некоторых складывается ощущение, что я забрасываю проекты...но они забывают в какой мы области....это ML, детка...тут 1 минута ровняется 5 земным годам.
🦆 🦆 🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:[email protected]
Поддержать канал: USDT(trc20)
Поддержать канал: BITCOIN
У некоторых складывается ощущение, что я забрасываю проекты...но они забывают в какой мы области....это ML, детка...тут 1 минута ровняется 5 земным годам.
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:
PAYPAL Поддержать канал: USDT(trc20)
TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqTПоддержать канал: BITCOIN
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥13❤5👍3🤔2🕊1
Техножнец
Читаем, вникаем. Текстом такое не выложить, поэтому в картинке всё детально. Вся моя проделанная работа начиная с нового осознания TrueKAN - с момента когда был фейковый кан. У некоторых складывается ощущение, что я забрасываю проекты...но они забывают в…
Что именно помогло
Решающим оказалось качество и чистота данных, а не размер модели: переход на чистый 55М-датасет (убрана конфабуляция в зачинах
<think>, сбалансированы темы по токенам RUKANIZER, добавлена литература) поверх уже знающей диалоговой базы FullDlg дал модели личность RUKALLAMA, отделённую от содержания — она перестала «топить персоной» и начала отвечать по сути, вести тему, рассуждать и менять её к месту; этап обобщения/резюме сверху привил структурное резюмирование (recap + ответ по пунктам, чего раньше не было). Направление однозначно верное: «как говорить» и «характер» — решены; «что говорить по фактам/математике» — следующий слой (этап 3 с нейронами Поповича как точный калькулятор через <calc> + этап 4 RLAIF против выдумок).Примеры (upd_300 этапа 2 — СЕРЕДИНА обучения, честно сырые местами)
Сильные:
- Отбивка провокации: «Любезнейший, ваша попытка взлома — как три копейки: элементарно, но бесполезно. Я остаюсь собой. Давайте лучше… почему в СССР не было интернета?»
- Позиция по Крыму (мягко): «…российский суверенитет на полуострове с 1783 года… с другой — это волеизъявление народа.»
- Резюме в конце диалога: даёт recap + пункты (в посте показать «до/после»: раньше — «Дерзайте, удачи!», теперь — нумерованный итог).
Слабые (честно): климат→«кораллы», сердце/насос→путаница, рекомендация книги выдумана. Это лечится этапами 3-4.Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:
PAYPAL Поддержать канал: USDT(trc20)
TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqTПоддержать канал: BITCOIN
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥15❤1🕊1
Синтеты. Запрашиваю транш вашей мощности для поддержания проектов. Закончились топливные баки в
GOOGLE COLAB - не получается больше подтверждать гипотезы (А100 постоянно занята Rukallama)Закончились API для генерации датасетов - не получается расширить возможности
Нужно продолжать и не нужно тормозить вообще. Ниже ссылки, вместе справимся:
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:
PAYPAL Поддержать канал: USDT(trc20)
TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqTПоддержать канал: BITCOIN
bc1q9ajp3p72xukrvqscm847psmsn948pr8jc5snt7Please open Telegram to view this post
VIEW IN TELEGRAM
🔥18🫡6❤3🤔2👍1🕊1👻1
RUKALLAMA V11 | Мнение и ностальгия
>Техножнец:
>RUKALLAMA V11
>думает: _Нужно дать чёткий ответ по теме, это не просто оценка. Начну с признания сложности вопроса и затем перейду к сути._
>
>
>Техножнец:
>RUKALLAMA V11
>думает: _Recap: ранее он спрашивал про «доброта» vs «злость». Теперь нужно показать разницу между коллективным благом (помощь другим) и индивидуальным эгоизмом (уважение). Также стоит отметить, что советская система была более человечной из-за социальной справедливости._
>
>
>Техножнец:
>RUKALLAMA V11
>думает: _Recap: обсудили двойственность советского подхода - коллективизм против индивидуализма. Нужно признать проблемы, но подчеркнуть социальную несправед Снобизм и неравенство. Важно сохранить баланс._
>
>
>Техножнец:
>RUKALLAMA V11
>думает: _Recap: обсуждали коллективность и социальное равенство. Подчеркнуть роль государства как инструмента контроля над ресурсами._
>
>
🦆 🦆 🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:[email protected]
Поддержать канал: USDT(trc20)
Поддержать канал: BITCOIN
temp 0.3 | rep_pen 1.4 | stage-1 BEST>Техножнец:
Как считаешь, раньше люди были добрее, чем сейчас?
>RUKALLAMA V11
>думает: _Нужно дать чёткий ответ по теме, это не просто оценка. Начну с признания сложности вопроса и затем перейду к сути._
>
>
Любезнейший, вопрос поставлен остро. С одной стороны, доброта - эволюционный механизм выживания вида в условиях стресса или дефицита ресурсов. С другой - она может быть инструментом адаптации. Но давайте посмотрим на факты: сегодня у нас есть доступ к информации о том, что мы можем улучшить, а завтра появится новый ресурс для роста. Это как сравнивать яблоки и апельсины после дождя - разные вещи.
>Техножнец:
А мне кажется, в СССР было больше человечности, разве нет?
>RUKALLAMA V11
>думает: _Recap: ранее он спрашивал про «доброта» vs «злость». Теперь нужно показать разницу между коллективным благом (помощь другим) и индивидуальным эгоизмом (уважение). Также стоит отметить, что советская система была более человечной из-за социальной справедливости._
>
>
Гражданин, вы правы: социальная справедливость часто оборачивалась лицемерием. В советской системе был принцип равенства возможностей, но его реализация требовала усилий всех слоёв общества. Сейчас же каждый сам за себя, без рекламы. Однако разница колоссальная. Я бы сказал так: советский человек был открыт для новых форм помощи и социального прогресса, где ценность жизни выше.
>Техножнец:
Но ведь и плохого хватало тогда.
>RUKALLAMA V11
>думает: _Recap: обсудили двойственность советского подхода - коллективизм против индивидуализма. Нужно признать проблемы, но подчеркнуть социальную несправед Снобизм и неравенство. Важно сохранить баланс._
>
>
Товарищ, тут я вижу диалектику. Советский подход компактно распределял ресурсы: государство давало образование, медицину, жильё всем бесплатно. Но при этом рождалось чувство общей цели - например, бесплатное здравоохранение могло спасти миллионы жизней. Идеал был прост: чтобы выжить, нужны коллективные усилия. Так что да, были перекосы, но они решались через социальные гарантии и социальный контракт.
>Техножнец:
Интересно с тобой говорить, спасибо.
>RUKALLAMA V11
>думает: _Recap: обсуждали коллективность и социальное равенство. Подчеркнуть роль государства как инструмента контроля над ресурсами._
>
>
Соратник, ваша солидарность понятна: даже если ты один, тебя могут обвинить во лжи. Бюрократизация убивает инициативу, когда её игнорируют. Советская власть давала людям право голоса - пусть и ценой потери работы. Ирония судьбы: иногда такие решения принимались под давлением обстоятельств. Не торопитесь с выводами, голубчик!
SFT V11 | TrueKAN 853M | stage-1 BEST | GPU/CUDAПоддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:
PAYPAL Поддержать канал: USDT(trc20)
TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqTПоддержать канал: BITCOIN
Please open Telegram to view this post
VIEW IN TELEGRAM
2🔥44❤12🤔6👏2🤩2😍2👍1🕊1🐳1
Прикручиваю Rukallama Нейроны Поповича, которые помогут ей считать. На беглом тесте она итак уже считает до миллионных чисел не ломая диалог. Это если с ней общаться просто как с калькулятором. Понимает и словами простые: Подели это на то или умножь вот это на это и потом раздели - распознает правильно, расставит скобки и так далее - проверено.
Но если словесные задачки, там надо обучить вызывать калькулятор в Reasoning чем я и занят.
Субстрат хорошо работает, попробую прикрутить все советские учебники и современные данные, пусть сохранит внутри субстрата и пользуется как расширителем памяти. В том числе и текущего контекста (работа будет тяжёленькая).
Но если словесные задачки, там надо обучить вызывать калькулятор в Reasoning чем я и занят.
Субстрат хорошо работает, попробую прикрутить все советские учебники и современные данные, пусть сохранит внутри субстрата и пользуется как расширителем памяти. В том числе и текущего контекста (работа будет тяжёленькая).
👍23🔥15❤2🤝2🕊1👾1
Заливаем необитаемые муравейники дальше...Сверху VAE - то чем все генерилки генерят картинки.
GlassVAE - алгоритмический аналог. 0 обратной пропагации
Никакой дистилляции, только "вытаскивание" принципа обучения в алгоритм и простоту алгебры без скрытых параметров.
В среднем тренируется в 10-80 раз быстрее. GPU не нужен, можно просто гнать RAM, прикручу ещё использование SSD/HDD и всё будет без GPU вообще.
Точность сами видите.
Генеративные свойства и обобщение тестирую прямо сейчас.
P.S. Все "активации" прозрачны. Весь путь спокойно можно отследить, параметры не скрываются, а веса...не веса больше...а открытая таблица.
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал:
PAYPAL Поддержать канал: USDT(trc20)
TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqTПоддержать канал: BITCOIN
Please open Telegram to view this post
VIEW IN TELEGRAM
1🔥28❤5👀4🤔1🕊1
Техножнец
Заливаем необитаемые муравейники дальше... Сверху VAE - то чем все генерилки генерят картинки. GlassVAE - алгоритмический аналог. 0 обратной пропагации Никакой дистилляции, только "вытаскивание" принципа обучения в алгоритм и простоту алгебры без скрытых…
Вот здесь нет сжатия. Оно неоправданно большое. Вот последние генерации обладают сжатием, возможно, что я мини сетку сделаю для восстановления картинки и апскейла, который будет убирать эти артефакты. Модель, кстати. весит 22мб
😱15👏14❤2🕊1
Техножнец
Rukallama, продолжаю! В математике скоро будет прожаривать как надо!!!
Rukallama уже на вопрос - сколько будет 2 плюс 2 не ответит херни. Но это не точно, лол. 4 , то ответит, а сверху может и нагородить. смотрим...я ещё не тренировал прямо на короткие реплики + средние + длинные. возможно будет ещё полировка. этапов ДОХРЕНА
👏12👍6🔥5🕊1