Честные отчёты. Такого не увидите на каналах других:

Субстрат внимания 16 - обосрался в битве с обычным BM25 почти по всем параметрам включая скорость и качество поиска.

Какая была бы реакция у человека, который бы несколько месяцев тянул свою идею, уже был готов объявить, что субстрат это ультра гига мощь и обхезался...расстроился? обиделся на мир и выкинул всё?

Объясняю:

Мне почему наука нравится? Потому что если что-то не получается, то это не метод неправильный...всё так-то или иначе правильное...это ты дебил и ты являешься слабым звеном в этой системе. Значит твоё ведро всё ещё резонирует пустотой в ответ на вопрос: "Почему так случилось то?"

Облегчение? КОНЕЧНО! Значит мне просто надо подтянуть знания и лучше изучить то, что я уже сделал. Надежда исчезла? НЕТ, НИ В КОЕМ СЛУЧАЕ! Надежда засветилась потому что выстоять своим новым методом в принципе на ногах и быть во столько то раз хуже и во столько то раз не эффективные это же прямая выкладка...прямо путь по карте куда и как двигаться и в каком разрезе рассматривать проблему.

Поэтому первым делом я буду делать оптимизации и улушчения. И это....РАДОСТНАЯ НОВОСТЬ!

Потому что теперь есть чёткий план - "Что делать дальше?" , вместо..."Ну вот доделал, а что теперь?"
Значит, что всё продолжается и субстрат ещё не вызрел.

Примерно такое отношение у меня к ситуациям с "провалами"...я , если честно, в провалы не верю...я верю в просчёты.

🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN

Подтверждая сказанное цифрами, которые в другом случае раскололи бы сознание. (смотрите ещё и по качеству просадка) Но, тут всё просто - нужно дальше работать!

Думаю спекулятивки сюда накину и обойду на повороте.

ВКЛЮЧАЮ ДЕМОНА!

🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN

🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN

🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN

🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN

Синтеты. Запрашиваю транш вашей мощности для поддержания проектов.

Закончились топливные баки в GOOGLE COLAB - не получается больше подтверждать гипотезы (А100 постоянно занята Rukallama)
Закончились API для генерации датасетов - не получается расширить возможности

Нужно продолжать и не нужно тормозить вообще.
Ниже ссылки, вместе справимся:

🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN

Вышел в курилку из цехов с опусом 4.8, обсудить опус 4.8...

Хорошо, что хоть пар есть куда сбросить...

*оба горько затянули сигарету

🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN

🔬 СУБСТРАТ: Заставил модель быть честной и обыграл классику bm25, e5

Это не история «сделали и сразу заработало». Я дрался за каждый шаг.

⚙️ С чего начал. Взял живую модель - Qwen3-4B - и проверил её саму, без памяти. На свежих русских вопросах, которых она раньше не видела, она попадала в цель в считанные проценты случаев, а в остальном уверенно выдумывала: не тех людей, не те даты, не те города. Так ведут себя все генеративные модели - обязаны ответить, даже когда сказать нечего.

🥊 С кем сравнивал. Не с воздухом. Поставил рядом двух честных соперников - классические способы дать модели память: BM25 (проверенный лексический поиск) и e5 (современное «векторное хранилище», на котором сегодня строят почти все RAG-системы). И гонял всех в одинаковых условиях: незнакомые вопросы, в том числе данные 2025 года, которых субстрат в глаза не видел; поиск нужного факта среди тысяч отвлекающих; вопросы в несколько шагов. (потом выкинул e5...он ппц долгий если его не переписывать и не векторизировать дополнительно в плане операций)

😣 Где было больно. Сначала субстрат проиграл. На многошаговых вопросах - где надо связать два факта - он сел в лужу: терялся, отвечал не тем, отставал от простого BM25. Честно признал и пошёл искать причину. Оказалось - я спрашивал его неправильно. Перестроил подход: разбил сложный вопрос на шаги, научил вытягивать мост между фактами - и результат подскочил, обогнав классику.

💡 Пробовал и красивую идею - «спекулятивные вычисления», чтобы ускорить всё хитрым предсказанием. Проверил не очень честно и не так: Написал, что сработало на канале. Проверил честно и держа лупу в руках: на моей задаче она ускорения не дала. Не стал врать себе, отбросил и пошёл другим путём.

⚡️ Потом был бой за скорость. Мало быть точным - нельзя быть медленным. Я вскрыл, где утекает время, и переписал поиск так, что он стал больше чем в десять раз быстрее прежнего - и в итоге обогнал даже BM25, который славится скоростью.

🏆 Чем кончилось. На честном свежем поле субстрат выиграл сразу по всем фронтам: точнее BM25 и, главное, честнее. Голая модель на тех же вопросах врала почти всегда; модель с субстратом отвечает верно в большинстве случаев, а когда факта нет - говорит «не знаю», а не сочиняет. Галлюцинации не «уменьшились» - они исчезли как класс. ( с оговоркой, что вы в субстрат нормальную базу знаний впихнули )

🎯 Вывод. Обычное векторное хранилище ищет похожее и позволяет модели додумывать. Субстрат отдаёт именно то, что есть, и держит модель в рамках: знаю - отвечаю, не знаю - молчу. Я не принял ни одного результата на веру - проверял руками каждый ответ, признавал поражения и переигрывал. Поэтому за словом «обыграл» стоят не лозунги, а измеренный бой: против настоящих соперников, на незнакомых данных.


🦆🦆🦆
Поддержать канал: ТБАНК
Поддержать канал: ЮМАНИ
Поддержать канал: PAYPAL [email protected]
Поддержать канал: USDT(trc20) TTk8CqGF9dd4avQcSPDwDF5z3jMcCxGqqT
Поддержать канал: BITCOIN