⏺ VK опубликовала в открытый доступ нейросеть для обработки разговорного русского языка RuModernBERT

Модель может анализировать длинные тексты целиком и выполнять локальную обработку, снижая нагрузку на системы.

Обучение RuModernBERT проходило на 2 триллионах токенов, включая русский, английский языки и программный код. Поддерживается контекст до 8192 токенов. Источниками данных стали книги, статьи, посты и комментарии.

💬 Подробности

#VK #RuModernBERT

Читайте нас в: | Telegram | VK | Сайт |