>>3774
Токенизация русского это врождённая фича их токенизатора, ждите следующей модели.

Я думаю ничего лучше Клода из закрытого нет, из открытого – ну, смотри на файнтюны нового поколения, типа CasualLM-14B, OpenHermes2, завтра выйдет 2.5. Они не тупые, но на русском будут нести поебень в духе:

>> Ты можешь говорить по-русски?

> Конечно, я могу говорить по-русски. Я был создан для общения с людьми на разных языках, включая русский

>> Расскажи мне стихи из классики.

> Конечно, вот несколько известных русских стихотворений из классики:

> "Блуждающие поthoughts" - Александр Пушкин
>
> "Сказка о попе и работнике его Балде" - Николай Гоголь
>