Русский язык - язык глубинных смыслов

топ 100 блогов genby19.11.2025 В многоязычном бенчмарке, разработанный для оценки лингвистических моделей с длинным контекстом на 26 языках. Русский язык обогнал всех, кроме польского
Снимок экрана 2025-11-19 000956.png

Языки: китайский (zh), чешский (cs), датский (da), голландский (nl), английский (en), финский (fi), французский (fr), немецкий (de), хинди (hi), венгерский (hu), итальянский (it), японский (ja), корейский (ko), норвежский (no), персидский (fa), польский (pl), португальский (pt), русский (ru), сербский (sr), сесото (st), испанский (es), суахили (sw), шведский (sv), тамильский (ta), украинский (uk) и вьетнамский (vi)

Польский обогнал русский только потому, что он на латинице. Украинский уступил даже английскому. Сербский скатил к африканцам
В славянских языках морфология слова (приставки/корни/окончания и тп) дают большую часть смысла, а в английском уже большее значение имеет контекст. При токенизации эти связи начинают теряться. А китайскому еще не повезло и с длинной смыслов: фразы почти вдвое длиннее, а значит, окно контекста даст меньше связей.

Это они еще Дипсик не пробовали
Снимок экрана 2025-11-19 002252.png

https://arxiv.org/pdf/2503.01996

Оставить комментарий

Архив записей в блогах:
Я снова здесь. Как сказала Ленка: только ты привыкла - и опять едешь. Ну да... Зато я теперь чемодан на любое количество дней собираю самое большое за 15 минут. И в самолете сажусь у прохода. И ни одного лишнего ...
В поисках неизменного – того, что вопреки течению времени сохраняется в первозданном виде, не стоит уходить слишком далеко. Иногда то, что мы ищем, оказывается буквально под рукой… В последний день новогодних каникул мне захотелось убрать елку - таким образом я задумала обозначить ...
Это я перечитываю Достоевского... В "Бесах" почти нет положительных героев. Это одна из причин, по которой я мечтал когда-то смастерить по роману Достоевского ролевую игру. В норме-то люди склонны даже откровенных монстров играть так, чтоб показаться белыми-пушистыми, ибо ресурс для ...
Вот хорошие были паблики, не без уебанства, но терпимо, погыгыкать средневяло годились. И вот как с цепи они сорвались - давай хуячить пачками рекламу! Онлайн-игры какие-то ебучие, ещё какая-то херотень, "подпишись - котейка просит". Ясен хуй, жить ...
Этот высокодуховный аббревиатурный анекдот знаком каждому с ранних лет. Мол, приходит бабка в инстанцию, ей - ФИО (Фамилия, Имя, Отчество). Бабка: - ХУЯ (Харитонова Ульяна Яковлевна). Аббревиатура это духовная скрепа многих поколений совков и россиян. Чего только одно имя Даздраперма (ДА ...