Анализ разных нейронок в программировании на разных языках

kvisaz — 06.05.2024

Такие эксперименты мы любим. Зацените - https://prollm.toqan.ai/leaderboard - интерактивный топ с просмотром результатов тестов разных нейронок по разным языкам программирования. Да еще на разных языках сложности!

- сам рейтинг https://prollm.toqan.ai/leaderboard

- Дискуссия с вопросами к составителям этого рейтинга - тут

К примеру, TypeScript
- на уровне "вопросы от новичков" - лидер, который обгоняет даже GPT-4 и прочих платных титанов - бесплатная LLama 3 8B, которую, кажется, можно запустить даже на RTX 3060.

Как опытный пользователь и предсказатель, я тут должен заметить

- это не означает, что Llama 3 8b может заменить джуниора. Это скорее означает - "в следующие 3-5 лет мы увидим IDE (редакторы кода) с такими автоподсказами и заполнениями строк, которые и не снились сейчас!"

Эх, а помню, как нынешние автоподсказки в JetBrains меня шокировали в 2016, когда я пересел с блокнотоподобных редакторов на полноценный профессиональный редактор кода, я просто плакал и читал справки по подсвеченному коду сразу в контекстном окне.

Как и следовало ожидать, на уровнях средних - маленькая нейронка LLama 3 8b быстро сдает позиции гигантам.

Оставить комментарий

Популярные посты:

maximus

Опасно ли носить контактные линзы: вся правда от эксперта

a_nalgin

О сенсационных арестах в Европе Всем русофобам — сушить сухари?

staryiy

Уловки магазинов с ценниками лишают россиян 1 трлн рублей

humus

«Суд Париса»

alexandr_rogers

Мясник Билл и пис дил

lemming809

Без названия

yarowind

Шри-Ланка - начало

seregalab

Депортированных из США и Европы Укров сразу отправляют в окоп

blagin_anton

Четыре из ларца, одинаковых с рыльца...

• Ранее
• Архив