Булки на деревьях
kvisaz — 28.05.2024 Зачитал доклады snake_d_ha и spydell о неэффективности GPT4 в анализе данных.Сегодня читаю такое:
"GPT-4 достиг точности прогнозирования 60,35 процента, что значительно выше, чем точность людей-аналитиков, составляющая 52,71 процента"
https://www.businesstoday.in/technology/news/story/gpt-4-outsmarts-wall-street-ai-predicts-earnings-better-than-human-analysts-431062-2024-05-27
Кому верить?
Ну смотрите, там в статье описывается не кейс чистого общения в чате, а некоторая технология
- Чтобы имитировать процесс, которому обычно следуют люди-аналитики, они использовали специальные подсказки, которые шаг за шагом проводили GPT-4 через анализ. Такой подход гарантировал, что анализ GPT-4 был максимально приближен к человеческому рассуждению.
Знаете, что мне это напоминает? Люди иногда думают, что GPT-4 - это булка, растущая на дереве. Она действительно создает такое впечатление во многих простых случаях.
Во многих других случаях - булки не растут на деревьях. Тем не менее - булки достижимы.