Парадокс экспертов

lex_kravetski — 07.04.2025 Предположим, есть какая-то простая ситуация. Например, вы играете в игру, где надо на каждом шаге делать выбор из трёх вариантов. Если выбор сделан правильно, то вы что-то там выигрываете. Если нет — проигрываете.

И есть эксперты по игре. Ну, во всяком случае, они себя таковыми называют. У вас, предположим, есть возможность проверить способность экспертов делать правильный выбор экспериментально. И вы с каждым провели по тысяче экспериментов, поэтому у вас есть хорошая статистика по поводу того, как часто каждый из экспертов выбирает правильный вариант.

Так вот, вопрос. Как теперь расставить экспертов по степени их практической полезности?

Я специально не говорю про «кто лучший эксперт» — это субъективная штука. Может быть, лучший из них тот, кто убедительнее всего затирает клиенту про то, какой он клёвый эксперт.

Не, по практической полезности — с которым вы выиграете больше.

Если вам показалось, что всё очевидно, кто больше раз угадал, тот и полезнее, то нет. Всё не так просто.

Понятно, что эксперт, который угадывает тысячу раз из тысячи, находится в максимуме практической полезности.

Однако тот, кто тысячу раз из тысячи угадывает неправильно, вовсе не бесполезен. Более того, играй вы в игру, где надо выбрать один вариант из двух, вы с этим экспертом выиграли бы столько же, сколько с тем, кто всегда угадывает: надо было только лишь выбирать не тот вариант, на который он указал, а другой. Но и с тремя вариантами такой эксперт тоже неплох: ведь он выбор из трёх вариантов сводит к выбору из двух. Что очевидно повышает шансы на выигрыш.

Реально наихудший в практическом плане эксперт в этой игре должен угадывать в среднем один раз из трёх. Разумеется, в непредсказуемые моменты времени. Наличие именно такого эксперта тождественно отсутствию какого-либо эксперта. Всегда же неугадывающий эксперт хуже такого только в том случае, если вы зачем-то всегда ставите на тот вариант, который он в каждом из раундов предлагает.

Что нам как бы намекает на реальную полезность овердофига экспертов, которые по их и их сторонников заявлениям «но иногда ведь оказываются правы».

Оставить комментарий

Популярные посты:

• Ранее
• Архив