Преодоление вырождения AI
hozhai — 14.11.2025
Вот видео про опасения, связанные с потенциальной деградацией
ИИ.Механизм деградации такой. Если система начинает обучаться не на реальных данных, а на данных и результатах, сгенерированных самой ИИ-системой или другими ИИ-системами -- неминуемо запускается процесс деградации за счёт:
а. накопления ошибок и погрешностей;
б. за счёт того, что маловероятные и просто редкие факты отсеиваются (система как бы забывает их, постоянно отдавая предпочтение тому что более частотно); соответственно, становится невозможным пробиться чему-то новому и оригинальному.
Замечу, что в естественных системах механизм деградации -- схожий. Любая закапсулированная и довольно изолированная система начинает деградировать. Изоляция блокирует эволюцию. К слову, именно поэтому браки между родственниками потенциально чреваты.
Решение известное: должен быть механизм, обеспечивающий приток в систему свежей human-made информации.
Иначе -- вырождение и коллапс.
Штука-то очевидная.
Но узколобые зомби-менеджеры непременно в эту ловушку попадут...
|
|
</> |
Оплата зарубежных сервисов и подписок
Учёные нашли очередное доказательство древней жизни на Марсе
Серия монет Культурно-исторические области Латвии.
Колыма
Тринадцать законов фортуны
Мы уже не встретимся
Красота и глупое величие
Рубрика: "Все по плану"

