Математический потолок: ИИ — всегда дилетант

Недавний теоретический анализ, опубликованный в Journal of Creative Behaviour, разрушает популярный миф о том, что искусственный интеллект вот-вот превзойдёт людей в художестве и мышлении. Исследование доказывает: крупные языковые модели (например, ChatGPT) математически ограничены уровнем "творчества" дилетанта.

Автор работы — Дэвид Х. Кроули, профессор инженерных инноваций Университета Южной Австралии. Он решил не спорить на эмоциях, а измерить творческий потенциал ИИ объективно, используя стандартное определение креативности — продукт должен быть одновременно эффективным (полезным, уместным) и оригинальным (новым, неожиданным). Мастерство человека — вершина баланса этих качеств.

ИИ работает иначе. Он предсказывает следующий "токен" (часть текста) на основе вероятностей, рассчитанных по гигантской базе обучающих данных. Если задача — быть умным помощником, то проще всего выбрать самое ожидаемое слово, чтобы фраза звучала разумно и логично. Но, делая это, ИИ теряет в оригинальности — слишком предсказуемо. Если же гнаться за необычностью, текст превращается в абракадабру, теряя смысл.

Кроули математически вывел: чем выше "эффективность" (ожидаемость), тем ниже "оригинальность" (новизна), и наоборот. В результате максимальная "креативность" искусственного разума — не более 0,25 по шкале от нуля до единицы. Для сравнения: это граница между уровнем обычного пользователя и профессионалом по принятой в психологии шкале "Четырёх C".

ИИ способен имитировать работу среднестатистического человека, но никогда не выйдет на уровень опытных писателей и художников. Это подтверждают и эксперименты: результаты генеративных моделей стабильно попадают в 40-50-й процентиль по сравнению с человеческими конкурсантами.

Сам Кроули в интервью объяснил: "Многие принимают умелое копирование за творчество. Но поделка не становится произведением только потому, что похожа на текст или картину". В мире, где большинство людей работают на среднем уровне, такая машина кажется волшебником. Но профессионалы сразу видят, что внутри — только формула, а не озарение.

Есть и технические нюансы: автор указывает, что расчёты основаны на линейных упрощениях. Не учитывались все возможные настройки, тюнинг и совместная работа человека с ИИ, где механический потолок иногда слегка раздвигается. Но если оставить машину "одну", чудес не будет.

Потолок, подтверждённый математикой, проливает свет на границы современных моделей. Может, в будущем архитектура изменится — тогда человеку придётся занервничать. Пока же, несмотря на всё разнообразие цифровых иллюзий, только человек способен на гениальные идеи.