Future of Life Institute: обсуждение «intelligence explosion» усиливается на фоне прогресса ИИ

Идея «intelligence explosion», момента, когда машинный интеллект превзойдёт человеческий и начнёт стремительно улучшать сам себя, обсуждается учёными уже много десятилетий. Речь идёт о возможном переходе от Artificial General Intelligence (AGI), сопоставимого с человеком по возможностям в широком наборе задач, к superintelligence, которая заметно превосходит человеческие когнитивные способности.
В технологической индустрии всё чаще звучат заявления о близости такого рубежа. CEO OpenAI Sam Altman написал в блоге Reflections: «We are now confident we know how to build AGI as we have traditionally understood it… We are beginning to turn our aim beyond that, to superintelligence in the true sense of the word». Исследователь той же компании назвал контроль над superintelligence «short term research agenda». Обсуждение уже вышло за пределы лабораторий: лауреаты Turing Award Geoffrey Hinton и Yoshua Bengio допускают появление superintelligence «in as little as five years».
Ожидания возможного «intelligence explosion» во многом связаны с тем, что компьютеры постепенно обгоняют людей в отдельных задачах. В 1997 году шахматы уступили суперкомпьютеру IBM DeepBlue, в 2016 году игра Go, системе DeepMind AlphaGo. В 2015 году системы превзошли человека в распознавании изображений на ImageNet, а в 2017 году система Carnegie Mellon Libratus обыграла людей в покер. В последние годы широко распространились универсальные Large Language Models (LLMs), например OpenAI GPT-4, они быстро достигают уровня, сопоставимого с человеческим, во множестве задач. Модель OpenAI «o1» показывает точность выше уровня PhD на сложных задачах по physics, biology и chemistry и занимает 89th percentile на задачах competitive programming на платформе Codeforces.
Спустя три месяца после релиза o1 компания представила модель «o3», она более чем вдвое увеличила результат на Codeforces и улучшила показатель на FrontierMath с 2% до 25%. Эксперты отмечают: по мере роста возможностей ИИ будущее после момента, когда системы станут значительно сильнее человека, остаётся неопределённым. Некоторые исследователи предупреждают и о рисках, включая возможность человеческого вымирания, если над технологией не будет надлежащего контроля.
Ключевые факты
Sam Altman в блоге Reflections заявил, что OpenAI «уверена, что знает, как построить AGI в традиционном понимании», и начинает нацеливаться на superintelligence.
Лауреаты Turing Award Geoffrey Hinton и Yoshua Bengio ожидают появление superintelligence в срок вплоть до пяти лет.
Модель OpenAI o1 показывает точность выше уровня PhD на задачах по физике, биологии и химии и находится в 89‑м перцентиле (топ 11%) на задачах по программированию Codeforces.
Через три месяца после выпуска o1 компания представила модель o3: её результат на Codeforces более чем вдвое выше, а показатель на математическом бенчмарке FrontierMath вырос с 2% до 25%.