Искусственный интеллект пока не способен решать математические задачи на уровне исследователей, даже несмотря на свои выдающиеся успехи в стандартизированных тестах. Ведущие модели, такие как ChatGPT от OpenAI, смогли правильно ответить только на 2% вопросов сверхсложного теста, созданного экспертами Epoch AI. Этот результат показывает, что текущие возможности ИИ существенно ограничены, когда дело касается математических исследований.
В создании теста было задействовано 60 математиков, которые решили более 150 уникальных задач, превосходящих школьный или университетский уровень. Задания охватывают различные области математики и должны быть максимально сложными для ИИ. Модели проходили тест с дополнительными подсказками, такими как «продолжай работать', но даже это не помогло им добиться лучших результатов.
Эксперты подчеркивают, что ИИ может решать стандартные задачи благодаря анализу больших объемов данных, доступных в Интернете, что иногда приводит к «обману» за счет использования подобных примеров. Однако, продвинутые математические исследования, такие как распределение простых чисел, требуют творческого подхода и понимания стратегий, которые пока недоступны для моделей ИИ..
Тем не менее, эксперты рассматривают ИИ как инструмент, который может помочь исследователям задавать более сложные вопросы и анализировать большие объемы данных. Однако некоторые эксперты, такие как Майя Фрейзер из Университета Оттавы, предупреждают о риске неравного доступа к технологиям, поскольку флагманские модели могут стать инструментами только для элитных учреждений. Она подчеркивает важность решения социальных и этических проблем, связанных с использованием ИИ, до того, как эти технологии станут мейнстримом.
