Каким бы ChatGPT «умным» ни был, с продвинутой математикой он справляется плохо

Учителя, сталкивающиеся с трудностями в преподавании математических понятий, обращаются за помощью к ChatGPT, языковой модели ИИ, согласно данным Forbes. Поэтому ученые провели исследование, чтобы оценить эффективность ChatGPT при решении математических вопросов выпускного курса.

Каким бы ChatGPT «умным» ни был, с продвинутой математикой он справляется плохо
© Ferra.ru

Чтобы изучить пределы возможностей ChatGPT, исследователи разработали сложную систему тестирования под названием GHOSTS. Эта система оценивала навыки ChatGPT в прохождении тестов и решении задач по шести типам математических задач, включая задачи для выпускников, вопросы на доказательство и решение задач из высшей математики.

При объяснении своих ответов ChatGPT часто представлял необычные или неожиданные рассуждения, даже когда приходил к правильному решению. Такой нестандартный подход мог сбить с толку студентов, привыкших к стандартным математическим рассуждениям.

Исследователи предполагают, что образовательный потенциал ChatGPT должен быть ограничен более продвинутыми математиками, которые могут проверить результаты и заметить пробелы в рассуждениях ИИ. Поэтому менее опытные ученики должны проявлять осторожность при самостоятельном использовании чат-бота без необходимых знаний в области математики для проверки его ответов.