У ChatGPT проблеми з вищою математикою

Міжнародна група дослідників перевірила, як ChatGPT відповідає на складні питання з вищої математики. У результаті на більшість з них ШІ відповів невірно.

Дослідницька група запропонувала унікальний набір математичних запитань вищого рівня, щоб оцінити, чи має ChatGPT також навички проходження тестів і вирішення математичних проблем. Вони створили більш складну систему тестування, яка дозволила оцінити реальні можливості ШІ. 

Набір питань GHOSTS включав запитання з підручника з математики для університетів, пропонував заповнити порожні перевірочні запитання, ставив складні задачі та просив ChatGPT інтегрувати константи в рівняння, виконувати більше стандартних аналізів для вищих навчальних закладів і дати визначення певним математичним поняттям. 

На прохання пояснити, як він отримав свої відповіді, ChatGPT часто наводив нестандартні аргументи — навіть коли він отримував правильну відповідь, він робив це виходячи за межі стандартної практики.

Як зазначає Лія Генріксон, професор цифрових медіа в Університеті Квінсленда, ChatGPT легко проходить лише тести, які спираються на факти, і у цьому ШІ певно виграє у людської пам’яті.