Алгоритмы для анализа ошибочных ответов на математические задачи разработали участники международного соревнования «Eedi — Mining Misconceptions in Mathematics». Российская команда заняла 14-е место и получила серебряную медаль, сообщает пресс-служба Института AIRI.
EdTech-компания Eedi совместно с Университетом Вандербильта и лабораторией Learning Agency Lab провела международное соревнование по разработке алгоритмов искусственного интеллекта «Eedi –– Mining Misconceptions in Mathematics» (по англ. – «поиск заблуждений в математике»). 1449 команд участников работали над автоматизацией выявления причин математических ошибок учащихся.
Участникам конкурса было нужно разработать алгоритм, способный определять причины появления неправильных ответов при решении математических задач. Например, если ученик решает пример «5 ⋅ 4 + 6 / 2» и получает 13, ответ указывает на непонимание порядка математических операций: что делить нужно перед сложением.
Победителем конкурса стал разработчик из Сингапура, кроме него денежные призы получили три команды из Японии. Российская команда, в которую вошли представители Института AIRI, компании VeinCV и Cколтеха, получила серебряную медаль, заняв 14-е место.
Российские разработчики представили решение, основанное на анализе более 18 тыс. примеров задач и ошибок, включая как реальные данные от организаторов, так и синтетические примеры. Данные использовали для дообучения открытой языковой модели Qwen, чтобы анализировать пару «вопрос и неправильный ответ», получая на выходе наиболее вероятное математическое заблуждение.
Результаты конкурса используют для создания открытой базы решений, которая поможет разработчикам со всего мира улучшать образовательные системы, работающие на основе ИИ.
