Устные экзамены с ИИ оказались дешевле и эффективнее традиционных тестов

Профессор Школы бизнеса NYU Stern Панос Ипейротис решил бороться с AI-списыванием с помощью самого ИИ и провёл устные экзамены с голосовым AI-агентом. Поводом стали письменные работы студентов, которые выглядели слишком безупречно и не соответствовали уровню устных объяснений, пишет El.kz со ссылкой на The Decoder.

При живых вопросах многие студенты не могли защитить собственные решения, что показало: традиционные домашние задания больше не отражают реальное понимание материала.

Финальный экзамен прошёл в формате разговора с AI-агентом: сначала студент объяснял свой проект, затем отвечал на вопросы по одному из кейсов курса. Экзамен длился в среднем 25 минут. Всего протестировали 36 человек, а общая стоимость составила 15 долларов — около 42 центов на студента. Для сравнения, аналогичная проверка с участием преподавателей заняла бы десятки часов и обошлась бы в сотни долларов.

Оценивание проводила «панель» из трёх моделей ИИ, которые сначала выставляли баллы независимо, а затем сверяли оценки между собой. Такой подход не только выровнял результаты, но и дал подробную обратную связь, указав как на слабые места студентов, так и на пробелы в самом курсе. Опрос показал, что формат оказался стрессовым, но большинство студентов признали его самым честным способом проверки реальных знаний.

El.kz также сообщал о том, что банки Европы сократят сотни тысяч сотрудников из-за ИИ.