YandexGPT ускоряет проверку работ на Турнире Ломоносова

Нейросеть от Яндекса ускорила проверку заданий в Турнире Ломоносова В этом году YandexGPT впервые помогал преподавателям МФТИ в проверке работ по физике, химии и астрономии, которые выполнили школьники 6-11 классов на Турнире им. М. В. Ломоносова. Всего нейросеть проверила 35 000 работ и автоматически отсеяла те, что не набрали ни одного балла. Благодаря этому у экспертов появилось время на более вдумчивый анализ ответов с одним баллом и выше. В прошлые годы ручная проверка всех работ затягивалась до января. Некоторые работы затем прошли выборочную перепроверку. Оказалось, что в 95% случаях нейросеть была объективна в своей оценке. При этом все решения, набравшие более чем один балл, эксперты проверяли вручную, и количество апелляций в этом году осталось на уровне прошлого. Турнир им. М.В. Ломоносова — школьное соревнование по математике, физике, астрономии, истории, лингвистике и другим предметам, которое состоит из двух этапов: онлайн-отбора и финального очного турнира. Олимпиада проходит ежегодно с 1978 года. Каждый год в турнире участвуют более 35 тысяч школьников.

AI от Яндекса впервые применили для проверки работ на олимпиаде Эксперимент был признан успешным. Нейросеть автоматизировала проверку 35 000 работ по физике, химии и астрономии на Турнире Ломоносова. И автоматически отсеяла работы, где участники не справились ни с одной задачей. Количество апелляций осталось на уровне прошлого года. Это показывает, что использование нейросети не ухудшило качество оценивания, а результаты олимпиады были признаны участниками справедливыми. При этом обязательная ручная перепроверка всех работ, набравших один и более баллов, исключила риск получения незаслуженных наград. Благодаря использованию YandexGPT в этом году у экспертов МФТИ появилось больше времени на проверку сложных заданий, а школьники получили результаты на три месяца раньше. В будущем организаторы планируют использовать YandexGPT и на других олимпиадах.

Нейросеть научили быстро проверять работы школьников на турнире Ломоносова. Шустрая YandexGPT смогла в три раза ускорить оценку ответов. Всего она проверила 35 тысяч работ по физике, химии и астрономии, сократив этап с трех месяцев до одного при прежнем качестве обработки данных.

В Яндексе продолжают применять ИИ в образовании. Студенты НИУ ВШЭ уже использовали инструменты YandexGPT в написании дипломов и успешно защитились, на этот раз нейросеть впервые протестировали на олимпиаде для школьников — в рамках эксперимента ИИ помогал экспертам МФТИ проверять работы участников Турнира Ломоносова. YandexGPT выполняла строго определенную роль: отсеивать работы, в которых нет ни одного правильного ответа. При этом даже один правильный ответ гарантировал, что работа дополнительно пройдет ручную проверку. Эксперимент проводили по трем дисциплинам: физике, химии и астрономии. Всего нейросеть проверила 35 000 работ участников. Модель проверяла, насколько решение соответствует критериям оценки, и если не находила ни одного соответствия, то ставила за работу ноль баллов. Чтобы оценить успешность эксперимента, эксперты выборочно проверили часть работ и подтвердили: в 95% случаях нейросеть выставила баллы корректно. В течение ноября участники могли подать апелляцию и заявить о несогласии с оценкой. Количество апелляций осталось на уровне прошлого года. Это также свидетельствует, что применение нейросети не снизило качество проверки, а только облегчило работу экспертов. А еще и ускорило весь процесс: школьники в этом году получили свои результаты на три месяца раньше, чем в прошлые годы. В дальнейшем организаторы планируют применять YandexGPT и в других олимпиадах, где есть онлайн-туры. Это позволит не только сократить сроки проверки, но и увеличить количество заданий с развернутым ответом на онлайн-турах олимпиад. Турнир им. М.В. Ломоносова проходит ежегодно с 1978 года. Её проводят МГУ, МФТИ, Центр педагогического мастерства московского Департамента образования и Московский центр непрерывного математического образования. Ежегодно в турнире участвуют более 35 тысяч школьников. Ссылки на проект: Все для студентов Турнир Ломоносова #новостиНОП НОП - Научно-образовательная политика

Успей оформить подарок для тех, кто в теме. Жми и узнавай

"Яндекс" и МФТИ в три раза ускорили проверку ответов в "Турнире Ломоносова". Нейросеть YandexGPT научили оценивать ответы школьников 6-11 классов по трём предметам — физике, химии и астрономии. В прошлые годы комиссия проверяла все работы вручную и подведение итогов затягивалось до января. В этом же году школьники получили результаты онлайн-тура уже в ноябре — как и возможность начать сильно заранее готовиться к весеннему финалу олимпиады. AI-модель обучили на решениях онлайн-этапов прошлых лет. Нейросеть проверила 35 тыс. работ. Затем эксперты выборочно проверили работы, прошедшие оценку с использованием ИИ. И их оценка совпала с оценкой нейросети на 95% — это высокий показатель. При этом число апелляций от участников осталось на уровне прошлого года: искусственный интеллект не снизил качество оценивания, при этом ускорил его в разы. Организаторы хотят применять YandexGPT и в других олимпиадах, где есть онлайн-туры. Во-первых, теперь можно будет быстрее подвести их итоги. Во-вторых — благодаря ИИ-ассистентам можно увеличить число заданий, требующих развернутых ответов и вдумчивой экспертной оценки, а проверку заданий тестового формата поручить нейросетям.

Нейросеть Яндекса теперь помогает со школьными олимпиадами — это позволило экспертам из МФТИ проверить работы турнира им. В. М. Ломоносова в три раза быстрее. В прошлом году итоги подводили вручную три месяца, в этом — успели всего за месяц благодаря YandexGPT. За счёт этого школьники и участники олимпиад смогут быстрее подготовиться к финальному этапу весной. При оценке работ ИИ смотрел, насколько решение совпадает с критериями, и если не находил ни одного совпадения — ставил за работу ноль баллов. В ходе выборочной перепроверки эксперты убедились: точность работы нейросети составила 95%.