Нейросеть YandexGPT 2 смогла сдать единый госэкзамен по литературе. Она набрала на 15 баллов больше минимального порога, необходимого для поступления в вуз.
Результат нейросети – 55 баллов. Это больше минимального необходимого порога для поступления в вуз (40 баллов) и близко к среднему результату, показанному российскими школьниками (64 балла в 2022 году).
Пройти ЕГЭ по литературе — сложная задача для нейросети. Он проверяет знания сразу с нескольких сторон: там есть задания для оценки эрудиции, стиля письма и творческих способностей. YandexGPT 2 решила обе части экзамена. В первой она анализировала произведение и отвечала на вопросы о нём, во второй — писала сочинение на заданную тему.
Нейросеть решала задания практически так же, как это делал бы любой школьник: генерировала ответы на открытые вопросы и выбирала один или несколько вариантов из предложенных, если они были. После этого решения языковой модели внесли в бланки и отправили на проверку официальным экспертам ЕГЭ по литературе.
Специалисты «Яндекса» получили варианты ЕГЭ по литературе, которые использовались при проведении тренировочных экзаменов в 2021–2023 годах и убедились, что применявшаяся для обучения YandexGPT база данных не содержит ответов на них.
Фото: Яндекс
?>
