Нейросеть YandexGPT 2 написала ЕГЭ на балл, необходимый для поступления в вуз

Значит ли это, что привычный формат экзамена пора менять? Разбираемся вместе

16.10.2023 | Кристина Евдокимова

1007

Нейросеть Яндекса, давно вошедшая в наш обиход, вновь удивила своими способностями: как сообщили в Яндексе 12 октября, YandexGPT 2 написала ЕГЭ по литературе на 55 баллов - результат, который превышает средний проходной порог для поступления в вузы на 15 баллов. Но все равно остается ниже, чем средний показатель среди выпускников (напомним, он равняется 63 баллам на 2023 год).

Несмотря на то, что экзамен по литературе для искусственного интеллекта - трудная задача, он справился с ней: причем решил не только технические, но и творческие задания. И главное, без какой-либо предварительной подготовки.

Позже, как передает ТАСС, Рособрнадзор заявил, что развитие нейросетей системе ЕГЭ не угрожает - телефоны и другие гаджеты все равно нельзя использовать во время написания экзаменов. Так что выпускникам по прежнему придется готовиться, а не надеяться на "чудо".

Однако, несмотря на успокаивающие заявления, остается один нерешенный вопрос: если нейросеть уже справляется с экзаменами, значит ли это, что формат ЕГЭ пора менять? ПУ решил разобраться, а заодно вспомнить случаи, когда нейросеть преуспела в написании экзаменов.

Написание ЕГЭ нейросетью - не первый в мире случай успешной сдачей экзаменов искусственным интеллектом

В России успешная сдача ЕГЭ нейросетью - первый случай для страны. Причем чат-бот смог решить задания по, казалось бы, самому творческому экзамену - литературе. Конечно, сочинения были не идеальные, но 40 прохлдных баллов сетка набрала. Однако в мире специалисты уже не раз ставили такой эксперимент над искусственным интеллектом.

Так, в начале 2023 года стало известно, что специалисты из AnsibleHealth, стартапа в сфере высокотехнологичных медицинских услуг, предложили ChatGPT написать экзамен по медицине, который позволяет получить американскую медицинскую лицензию USMLE.

Сам по себе этот экзамен считается сложным: он состоит из трех частей и включает вопросы по огромному числу медицинских предметов, как, например, фармакологии, патофизиологии и других. Так что для сдачи

этого экзамена нужно быть не только отличным теоретиком, но и практиком: четверокурсники должны дополнительно пройти 1,5-2 года клинической ротации для успешной сдачи 2 части. А последнюю, как правило, сдают те, кто закончил как минимум полгода или год последипломного медицинского образования.

Проходной порог для получения лицензии - 60%. В итоге ChatGPT решил каждую из трех частей экзамена на 52,4-75%. То есть нейросеть стала лицензированным специалистом. И тут, как и в случае с ЕГЭ, она не только ответила на вопросы, решила задачи - она представила по меньшей мере по одному клинически обоснованному комментарию.

Как уточняют исследователи, предварительно нейросеть не тренировали на сдачу этого экзамена. Судя по всему, если бы ее заранее подготовили, то и этот отличный результат оказался бы еще более впечатляющим. В итоге специалисты пришли к выводу, что у нейросети есть обучающий потенциал.

Также зимой ТАСС сообщал, что ChatGPT сдал экзамены по праву на четырех курсах Университета Миннесоты, а также экзамен по бизнес-менеджменту в Уортонской школе бизнеса при Пенсильванском университете.

Нейросеть тоже получала тройки и неудовлетворительные оценки

Успешная сдача искусственным интеллектом экзаменов действительно воодушевляют, а некоторых настораживают. Однако нейросеть не всегда получала высокие оценки - в ее истории тоже случались казусы и даже провалы. И чаще всего они случались, когда чат-боту предстояло писать экзамены по гуманитарным предметам.

Например, в мае доцент кафедры истории России УрФУ Михаил Киселев решил провести экзамен, чтобы проверить Chat GPT и Sage на знание исторических фактов и терминологии, касающихся отечественной истории. Вот только нейросетям показались сложными вопросы, ответы на которые предполагают самостоятельные рассуждения. И в итоге за экзамен искусственный интеллект получил тройку.

А ранее ChatGPT вообще завалила сочинение ЕГЭ по литературе, написав работу на тему "Как в творчестве А.А. Ахматовой раскрывается тема личности и истории". Проверяющие преподаватели остались недовольными текстом. Единственное, за что похвалили чат-бот, так это за отсутствие орфографических и пунктуационных ошибок.

Так формат ЕГЭ нужно менять или нет?

Несмотря на спокойную реакцию Рособрнадзора о том, что искусственный интеллект не помешает системе ЕГЭ существовать в привычном формате и дальше, становится все более очевидным, что систему образования так или иначе могут ждать перемены в будущем.

Так, образовательный центр Фоксфорд пишет, что следует разработать новые подходы, которые помогут проверять знаний учащихся. Например, руководитель департамента больших данных и информационного поиска факультета компьютерных наук НИУ ВШЭ Евгений Соколов высказал мнение Фоксфорду о том, что следует «перепридумать задания».

С этим же мнением согласился ректор Московского городского педагогического института Игорь Реморенко, добавив, что «должны меняться измерительные материалы, степень интерактивности в них должна быть выше».

Изображение на обложке: freepik.com