Яндекс пошел проверять работы учеников. Не сам, а с помощью нейросетки 🤖. YandexGPT прокачали по физике, химии, астрономии и отправили на «Турнир Ломоносова». Это олимпиада для школьников. Ежегодно в турнире принимает участие 35+ тысяч учащихся 👩🎓. А в этом году их работы попали под пристальный взгляд искусственного интеллекта 👀. С помощью YandexGPT эксперты справились с проверкой всего за месяц, а не за три, как обычно.
Турнир имени Ломоносова – многопредметное соревнование для школьников. Мероприятие ориентировано на учащихся 6-11 классов. Олимпиада проводится с 1978 года. Организаторами являются разные образовательные учреждения, включая МГУ и МФТИ.
В этом году в «комитет» попал искусственный интеллект. Раз нейросети могут все (ну почти), почему бы не делегировать им проверку работ 📝. Через нейронную сеть прогнали ответы по химии, физике и астрономии. Разработчики «Яндекса» до этого натаскали YandexGPT по предметам и научили оценивать, соответствуют ли ответы критериям верности ✔️. Если нужного соответствия нейронка не обнаруживала, работа получала ноль баллов ❌.
Все ли отдали на откуп нейросети? Конечно, нет. После отсеивания нейронкой откровенно слабых работ за дело взялись «живые» эксперты 👩🏫. Они, во-первых, перепроверили часть оценок, выставленных YandexGPT. Рандомно брали и вручную изучали корректность. Выяснилось, что 95% ответов искусственный интеллект обработал правильно (вопрос – что с остальными 5%?). Потом эксперты приступили к проверке работ, набравших больше нуля (по мнению нейросети). И уже среди них без всяких машин искали победителей 🏆. Никто из потенциальных претендентов вниманием живых экспертов не был обделен.
Эксперимент назвали успешным вот еще почему. В ноябре, как обычно, все участники турнира могли подать апелляцию. Мол, не согласны. Недовольных школьников оказалось примерно столько, как всегда. И результаты проверок по апелляциям статистически средние 📊. Это значит, что участие нейросети на качестве никак не сказалось, а скорость повысилась ⏩. Кстати, в «вышке» уже давно что-то подобное выкатили. Создали нейронку, проверяющую уровень английского языка. Называется «ИИ Лингво». Справляется за час.
В общем, вторжение нейросетей в образование успешно продолжается 🎓. Планируют использовать YandexGPT в олимпиадах и дальше. Умеренно. Потому что нельзя нейросетям быть судьями в таком щепетильном вопросе, как оценка способностей и талантов. У нашего интеллекта есть свойство – выдавать элегантные, нестандартные решения 💡. Машина, обученная на шаблонах, не может оценить полет этой мысли и красоту виража.
Любой нестандарт для нейросети – ошибка. А ведь именно возможность мыслить иначе приводит людей к открытиям и прорывам. За неочевидными и на первый взгляд неправильными ответами могут скрываться решения, претендующие на «нобелевку». Нейросети невозможно это объяснить. А раз так, значит поиском гениального должны заниматься «обычные» люди.