Искусственный интеллект написал «Тотальный диктант» лучше, чем от него ждали

В этом году в акции «Тотальный диктант» впервые участвовал искусственный интеллект. Система ИИ «Писец» получила оценку между тройкой и четвёркой. Это более впечатляющий результат, чем ожидали разработчики. 

‍

ИИ показал хорошие знания грамматики, но некоторые слова услышал неверно. По комментариям старшего преподавателя кафедры источниковедения литературы и древних языков Гуманитарного института НГУ Людмилы Будневой, которая проверяла работу искусственного интеллекта, из 276 слов он пропустил шесть, пять из них стояли в конце предложения. Ещё семь слов система услышала неправильно. Например, фразу «Читай — не хочу» «Писец» записал как «Считай, не хотите», что, по мнению Будневой, свидетельствует о проблемах с грамматикой. Кроме того, система допустила ряд ошибок в окончаниях слов, например «портрет… гимназистке» вместо «портрет… гимназистки». 

‍

При этом создатели ИИ ожидали куда худшего результата, несмотря даже на то, что специально готовили систему для сдачи диктанта. 

‍

«Изначально он разрабатывался год назад для автоматического стенографирования звукозаписей интервью или защит диссертаций. Соответственно, даже 20–30% ошибок в расшифрованных текстах — это уже тот уровень, который позволяет человеку гораздо быстрее подготовить чистовой текст стенограммы, чем если бы он писал его с нуля, прослушивая запись полностью самостоятельно. Но для диктанта 20% ошибок — это неприемлемо, это двойка. Поэтому в последнюю неделю перед „Тотальным диктантом“ мы занимались адаптацией „Писца“ к специфике диктанта, а также вносили в него принципиальные улучшения, основанные на результатах наших исследований за последний год», — рассказал научный сотрудник Лаборатории прикладных цифровых технологий Иван Бондаренко.

‍

Благодаря участию «Писца» в акции разработчики получили новые сведения о допускаемых им ошибках, чтобы продолжить совершенствовать систему.

‍

В прошлом году нейросеть YandexGPT 2 успешно сдала ЕГЭ по литературе и получила достаточно высокий балл для поступления в вуз.