ИИ-система «Писец» правильно расслышала все слова «Тотального диктанта»
Нейросеть впервые написала «Тотальный диктант» и получила оценку между тройкой и четверкой. ИИ справился с диктантом лучше, чем ожидали разработчики.
Открытая ИИ-система показала хорошие грамматические знания, но допустила ошибки в словах, которые неверно расслышала. Разработчики «Писца» провели этот эксперимент для сбора статистики ошибок, чтобы усовершенствовать систему, сообщили в пресс-службе НГУ.
Как отмечают создатели, несмотря на хороший результат, нейросети не удалось избежать галлюцинаций — когда ответ ИИ корректный грамматически, но неверный семантически (не соответствует смыслу запроса).
«Писцу» вполне можно было бы поставить твердую «тройку», если бы не несколько обстоятельств. Из 276 слов диктанта он пропустил 6, пять из которых стояли в конце предложения, причем в этих случаях он не ставил точку, но следующее предложение начинал с заглавной буквы. В одном месте пропустил предлог «в», шедший предпоследним в предложении. Еще 7 слов им было услышано неверно. Например, вместо «наивысшего» искусственный интеллект написал «наявившего»», – сообщили в пресс-службе.
