нейросеть и орфография

 

Появился новый сервис Сбера для проверки и корректуры текстов с помощью технологий искусственного интеллекта. Модель генеративной проверки орфографии переписывает текст без ошибок, не исправляя при этом там, где этого не требуется, сленг, особенности диалектов, сокращения и аббревиатуры. 

Создатели постарались научить модель отличать случайную опечатку или ошибку от намеренного искажения нормы: на последней стадии обучения модели подавались пары текстов, где вручную экспертами были исправлены только ненамеренные ошибки, чтобы в итоге получалось исправлять именно ошибки. 

Текущие ограничения

• Можно загружать текст длиной до 1000 символов;
• Модель не исправляет пунктуационные ошибки, пунктуация остаётся авторской;
• Текущее решение поддерживает только русский язык.

Но Сервис развивается, запланированы следующие улучшения: Поддержка пунктуации и форматирования и освоение других языков кроме русского. 

источник