В России создали алгоритм для перевода старой орфографии в современную

Алгоритм переводит дореволюционные издания в современный русский язык

Популярная механикаHi-Tech

В России создали алгоритм для перевода старой орфографии в современную

Сотрудники Института вычислительных технологий СО РАН разработали систему, которая позволяет переводить дореволюционные издания в современную русскую орфографию практически без участия человека. Алгоритм может выполнять рутинную работу редакторов и дает исследователям дополнительные инструменты для анализа текстов.

Василий Макаров

Представьте, что вы решили оцифровать, а затем опубликовать книгу, которая была издана в дореволюционное время. Новейшие мощные сканеры, способные работать без участия человека, сами перелистывают страницы, современное программное обеспечение преобразовывает отсканированные страницы в текст, но он будет, естественно, в исходной старой орфографии. Это неудобно для потенциальной обработки документа, ведь большинство алгоритмов автоматического анализа работают только с произведениями в современной орфографии. Для этого и нужна система автоматического приведения текста в привычный для читателя вид. Существует несколько подходов к преобразованию текстов из одной орфографии в другую: основанный на правилах, статистический, основанный на машинном обучении, нейронный машинный перевод, а также гибридный, который может сочетать перечисленные выше методы. Так как орфография — это совокупность четких правил написания слов, на основе которых может быть создан алгоритм перевода, исследователи выбрали правиловый подход. Всё усложняется тем, что до середины XX века орфография русского языка не была официально утверждена. «До революции появлялись орфографические справочники, на их основании писались гимназические грамматики, но нормы не были кодифицированы. Декрет Совета народных комиссаров от 10 октября 1918 года «О введении новой орфографии» был весьма краток, и описывал то, что требует изменения, далеко не полностью. Например, вышло так, что ижица (Ѵ) вообще не была упомянута», — рассказывает ведущий научный сотрудник ИВТ СО РАН доктор технических наук Владимир Борисович Барахнин.

Примеры основных правил, заложенных в работу переводчика. Мария Фёдорова

Для разработки программы за основу был взят «Справочник по старой орфографии русского языка» П. И. Давыдова, изучившего и проанализировавшего значительное количество источников и литературы, в том числе учебники, словари и справочники, изданные в старой орфографии до 1917 года. В этом справочнике изложен ряд изменений, которые можно разделить на две большие категории: правописание морфем (приставок, падежных окончаний) и употребление отдельных букв. Кто-то может предположить, что достаточно заменить устаревшие буквы на современные и убрать твердые знаки в конце слов, но всё гораздо сложнее, потому что есть случаи, в которых правописание морфем отличается от нынешнего. Именно на основе перечисленных в справочнике норм дореволюционного правописания — с учетом послереволюционных новаций и был разработан переводчик.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Грозная мать Грозная мать

Елена Глинская — мать Ивана IV — по грозности не уступала знаменитому сыну

Дилетант
Топ ноутбуков до 50 000: лучшие модели по соотношению цена/качество Топ ноутбуков до 50 000: лучшие модели по соотношению цена/качество

Несколько оптимальных ноутбуков до 50 000 рублей

CHIP
Алёна Лёвина: Я много всего умею в этой жизни, но инвалидность очень сильно ограничивает меня Алёна Лёвина: Я много всего умею в этой жизни, но инвалидность очень сильно ограничивает меня

Алёна Лёвина об инклюзии, феминизме и жизни с инвалидностью

СНОБ
Правила этикета на первом свидании: 9 главных правил Правила этикета на первом свидании: 9 главных правил

Девять главных заповедей первого свидания

Playboy
10 вариантов позднего ужина, которые помогут похудеть 10 вариантов позднего ужина, которые помогут похудеть

Есть продукты, которые не только можно, но и нужно есть на ночь

Cosmopolitan
11 лучших сериалов об эпидемиях и смертельных вирусах 11 лучших сериалов об эпидемиях и смертельных вирусах

Сериалы, которые эффективнее всего помогут тебе скоротать время под капельницей

Maxim
«Я впал в кому на две недели, но бизнесменские принципы остались»: создатель сырков «Б.Ю. Александров» о Путине, тюрьме и победе над раком «Я впал в кому на две недели, но бизнесменские принципы остались»: создатель сырков «Б.Ю. Александров» о Путине, тюрьме и победе над раком

«Король сырков» Борис Александров о новых проектах и о том, почему любит СССР

Forbes
Параноидальный стиль Параноидальный стиль

Закономерности передачи и мутации паники

Огонёк
От печали до радости От печали до радости

Материнство считается то радостным делом, то почти трагедией

Добрые советы
Играй, как будто никто не видит Играй, как будто никто не видит

Как избавиться от скованности, обрести свободу и просто стать счастливее?

Psychologies
Через две весны Через две весны

Интервью с руководителем российской части «ЭкзоМарса» об отправке зонда на Марс

N+1
В защищенном режиме В защищенном режиме

Новые технологии для решения экологических проблем Сахалинской области

РБК
Заразительная ликвидация Заразительная ликвидация

В каких случаях пандемию можно считать форс-мажором и снизить убытки

РБК
Люсинда Райли: Семь сестер. Сестра ветра Люсинда Райли: Семь сестер. Сестра ветра

«Сноб» публикует первую главу продолжения романа «Семь сестер»

СНОБ
Тестируем браузеры: сравнение Chrome, Firefox, Edge & Co. Тестируем браузеры: сравнение Chrome, Firefox, Edge & Co.

У Chrome всегда были конкуренты, но кто из них удобнее и быстрее?

CHIP
«Смешарики» и «Фиксики» теперь в одной лодке «Смешарики» и «Фиксики» теперь в одной лодке

Группа компаний «Рики» стала владельцем анимационной студии «Аэроплан»

Эксперт
Христианство и патриотизм. Продолжение полемики Артема Нарышкина и Александра Дворкина Христианство и патриотизм. Продолжение полемики Артема Нарышкина и Александра Дворкина

Артем Нарышкин отвечает на упреки Александра Дворкина

СНОБ
«РуссНефть» прокредитовалась опционом «РуссНефть» прокредитовалась опционом

Компания Михаила Гуцериева в 2026 году выкупит пакет своих акций у ВТБ

РБК
Творческий человек в каждом из нас Творческий человек в каждом из нас

А что, если в каждом из нас прячется гений?

Psychologies
Как узнать ip принтера: самые простые способы Как узнать ip принтера: самые простые способы

Сетевой адрес принтера в зависимости от некоторых обстоятельств может меняться

CHIP
Не время сейчас! Не время сейчас!

Время пройтись по брендам, которые мы увидим в новом фильме бондианы

Robb Report
Ужасный конец или ужас без конца: почему развал сделки ОПЕК+ был неизбежен Ужасный конец или ужас без конца: почему развал сделки ОПЕК+ был неизбежен

Сдерживание добычи бессмысленно

Forbes
На мексиканской ферме нашли одну из древних столиц майя На мексиканской ферме нашли одну из древних столиц майя

Тайны древней цивилизации майя

National Geographic
Время первых Время первых

Андрей Шаронов поделился личными принципами тайм-менеджмента

Собака.ru
На страже африканских парков На страже африканских парков

Как защитить природу от браконьеров и многих других опасностей

National Geographic
10 самых нелепых научных мифов 10 самых нелепых научных мифов

Эти нелепые утверждения зачастую выдают за проверенные факты

Популярная механика
Серые крысы распознали голод сородичей по запаху и добыли им еду Серые крысы распознали голод сородичей по запаху и добыли им еду

Серые крысы (Rattus norvegicus) по запаху понимают, кто из их сородичей голоден

N+1
Яйцо высшей категории Яйцо высшей категории

Мистика и символика пасхального яйца — писанки

Вокруг света
В защиту торгашей и спекулянтов: воспринимают ли россияне бизнесменов как жуликов? В защиту торгашей и спекулянтов: воспринимают ли россияне бизнесменов как жуликов?

Вредно ли преобладание торговли в малом бизнесе?

Forbes
Максим Виторган: брак с Ксенией Собчак, звёздные роли и взрослые дети Максим Виторган: брак с Ксенией Собчак, звёздные роли и взрослые дети

В последние годы Максим Виторган многими воспринимался как муж Собчак

Cosmopolitan
Открыть в приложении