Восстановить то, что считалось потерянным: учёные придумали программу для повреждённых документов
Представьте: в архиве лежит газета 1968 года, бумага пожелтела, чернила местами стерлись, по краям – разрывы. Прочитать её целиком уже невозможно. Но это можно исправить.
Учёные из Санкт-Петербургского государственного университета промышленных технологий и дизайна создали программу на базе искусственного интеллекта, которая восстанавливает повреждённые исторические документы. Она не просто «видит» текст, а понимает его. Программа состоит из двух частей. Первая – визуальная – анализирует скан, убирает шум, повышает контрастность, отделяет текст от пожелтевшего фона, заделывает микроразрывы. Вторая – лингвистическая – распознаёт символы и восстанавливает смысл. Она умеет собирать слова, разорванные дефисами или физическими повреждениями, и выстраивать правильный порядок абзацев и заголовков, сообщает ТАСС.
Особая гордость разработчиков – способность работать со сложной вёрсткой. Старые газеты с несколькими колонками обычно даются системам распознавания с трудом: непонятно, где заканчивается одна заметка и начинается другая. Петербургские учёные обучили собственную языковую модель на подшивке газеты за 1968 год. Она запомнила типографские особенности той эпохи, характерные сокращения и даже орфографические нормы. В итоге точность распознавания стала значительно выше.
Кому это нужно? Прежде всего архивам и библиотекам, которые оцифровывают исторические фонды. Но не только. В планах – адаптировать технологию для юриспруденции и криминалистики: восстанавливать повреждённые договоры, завещания, письма. А ещё – для страховых компаний, когда документы пострадали при пожаре или наводнении. Так что речь идёт не просто о программе для узкого круга специалистов. Это инструмент, который возвращает нам то, что мы уже почти потеряли.