Ученые Санкт-Петербургского государственного университета промышленных технологий и дизайна создали и запатентовали программное обеспечение на базе ИИ для восстановления поврежденных архивных документов
Ученые Санкт-Петербургского государственного университета промышленных технологий и дизайна (СПбГУПТД) создали и запатентовали программное обеспечение на базе искусственного интеллекта, способное автоматически восстанавливать структуру и содержание исторических документов с дефектами. Об этом сообщили в пресс-службе вуза.
Программа включает визуальный и лингвистический модули. Первый отвечает за диагностику повреждений и подготовку изображения, второй — за распознавание символов и смысловое восстановление текста. Одной из главных особенностей разработки стала способность системы корректно обрабатывать сложные архивные издания с многоколоночной версткой, например, старые газеты. Для этого ученые обучили собственную языковую модель, которая учитывает пространственное расположение блоков на странице и правильно выстраивает последовательность текста.
По данным пресс-службы, процесс работы программы включает поэтапную обработку: сначала система анализирует скан и разделяет его на смысловые блоки (заголовки, текст, таблицы, изображения), после чего проводит визуальную очистку фрагментов путем повышения контрастности, устранения микроразрывов и отделения текста от пожелтевшего фона для последующего распознавания через OCR-движок. На завершающем этапе разработанная вузом языковая модель (LLM) выполняет структурное и смысловое восстановление, корректно объединяя слова, разорванные дефисами или физическими повреждениями, а также выстраивая правильную последовательность абзацев и заголовков.
Использование программы
По словам разработчиков, программа предназначена для архивов, библиотек и исследователей, занимающихся массовой оцифровкой исторических фондов. В будущем технологию планируется адаптировать для нужд юриспруденции и криминалистики (восстановление поврежденных договоров, завещаний и писем), а также для сферы страхования при обработке документов, поврежденных при чрезвычайных ситуациях.
Источник: ТАСС
Комментарии