Адаптивное многопризнаковое слияние для сопоставления видимого и инфракрасного изображений и восстановления иероглифов на бамбуковых дощечках

Древние тексты, скрытые на виду

В течение более двух тысяч лет правительственные записи, медицинские заметки и повседневные записи в Китае писали кистью на тонких полосках бамбука и дерева. Многие из этих хрупких дощечек сохранились в земле, но чернила так сильно поблекли, что большая часть надписей почти неразличима. В этом исследовании предложен новый метод съемки, который выравнивает обычные фотографии с инфракрасными снимками тех же дощечек, а затем цифровым образом восстанавливает утраченные символы — делая повреждённые тексты снова читаемыми и открывая более ясное окно в древнюю историю.

Почему старые бамбуковые записи так трудно прочитать

Раскопанные бамбуковые и деревянные дощечки представляют собой бесценные исторические документы, но века погребения оставляют их потрескавшимися, запятнанными и изношенными. При обычном освещении древесная текстура, грязь и обесцвечивание часто заглушают едва заметные чернила, так что символы сливаются с фоном или исчезают вовсе. Инфракрасные камеры могут выявлять следы чернил, которые больше не видны в видимом свете, потому что чернила и древесина по‑разному отражают инфракрасное излучение. Однако инфракрасные изображения обычно лишены богатой цветовой палитры и детализированной поверхности, которые кураторы и историки используют для изучения технологии изготовления дощечек и для состыковки фрагментов. Сегодня исследователи часто переключаются между видимыми и инфракрасными снимками одной и той же дощечки, пытаясь мысленно объединить сведения из каждого вида — это медленный и утомительный процесс, который всё ещё оставляет многие символы неопределёнными.

Совмещение двух видов «зрения»

Авторы решают эту проблему, точно выравнивая — или «региструя» — видимые и инфракрасные изображения каждой бамбуковой дощечки, чтобы их можно было объединить в одно улучшенное изображение. Это далеко не тривиальная задача: поскольку используются разные камеры и источники света, изображения могут смещаться, вращаться, незначительно масштабироваться и даже деформироваться относительно друг друга. К тому же у дощечек слабая текстура — мало острых углов или узоров — что затрудняет стандартным методам компьютерного зрения нахождение соответствующих точек между двумя видами. Авторы разработали многоступенчатый конвейер регистрации, который использует то, что остаётся стабильным между длинами волн: внешнюю форму каждой дощечки.

От грубой подгонки к точному совпадению пикселей

Метод начинается со стадии грубой подгонки, на которой оба изображения уменьшают, чтобы подавить отвлекающие детали, а затем обнаруживают длинные внешние края дощечек и небольшое число точек, похожих на углы. Поскольку контур бамбуковой дощечки мало меняется между видимым и инфракрасным изображениями, этим краям придаётся большое значение при оценке того, как одно изображение должно быть повернуто, сдвинуто и масштабировано, чтобы совпасть с другим. Затем проводится этап тонкой подгонки на полном разрешении. Здесь алгоритм многократно уточняет соответствие, используя и контуры краёв, и угловые точки символов, но с важной особенностью: на ранних шагах он больше полагается на крупномасштабные контуры; по мере улучшения совпадения он постепенно увеличивает вес точных угловых точек, выделенных вокруг отдельных штрихов. Эта адаптивная смена стратегии от «сначала контур» к «сначала детали» помогает избежать застревания в плохом решении и всё же обеспечить очень плотное выравнивание.

Пусть содержание информации задаёт окончательную настройку

Даже при хорошем геометрическом совпадении яркостные шаблоны в видимых и инфракрасных изображениях могут сильно различаться. Для завершения работы исследователи добавляют этап оптимизации на основе «взаимной информации» — статистической меры того, насколько хорошо одно изображение предсказывает уровни серого в другом. Алгоритм делает множество небольших пробных корректировок преобразования между двумя видами и сохраняет те изменения, которые максимизируют эту общую информацию. Гибридная стратегия поиска — сочетающая глобальную исследовательскую методику, известную как имитация отжига, и более традиционное уточнение на основе градиента — позволяет системе найти преобразование, которое одновременно геометрически разумно и богато информацией, даже когда изображения шумные или частично повреждены.

Возвращая исчезнувшие символы к жизни

После того как видимое и инфракрасное изображения надёжно сопоставлены, вторая часть системы сосредоточена на самих символах. Инфракрасное изображение обрабатывают так, чтобы усилить контраст чернил на фоне, а затем применяют пороговую обработку для выделения областей штрихов. После очистки шума и зазоров извлечённая надпись преобразуется в прозрачную «маску чернил». Вместо простого наложения этой маски поверх видимого изображения метод использует форму слияния на основе разницы: по сути, он вычитает рисунок чернил из фона, заставляя места, где на видимом изображении когда‑то была надпись, но теперь видна только голая древесина, снова затемняться. Наконец, цветокоррекция восстанавливает натуральные оттенки бамбука в областях, где оригинальные видимые символы уже были чёткими. В результате получается единое изображение, сохраняющее реалистичный вид, цвет и текстуру дощечки, при этом делая как едва заметные, так и невидимые штрихи чёткими и различимыми.

Более чёткие изображения для историков и специалистов по сохранению наследия

Испытания на более чем 800 парах изображений бамбуковых дощечек, включая многие с сильно повреждёнными надписями, показывают, что новый метод превосходит ряд существующих техник регистрации — от классического сопоставления признаков до современных подходов на основе глубокого обучения. Количественные показатели подтверждают, что выровненные изображения делят больше информации и лучше совпадают по структурам, а визуальные наложения демонстрируют почти идеальное перекрытие видимого и инфракрасного содержимого. Для историков и реставраторов это означает возможность читать и интерпретировать трудные тексты по одному улучшенному изображению, ускоряя транскрипцию и помогая воссоединять разбросанные фрагменты. В более широком смысле работа демонстрирует, как сочетание нескольких видов съемки с умным выравниванием и слиянием может спасти хрупкие надписи от предела нечитаемости, укрепляя усилия по цифровому сохранению и изучению мирового документального наследия.

Цитирование: Wan, T., Qi, F., Yang, Y. et al. Adaptive multi-feature fusion for visible-infrared image registration and character enhancement of bamboo slips. npj Herit. Sci. 14, 96 (2026). https://doi.org/10.1038/s40494-026-02368-z

Ключевые слова: бамбуковые дощечки, инфракрасная съемка, сопоставление изображений, восстановление текста, культурное наследие