Clear Sky Science · ja

中国山水画のための改良された意味論・スケッチ両条件付きガイド付き画像インペインティングモデル

· 一覧に戻る

脆弱な名作に新たなデジタルの息吹を

霧に包まれた山々や流れる筆致で愛される古い中国の山水画は、同時にきわめて脆弱な存在でもあります。何世紀にもわたる取り扱いや害虫、湿気により、ひび割れや虫害、欠損が生じます。保存修復の専門家は、残された部分を救うことと二次的な損傷を避けることのバランスを取らねばなりません。本研究は、こうした絵画をデジタル領域で補完するために特化して設計された人工知能(AI)手法を紹介します。欠損を埋めながらも、作者の元の構造と画風に忠実であることを目指しています。

なぜ古い絵画に新技術が必要か

伝統的な中国山水には大きく二つの流派があります。大胆でそびえ立つ峰を描く北派と、淡い墨のなだれや余白を重視する南派です。いずれも線や階調の微妙な変化に依拠しており、紙や絹が劣化すると容易に損なわれます。手作業での補筆は時間がかかり取り返しがつきません。一本の誤った線が傑作を永久に変えてしまうこともあります。従来のデジタル手法は近傍のピクセルをコピーするか、汎用の写真補修ツールに頼ることが多く、街の写真の穴埋めはできても、絵画では不自然な岩や切れた幹、専門家が「違和感」を覚える筆致を生むことがありました。

AIはどうやって構造と意味を学ぶか

これらの限界に対処するため、著者らは一枚の絵を同時に三つの補完的な見方で捉える修復システムを設計しました。まず、端検出ネットワークを用いて、力強い山稜線から微かな質感の筆触まであらゆる線の強さを示す詳細な「スケッチ」を抽出します。次に、非教師ありのセマンティックセグメンテーションモデルで、空、川、岩、樹木など各領域が何を表すかを色分けした地図を作ります。三つめに、部分的にマスクされた画像そのものを解析します。これら三つの情報流を統合し、言語処理で発展したTransformerという強力なAIアーキテクチャに与え、欠損箇所が下地の構造や全体の景観に合うようにどう見えるべきかを予測させます。

Figure 1
Figure 1.

形だけでなく筆致を模倣するようAIに教える

構図を合わせるだけでは挑戦の半分にすぎません。補填部分は作者の筆致にも合致しなければなりません。そこで研究チームは、筆の線の先細りや岩面での質感の積み重なり、淡墨が紙へと溶け込む様子といった、筆致や墨の微妙な特性に焦点を当てる軽量な様式特徴抽出モジュールを追加しました。このモジュールは絵の見えている部分からスタイルに関わる情報を抽出し、再構築の複数段階で注入して、出力が元の絵のリズムや調子に近づくように導きます。訓練は、ピクセルレベルの誤差だけでなく、認知される構造の不一致、テクスチャ統計、全体的な様式の不一致にも罰則を与える複合目的関数で行われ、人間の目から「正しく見える」結果を促します。

Figure 2
Figure 2.

手法の検証

手法を評価するため、研究者らは公立美術館コレクションと公開ベンチマークから、北派と南派の作品をバランスよく含む約5,000点の高品質な山水画データセットを集めました。実際の損傷を模した不規則なマスク(小さな欠損、広範な擦れ、虫害のクラスターなど)をデジタルに適用し、本手法を畳み込みネットワーク、Transformer系モデル、最新の拡散モデルなど、六つの主要なインペインティング手法と比較しました。さまざまな損傷レベルにおいて、新モデルは鮮鋭さ、構造的類似性、視覚的実在感の点で一貫して高いスコアを達成しました。拡大比較では山の輪郭が滑らかで、枝の表現が説得力があり、墨のテクスチャが未損傷部と違和感なく溶け込んでいることが示されました。訓練を受けた画家を含む人間のレビュアーも、本手法による修復を構造・様式の両面でより一貫性があると評価しました。

文化遺産にとっての意義

平たく言えば、本研究はAIが単に画像の「穴を埋める」だけでなく、伝統的な中国山水画の内在的な論理や個性を尊重するよう学習できることを示しています。線描、領域の意味、様式的手がかりを組み合わせることで、元の巻物に本当に属しているかのように見える欠損部分を再構築します。保存修復の専門家に取って代わるものではありませんが、博物館や研究者に対して、非侵襲的に可能な修復案を視覚化し、処置を計画し、脆弱な作品のより完全なデジタル代替物を作成する強力なツールを提供します。紙がもはや巻き広げられないほど弱くなった後でも、これらの風景が保存され、研究され続ける助けとなるでしょう。

引用: Cao, S., Mu, D., Zhang, Y. et al. An improved semantic and sketch biconditional guided image inpainting model for Chinese landscape painting. npj Herit. Sci. 14, 103 (2026). https://doi.org/10.1038/s40494-026-02371-4

キーワード: デジタル修復, 中国山水画, 画像インペインティング, 文化遺産, 美術保存