3DSynBrush — wysokiej jakości system rekonstrukcji 3D dla pojedynczych fresków z Dunhuangu

Starożytna sztuka spotyka nowoczesne narzędzia

Malowane groty Dunhuangu w zachodnich Chinach kryją jedne z najbardziej wyjątkowych buddyjskich fresków, lecz wiele z tych delikatnych dzieł blaknie, pęka i odłuszcza się. W tym badaniu przedstawiono nową metodę przekształcania pojedynczego zdjęcia fragmentu fresku w realistyczny model trójwymiarowy, pomagając historykom, konserwatorom i publiczności badać te prace z każdej perspektywy, bez dotykania oryginałów.

Skarb zagrożony zniknięciem

Groty Mogao w Dunhuangu bywają nazywane biblioteką wyrytą w kamieniu — ich freski dokumentują opowieści religijne, architekturę, stroje, muzykę i życie codzienne na przestrzeni tysiąca lat. Czas, piasek, sól i działalność człowieka odcisnęły swoje piętno, powodując blaknięcie pigmentów i kruszenie tynku. Tradycyjna konserwacja opiera się na fotografiach i żmudnych naprawach fizycznych, ale nie potrafi w pełni oddać głębi, zmian koloru ani przestrzennego odczucia fresków, ani nie zatrzyma dalszych strat. Modele 3D w formie cyfrowej mogą natomiast zamrozić moment w czasie, pozwalając kustoszom analizować detale, symulować oświetlenie i szeroko udostępniać dzieła bez narażania oryginałów.

Dlaczego przekształcenie płaskich malowideł w 3D jest trudne

Utworzenie przekonującego modelu 3D zwykle wymaga wielu zdjęć wykonanych z różnych punktów widzenia wokół obiektu. Freski z Dunhuangu są jednak płaskimi malowidłami na ścianach grot i często dostępne jest tylko jedno wysokiej jakości zdjęcie konkretnej postaci, zwierzęcia czy motywu architektonicznego. Styl artystyczny komplikuje sprawę: pociągnięcia pędzla bywają delikatne, kolory przygaszone przez wiek, a elementy takie jak cienkie wstęgi czy aureole są ekstremalnie subtelne. Istniejące algorytmy 3D są często trenowane na fotografiach codziennych przedmiotów i budynków, więc łatwo błędnie interpretują te wystylizowane obrazy, tworząc zniekształcone kształty lub dopisując detale, które naruszają ducha oryginalnej sztuki.

Sprytne, krok po kroku: cyfrowy pędzel

Autorzy proponują ramy o nazwie 3DSynBrush, które sprytnie łączą kilka zaawansowanych technik obrazowych i 3D, z których każda rozwiązuje inną część problemu. Najpierw tworzą wyspecjalizowany zbiór Chinese Mural Elements (CME): tysiące starannie wybranych postaci, zwierząt i roślin wyciętych z wysokorozdzielczych zdjęć fresków. Narzędzie segmentujące czysto oddziela każdy element od złożonego tła, pozostawiając przezroczysty kontur, który zachowuje krawędzie i drobne struktury. Następnie moduł syntezy perspektyw wyobraża sobie, jak ta pojedyncza namalowana postać wyglądałaby z kilku standardowych punktów widzenia, wykorzystując wydajny model „dyfuzji”, który nauczył się typowych relacji 3D z dużych zbiorów treningowych. Powstaje pierścień spójnych widoków wokół elementu, choć dostępne było tylko jedno zdjęcie źródłowe.

Od wyobrażonych widoków do solidnych kształtów

Tak wygenerowane widoki przekazywane są następnie do systemu neuralnego renderowania, który skleja je w ciągłe pole świetlne 3D — w praktyce matematyczny opis zachowania światła i koloru w każdej okolicy wokół elementu. Ten etap jest dostrojony do obsługi miękkich faktur i fotograficznie niestandardowego wyglądu fresków, wygładzając drobne niespójności między generowanymi widokami bez zatracania cech artystycznych. Na końcu moduł budowania siatki przekształca to niewidzialne pole świetlne w standardową powierzchnię 3D z trójkątów, automatycznie zagęszczając obszary z krawędziami i drobnymi detalami oraz upraszczając płaskie regiony, które nie wymagają wielu punktów. Co godne uwagi, powstałe modele używają tylko około 40 procent punktów i ścianek w porównaniu z wiodącymi alternatywami, a mimo to bliżej odzwierciedlają oryginalne obrazy zarówno pod względem kształtu, jak i tekstury.

Odporne na szum, cienie i ubytki

Zespół przetestował 3DSynBrush w trudnych warunkach naśladujących rzeczywistą fotografię: ziarniste obrazy, nierówne oświetlenie i części elementu ukryte przez ciemne plamy. Nawet gdy wzrastały szum i zasłonięcia, główny kształt 3D pozostawał stabilny, a tekstury powierzchni rozpoznawalne. W porównaniach wizualnych i liczbowych z kilkoma czołowymi metodami rekonstrukcji z pojedynczego obrazu, 3DSynBrush dawał czyściejsze, wierniejsze rekonstrukcje motywów w stylu fresków, unikając powszechnych błędów takich jak zniekształcone postacie, pęknięte powierzchnie czy tekstury przypominające niepowiązane obiekty.

Przywracanie utraconych światów do życia

Dla osób niebędących specjalistami kluczowym rezultatem jest to, że samotne zdjęcie malowanego jelenia, tancerza czy świątyni z Dunhuangu można teraz przekształcić w zwarty, dokładny model 3D, który można eksplorować w rzeczywistości wirtualnej, wykorzystać w wystawach cyfrowych lub służyć jako przewodnik przy ostrożnych pracach konserwatorskich. Choć system wciąż zależy od jakości początkowego wycięcia i ograniczony jest przez obecne rozdzielczości obrazu, oferuje praktyczną drogę do zachowania wyglądu i przestrzennego odczucia kruchych malowideł ściennych. Istotnie, 3DSynBrush działa jak cyfrowy rzeźbiarz szanujący oryginalny styl artysty, zamieniając wrażliwe fragmenty sztuki freskowej w trwałe, interaktywne „figury”, które przyszłe pokolenia mogą badać i podziwiać.

Cytowanie: Peng, X., Wang, J., Hu, Q. et al. 3DSynBrush a high quality 3D reconstruction framework for single Dunhuang murals. npj Herit. Sci. 14, 154 (2026). https://doi.org/10.1038/s40494-026-02424-8

Słowa kluczowe: freski z Dunhuangu, cyfryzacja dziedzictwa kulturowego, rekonstrukcja 3D z pojedynczego obrazu, neuralne renderowanie, wirtualne muzea