Однокадровая полно-Стоксова визуализация через рассеянные среды

Ясное зрение сквозь туман

Будь то автономный автомобиль под сильным дождём, врач, ищущий опухоль глубоко в ткани, или камера для наблюдения за дикой природой, выглядывающая сквозь заросли — все сталкиваются с одной проблемой: свет искажается, проходя через неоднородные, мутные материалы. Это искажение превращает чёткие изображения в зернистый спектр, скрывая важные детали. Работа, описанная в этой статье, демонстрирует новый способ восстановить не только яркость, но и полное состояние поляризации света — информацию о том, как колеблются световые волны — после прохождения через сильное рассеяние. Эта дополнительная информация может выявить скрытые объекты и тонкие отличия, которые обычные камеры пропускают.

Почему обычные камеры теряются в блики

Когда свет проходит через туман, биологическую ткань или матовое стекло, он многократно рассеивается в случайных направлениях. Ранее гладкая волновая поверхность, несшая чёткое изображение, распадается на шумный спекл-узор. Стандартные приёмы обработки изображения иногда позволяют обратить это искажение, но лишь при слабом рассеянии. При сильном рассеянии оставшиеся «баллистические» фотоны, сохраняющие информацию о происхождении, тонут в шуме. Традиционные камеры фиксируют только интенсивность — насколько светлое каждое место — и отбрасывают поляризацию, которая может содержать отпечаток взаимодействия света с материалами по пути. В результате сцены за толстыми рассеивающими слоями часто выглядят как бесформенное пятно, независимо от мощности алгоритмов обработки.

Использование формы света как дополнительной подсказки

Световые волны могут колебаться в разных направлениях, и эта поляризация несёт характерный отпечаток объектов и материалов, с которыми они взаимодействовали. Полное описание поляризации в каждой точке задаётся так называемыми параметрами Стокса — четырьмя числами, которые вместе описывают суммарную яркость и степень линейной или круговой поляризации. Недавние достижения в плоских оптических элементах, называемых метаповерхностями — наноструктурированных плёнках тоньше человеческого волоса — сделали возможным измерение всех четырёх параметров Стокса в одном кадре. Авторы разработали такую метаповерхность, которая разщёлкивает входящий свет на шесть точек, каждая из которых соответствует отдельному поляризационному каналу. По одному экспонированию они восстанавливают полно-Стоксово поляризационное изображение с высокой точностью, даже для сложных паттернов и реальных образцов, таких как крылья бабочек или линзы очков.

Обучение нейронной сети физике света

Фиксация множества поляризационных каналов — лишь половина задачи; вторая половина — превращение зашумлённого спекл-узора обратно в узнаваемую сцену. Для этого команда создала специализированную глубокую нейронную сеть под названием PdU-Net, которая принимает шесть разделённых по поляризации спекл-изображений и предсказывает чистые полно-Стоксовы изображения, которые были бы видны без рассеивающего слоя. Вместо того чтобы опираться только на данные, сеть обучается с учётом встроенных физических законов поляризации. Эти правила действуют как ограничители, заставляя выходы сети удовлетворять тем же соотношениям, что и реальные параметры Стокса. Встраивая эти ограничения прямо в функцию потерь, сеть учится отделять значимую поляризационную структуру от случайного шума, восстанавливая тонкие детали, которые стандартная U-Net или традиционные методы корреляции спекла не могут извлечь при сопоставимой силе рассеяния.

Проникновение сквозь маскировку и движение

Чтобы проверить подход в жёстких условиях, исследователи поместили между метаповерхностью и объектом различные рассеивающие экраны, достигая оптических глубин, при которых предыдущие методы полностью не работают. Даже когда память о первоначальном фронте волны практически стерта, PdU-Net смог реконструировать чёткие изображения цифр и фигур вместе с их полными поляризационными картами за один кадр. Команда также смоделировала сценарий маскировки: два тонких поляризационных элемента движутся и меняют форму на фоне загромождённой сцены, всё это рассматривается через сильное рассеяние. В обычных изображениях интенсивности объекты сливаются с фоном. В отличие от этого, восстановленные карты угла поляризации и круговой поляризации явно выявляют объекты и даже отслеживают их движение, потому что их поляризационные подписи отличаются от фона, даже если их яркость совпадает.

Что это значит для будущей визуализации

Исследование показывает, что при совместном проектировании аппаратуры для сбора света и нейросети для его интерпретации можно видеть сквозь сильно рассеивающие среды способами, ранее недоступными. Метаповерхность сортирует фотоны по поляризации в компактном, пригодном для камеры слое, а физически-информированная сеть использует эти дополнительные подсказки, чтобы обратить сильное рассеяние и восстановить полно-Стоксово изображение в одном снимке. Для неспециалистов вывод прост: вместо того чтобы измерять только яркость света, этот метод также фиксирует его ориентацию и затем использует это богатое представление, чтобы пробиться сквозь оптический туман. Это может помочь будущим системам обнаруживать скрытые опухоли, отслеживать животных в густой растительности или направлять транспорт в плохую погоду — всё это за счёт чтения тонких закономерностей в форме самого света.

Цитирование: Xiansong Ren, Ye Tian, Yanling Ren, Bo Wang, Shifeng Zhang, Anqi Hu, Kaveri A. Thakoor, and Xia Guo, "Single-shot full-Stokes imaging through scattering media," Optica 12, 1560-1568 (2025). https://doi.org/10.1364/OPTICA.572713

Ключевые слова: поляризационная визуализация, метаповерхностная камера, визуализация через рассеяние, глубокое обучение с учётом физики, обнаружение маскировки