SparStVR — исследование разреженных 3D-гистологических данных в виртуальной реальности

Видеть скрытые миры внутри ткани

Врачи и исследователи часто изучают тонкие срезы тканей, чтобы понять, как развиваются и распространяются такие заболевания, как рак. Но наши тела — трёхмерны, тогда как стекло микроскопа — плоское. В этой статье представлен SparStVR, инструмент виртуальной реальности, который позволяет учёным «войти» в набор слоёв изображений ткани и исследовать их как реалистичные 3D‑структуры, что облегчает обнаружение закономерностей и проблемных зон, плохо видимых на обычном экране.

От плоских срезов к трёхмерному органу

Традиционные исследования тканей опираются на стеки микроскопических изображений, полученных из многих тонких срезов органа. Эти стеки могут достигать размеров в гигапиксели и их трудно визуализировать: большинство программ сводит их к простым проекциям или позволяет вращать «блочную» 3D‑модель на обычном мониторе. Из‑за этого сложно по‑настоящему понять, где, например, расположен опухолевый очаг в органе и как он соотносится с окружением. SparStVR решает эту задачу, превращая стеки изображений в детализированные 3D‑модели, по которым можно перемещаться и которые можно осматривать внутри виртуальной среды, получая естественное ощущение глубины и положения.

Прогулка внутри данных

SparStVR создан на современном игровом движке и работает на потребительских гарнитурах виртуальной реальности. Пользователь предоставляет два основных ингредиента: стек цветных изображений ткани и соответствующие маски, отмечающие интересующие структуры, такие как опухоли или железы. Программа автоматически собирает текстурированную 3D‑модель всего образца и выделенных структур, размещая всё с пиксельной точностью, так что виртуальные формы тесно соответствуют исходным изображениям. Оказавшись в VR, исследователь может захватывать отдельные структуры, вращать их в воздухе, отделять от остальной части органа и просматривать фрагменты оригинальных срезов ровно там, где они находятся в 3D‑форме.

Максимум из разреженных и смешанных данных

Во многих реальных исследованиях окрашивают и сканируют не все возможные сечения — либо чтобы сэкономить время и средства, либо чтобы оставить материал для других анализов. Это создаёт «разреженные» стеки с пропусками между срезами, которые особенно трудно восстанавливать как гладкие 3D‑формы. Авторы показывают, что SparStVR по‑прежнему даёт убедительные модели органов и опухолей даже когда доступны только каждый второй, третий или четвёртый срез. Мелкие детали становятся менее точными при увеличении пропусков, но общая форма органа остаётся реалистичной. Инструмент также может комбинировать несколько типов изображений, например разные окраски или другие карты измерений, позволяя единому виртуальному органу содержать несколько слоёв биологической информации одновременно.

Добавление чисел и сигналов в сцену

Помимо видимой структуры ткани, SparStVR позволяет накладывать измерения прямо в 3D‑пространстве. Например, авторы извлекли информацию из канала гематоксилиновой окраски, которая отражает плотность расположения ядер клеток. Эти значения отображаются как цветные сферы, плавающие в нужных местах внутри органа или внутри конкретных опухолей, превращая абстрактные числа в осязаемый ландшафт «горячих» и «холодных» зон. Дополнительные измерения, такие как активность генов или уровни белков из современных пространственных методов, можно загрузить аналогичным образом, что открывает возможности для богатых, многослойных представлений процессов заболевания.

Ограничения, практические вопросы и перспективы

Хотя VR открывает впечатляющие новые способы осмотра тканей, она также связана с трудностями. Гарнитуры и контроллеры могут вызывать дискомфорт у некоторых пользователей, а визуализация детализированных 3D‑моделей из огромных файлов изображений требует мощной видеокарты. Текущая версия SparStVR работает на компьютерах с Windows, которые уже соответствуют минимальным требованиям для VR‑игр, и включает полезные функции вроде простого снятия скриншотов и режима «зрителя» для учебных занятий. Авторы обсуждают будущие направления: работу с гораздо большим числом точек измерений, встроенную автоматическую сегментацию на основе искусственного интеллекта и даже моделирование прогрессирования болезни или «цифровых двойников» органов прямо в виртуальном пространстве.

Почему это важно для понимания болезней

Позволяя исследователям виртуально войти в поражённый орган, SparStVR превращает сложные стеки срезов ткани в интуитивный 3D‑опыт. Опухоли и другие структуры можно увидеть в их истинной форме и положении, а тонкие изменения текстуры или измеряемых значений легче заметить и интерпретировать. Для неспециалистов это означает, что путь от плоского микроскопического слайда к пониманию того, как заболевание занимает и перестраивает орган, становится более прямым и понятным. По мере развития VR и инструментов на основе ИИ подходы вроде SparStVR могут изменить то, как учёные, студенты и клиницисты исследуют скрытую архитектуру тела.

Цитирование: Liimatainen, K., Latonen, L. & Ruusuvuori, P. SparStVR - exploring sparse 3D histology data in virtual reality. Commun Eng 5, 79 (2026). https://doi.org/10.1038/s44172-026-00634-3

Ключевые слова: виртуальная реальность, 3D-гистология, изображение рака, визуализация тканей, цифровая патология