Doğu Asyalılar için Duygu ve Eylem Birimi Çeşitliliğine Sahip Topoloji Standardize 3B Yüz Veri Seti

Neden dijital yüzler önemlidir

Görüntülü görüşmelerden sanal gerçekliğe kadar hayatımız dijital yüzlerle dolu. Ancak bu yüzlerin arkasındaki birçok bilgisayar sistemi sınırlı verilerle, genellikle Batı popülasyonlarına ve dar bir ifade yelpazesine odaklanarak eğitiliyor. Bu makale, animasyon, duygu araştırmaları ve insan–bilgisayar etkileşimi için araştırmacılara daha iyi yapı taşları sağlamayı amaçlayan, Doğu Asyalı genç yetişkinlere odaklanan yeni bir 3B yüz veri seti olan AST-Face’i tanıtıyor.

Yeni yüz koleksiyonu neler içeriyor

AST-Face veri seti, 18–30 yaş aralığındaki 98 Doğu Asyalı katılımcının ayrıntılı 3B taramalarını içerir. Her kişi için bir nötr yüz, altı yaygın duygu (mutluluk, öfke, üzüntü, şaşkınlık, korku ve tiksinti) ve dokuz belirli kas temelli yüz hareketi yakalandı. Bu hareketler, ifadeleri kaşın içini kaldırmak ya da ağız köşelerini çekmek gibi küçük eylem birimlerine bölen iyi bilinen bir sistemi takip eder. Gönüllülerin bir alt kümesi ayrıca üç kamera açısından eşzamanlı renkli fotoğrafların alınmasına izin vererek 3B şekli normal görüntülerle birleştiren çalışmalar için daha zengin bir kaynak oluşturdu.

Yüzler nasıl yakalandı ve temizlendi

Verileri güvenilir ve karşılaştırılabilir kılmak için araştırmacılar dikkatle kontrol edilen bir yakalama düzeni kurdu. Yüksek hassasiyetli bir 3B tarayıcı her yüzün ince detaylarını kaydederken üç renkli kamera sol, merkez ve sağdan çekim yaptı. Ayarlanabilir aydınlatma gölgeleri ve parlamayı azalttı ve bir konumlandırma cihazı katılımcıların sabit bir poz tutmasına yardımcı oldu. Herkes aynı kayıt senaryosunu izledi: önce gevşemiş nötr bir yüz, sonra altı duygu ve son olarak eğitimli personel tarafından yönlendirilen dokuz eylem birimi. Daha sonra ham taramalar arka plan ve boyun bölgeleri çıkarılarak, baş pozunun hizalanması, yüzey özelliklerinin düzeltilmesi ve her yüzde 84 standart işaret noktasının çıkarılmasıyla temizlendi.

Her yüzü karşılaştırılabilir kılmak

3B yüz araştırmalarında temel zorluklardan biri ham taramaların aynı dijital yapıyı paylaşmamasıdır. Nokta sayıları ve bu noktaların nasıl bağlandıkları farklı olabileceğinden, bir kişinin gülüşünü diğerine karşılaştırmak zorlaşır. AST-Face bunu iki aşamalı bir hizalama sürecinden geçirerek çözüyor. Önce, açık ağızlar ve kalkmış kaşlar gibi büyük hareketleri yakalamak için esnek bir yüz modeli uydurulur. Ardından gelişmiş bir eşleştirme algoritması ortak bir şablon ağı nazikçe bükerek tüm nihai yüzlerin aynı nokta sayısına ve bağlanabilirliğe sahip olmasını sağlar. Bu birleşik yapı, araştırmacıların kendi karmaşık ön işleme boru hatlarını tasarlamadan insanlar ve ifadeler arasında yüzleri nokta nokta karşılaştırmasına izin verir.

Veriler ne için kullanılabilir

Tamamlanmış veri seti birkaç bilgi katmanı sunar: standardize edilmiş 3B ağlar, işaret noktaları, her ifadenin nötr yüzde nasıl farklılaştığını gösteren ayrıntılı haritalar ve her duygu ile eylem birimi için doğrulanmış etiketler. Kamuya açık dosyalar tanımlayıcı dokuları içermezken, ham taramalar ve renkli görüntüler katılımcı gizliliğini korumak için bir veri kullanım anlaşmasının arkasında tutulur. Bu yapı ile AST-Face, kas benzeri kontrollerle yönlendirilen daha doğal yüz animasyonlarından, ifadelerin bireyler arasında nasıl değiştiğini inceleyen makine öğrenmesi modellerine ve 3B şekil ile 2B görüntü arasındaki bağlantıları kuran çapraz modal sistemlere kadar geniş bir çalışma yelpazesini destekleyebilir.

Geleceğin dijital yüzleri için ne anlama geliyor

Basitçe söylemek gerekirse, AST-Face araştırmacılara aynı dijital dili konuşan, yüksek kaliteli ve iyi düzenlenmiş bir Doğu Asyalı 3B yüz seti sunar. Çeşitli ifadeleri, dikkatle doğrulanmış kas temelli etiketleri ve paylaşılan bir ağ yapısını birleştirerek, veri seti tutarlı, gerçekçi yüz hareketlerine ihtiyaç duyan algoritmaları oluşturmayı ve test etmeyi kolaylaştırır. Kontrol edilmiş aydınlatma altında belirli bir yaş grubuna ve pozlanmış ifadelere odaklansa da, mevcut kaynaklardaki demografik boşlukları kapatmaya yardımcı olur ve gelecekte daha kapsayıcı ve doğru dijital yüzler için daha net bir temel oluşturur.

Atıf: Zhao, Y., Gong, G., Li, Y. et al. A Topology Standardized 3D Facial Dataset with Emotion and Action Unit Diversity for East Asians. Sci Data 13, 735 (2026). https://doi.org/10.1038/s41597-026-07098-2

Anahtar kelimeler: 3B yüz veri seti, yüz ifadesi, Doğu Asyalı yüzler, eylem birimleri, topoloji standardizasyonu