Clear Sky Science · tr

EEG sinyallerinden duygu tanıma için çift dallı derin öğrenme çerçevesi

· Dizine geri dön

Beyin Dalga Okumak Ruh Halinize Nasıl Yardımcı Olabilir

Stres, anksiyete ve depresyon gibi akıl sağlığı sorunları genellikle biz ya da çevremizdekiler tam farkına varmadan önce sinsice ortaya çıkar. Peki ya günlük cihazlar duygusal durumumuzu sessizce izleyip ne zaman bir mola veya destek gerektiğini bildirebilse? Bu makale, saç derisinden elektriksel sinyalleri kaydeden bir kulaklıkla beynin etkinlik örüntülerini okumaya yönelik yeni bir yaklaşımı inceliyor ve bunları modern yapay zekâ ile birleştirerek duyguları hızlı, doğru ve az elle ayarlama gerektirecek şekilde tanımayı amaçlıyor.

Figure 1
Figure 1.

Beyin Sinyallerini Duygusal İpuçlarına Dönüştürmek

Beyinlerimiz sürekli olarak EEG (elektroensefalografi) adı verilen bir teknolojiyle ölçülebilen çok küçük elektriksel darbeler üretir. Bu sinyaller sakin, stresli veya eğlenmiş hissettiğimizde ince değişiklikler gösterir. EEG verilerini yorumlamanın geleneksel yöntemleri, ham sinyallerden matematiksel özellikleri uzmanların elle çıkarmasına dayandığı için yavaş ve kırılgan bir süreçtir; bir çalışmadan diğerine kolayca aktarılmaz. Yazarlar bu elle yapılan işi, doğrudan veriden öğrenen uçtan uca bir sistemle değiştirmeyi hedefliyor; böylece duygu tanıma daha güvenilir ve gerçek dünya akıl sağlığı izlemesine daha kolay uygulanabilir hale gelebilir.

Aynı Sinyali Anlamlandırmak için İki Yol

Çalışmanın özünde aynı EEG sinyaline iki tamamlayıcı açıdan bakan çift dallı bir derin öğrenme modeli var. Bir dalga, sinyalin zaman içindeki evrimine odaklanarak ham beyin dalgası dizilerini LSTM adı verilen; örüntüleri ve ritimleri izlemekte başarılı bir tür sinir ağına besliyor. Diğer dal ise aynı sinyali frekans haritasına çeviriyor; bu, ses mühendislerinin sesi görselleştirme biçimine benzer bir yaklaşım ve yerel desenleri tespit etmekte başarılı bir konvolüsyonel ağdan geçiriliyor. Bir dal zamanlamada uzmanlaşırken diğeri frekansta uzmanlaşarak, sistem farklı duyguların beyinde nasıl ortaya çıktığına dair daha zengin bilgi yakalıyor.

İki Görüşün Birbirine Öğretmesine İzin Vermek

Bu iki dalı sadece sonunda buluşan ayrı uzmanlar olarak ele almak yerine, yazarlar bunların çift yönlü etkileşimde bulunacak şekilde tasarlanmasını sağlıyor. Frekans bazlı özellikler tekrar sinyal benzeri bir biçime dönüştürülüp ek bir zamansal ağdan geçirilerek spektral örüntülerin zaman içinde de mantıklı olup olmadığını modelin kontrol etmesi teşvik ediliyor. Aynı şekilde, zamansal daldan üretilen özet, sentetik bir sinyale dönüştürülüp frekans haritasına çevriliyor ve spektral dal tarafından yeniden inceleniyor. Bu ileri geri alışveriş, modelin hangi sinyal yönlerinin duygusal durumları ayırt etmede gerçekten önemli olduğu konusunda uzlaşmasını sağlıyor. Son olarak model, bu bakış açılarını her iki dalın güçlü biçimde uzlaştığı noktaları vurgulayan basit matematiksel işlemlerle birleştiriyor ve sonucu duygu kategorisi çıktısı veren kompakt bir sınıflandırıcıya veriyor.

Figure 2
Figure 2.

Farklı Gerçek Dünya Koşullarında Test Etme

Yaklaşımlarının tek bir dikkatle kontrol edilmiş deneyin ötesinde dayanıp dayanmadığını görmek için yazarlar bunu duyguları ve stresi çok farklı durumlarda yakalayan üç halka açık veri setinde test ediyor. Birincisi, insanların film kliplerini izlerken olumlu, nötr ve olumsuz duyguları kaydetmek için tüketici sınıfı bir bant kullanıyor. İkinci çalışma, gönüllülerin göğüs ve bilek sensörleri takarak stresli röportajlar, sakin bazlinelar ve eğlendirici videolar boyunca izlendiği bir tasarım. Üçüncüsü ise ofis çalışanlarını zaman baskısı ve kesintilerle uzun oturumlar boyunca gözlemliyor. Bu çeşitli senaryolar, cihazlar ve katılımcılar arasında çift dallı model çarpıcı derecede yüksek doğruluk elde ediyor—beyin dalgası veri setinde %96’nın üzerinde ve diğer ikisinde pratikte mükemmele yakın skorlar—aynı zamanda tasarımı neredeyse gerçek zamanlı kullanım için yeterince verimli tutuyor.

Günlük Hayat İçin Anlamı

Basitçe söylemek gerekirse, çalışma beynin etkinliğine ilişkin iki basit ama tamamlayıcı görüşü birleştirmenin ve bunların birbirlerini sürekli olarak rafine etmelerine izin vermenin, hem güçlü hem de pratik bir duygu tanıma sistemi ortaya çıkarabileceğini gösteriyor. Kırılgan elle yapılmış özelliklere güvenmek yerine çerçeve doğrudan veriden öğreniyor ve yeni kişilerle ve kayıt koşullarıyla karşılaştığında dayanıklı kalıyor. Daha fazla veri seti arasında uyarlamak, giyilebilirler için küçültmek ve ek vücut sinyallerini dahil etmek için daha fazla çalışma gerekse de, bu çift dallı yaklaşım duygusal iyi oluşumuzu sessizce izleyebilecek, krizler ortaya çıkmadan önce erken uyarılar ve kişiselleştirilmiş destek sunabilecek gelecekteki araçlara işaret ediyor.

Atıf: Saha, D., Ali, A., Gulvanskii, V. et al. A dual-branch deep learning framework for emotion recognition from EEG signals. Sci Rep 16, 13076 (2026). https://doi.org/10.1038/s41598-026-42998-8

Anahtar kelimeler: EEG duygu tanıma, derin öğrenme, akıl sağlığı izleme, beyin–bilgisayar arayüzleri, stres tespiti