Uzaktan ihale değerlendirme izlemelerinde personel tanıma ve takibi için hibrit sinir ağı

İhale odalarını gözetlemenin önemi

Hükümetler veya şirketler bir yol, köprü ya da enerji santrali gibi projeleri kimin yapacağına karar verirken, genellikle rekabet eden teklifleri değerlendirmek üzere özel bir ihale odasında toplanan uzmanlara güvenirler. Davetsiz bir kişi içeri sızarsa ya da bir uzman sessizce odadan ayrılırsa, tüm kararın adilliği tehlikeye girebilir. Bu çalışma, yapay zeka destekli akıllı bir kamera sisteminin bu tür odaları otomatik olarak izleyebileceğini, kimlerin bulunduğunu takip edebileceğini ve bir şey ters göründüğünde insanların gün boyu ekran başında oturmasına gerek kalmadan uyarı verebileceğini gösteriyor.

Yeni akıllı oda gözetleyicisinin çalışma biçimi

Araştırmacılar, bir ihale değerlendirme ofisindeki sıradan gözetim kameralarının üzerine yerleştirilebilecek tam bir izleme sistemi geliştirdiler. Sistemin dört ana görevi var: videoda insanları tespit etmek, zaman içinde hareketlerini takip etmek, yüzlerini tanımak ve bu desenlerin güvenlik açısından ne anlama geldiğini değerlendirmek. Bu birleşik bakışa dayanarak bir uyarı birimi, sessiz kalıp kalmamaya veya bir uzmanın uzun süre ayrılması ya da yabancı birinin odaya girmesi gibi olayları işaretlemeye karar veriyor. Birinin kısa süre başka bir kişi tarafından gizlenmesi ya da normal personelin gelip gitmesi gibi günlük değişiklikler kayıt altına alınır ama alarm tetiklemez.

Odada herkesi görme ve sayma

Kimin içeride olduğunu takip etmek için sistem önce her video karesindeki her kişiyi tespit etmeyi ve kaç kişinin bulunduğunu saymayı öğrenir. Ardından tespitleri bir kareden diğerine bağlayarak, her kişi hareket ederken sistem içinde istikrarlı bir kimlik etiketi alır. Bu takip adımı, bir kişinin mesela bir meslektaşının arkasında gizlenmesi gibi kısa süreli kaybolmayı, gerçek bir kapıdan çıkıştan ayırt etmeye yardımcı olur. Her kişinin yolunu izleyerek yazılım, bir uzmanın önceden belirlenmiş süre sınırından daha uzun süre yok olduğunu anlayabilir ve bunu dikkat gerektiren bir risk olarak ele alır.

Uzaktaki ve küçük yüzleri tanıma

İhale odaları genellikle duvarda veya tavanda yüksek yerleştirilen kameralarla izlenir; bu da yüzlerin küçük ve sık sık uygunsuz açılarda görünmesi anlamına gelir. Mevcut birçok yüz tanıma aracı bu koşullarda zayıf performans gösterir. Bu nedenle yazarlar, kalabalık sahnelerde küçük yüzleri büyütüp daha iyi tespit edebilen rafine bir yüz bulucu ile hızlı bir kişi tespit yöntemini birleştirdiler. Bir yüz tespit edildikten sonra, hafif yapılı bir yüz eşleştirme yöntemi onu bilinen uzmanlar ve personel içeren depolanmış bir galeride kontrol eder. Yeni bir yüz belirlenen tolerans içinde onaylı herhangi bir kişiyle eşleşmezse, sistem o bireyi olası bir davetsiz olarak işaretler ve bu değerlendirmeyi uyarı birimine iletir.

Sistemin gerçek ofislerdeki performansı

Ekip yaklaşımını enerji şirketindeki bir ihale değerlendirme odasından alınan gerçek videolar üzerinde test etti. Tam sistemlerini yalnızca kişileri sayan ya da kim olduklarını bilmeden takip eden daha basit yaklaşımlarla karşılaştırdılar. Hibrit sistem, dört pratik durumu ayırt etmede daha iyi olduğu kanıtlandı: bir uzmanın gerçekten ayrılması, bir uzmanın kısa süreli görüşten engellenmesi, normal personelin girişi ve bir yabancının içeri girmesi. Küçük yüzleri tanımada yüksek doğruluk elde etti, gerçek zamanlı kullanım için yeterince hızlı çalıştı ve temel yöntemlerle karşılaştırıldığında kaçırılan davetsiz girişleri ve yanlış alarmları belirgin şekilde azalttı.

Daha adil kararlar için anlamı

Basitçe söylemek gerekirse, bu çalışma sıradan kameraların iyi tasarlanmış yapay zeka ile eşleştirildiğinde hassas karar odalarının dürüstlüğünü korumaya yardımcı olabileceğini gösteriyor. Sistem, kimlerin bulunduğunu sessizce izleyebilir, bir uzmanın kaybolduğunu ya da bilinmeyen birinin ortaya çıktığını fark edebilir ve insan yöneticilerin müdahale edebilmesi için zamanında uyarılar gönderebilir. Yüzlerin ağır şekilde kapalı olduğu veya tamamen ters döndüğü durumlarda hâlâ zorlanıyor olsa da, şimdiden daha temiz ihale prosedürlerini destekleyecek pratik bir araç sunuyor ve kimlerin gelip gittiğinin güvenilir, düşük maliyetli takibine ihtiyaç duyan diğer çalışma alanlarına uyarlanabilir.

Atıf: Zhou, Z., Wang, Z., Meng, Y. et al. Hybrid neural network for personnel recognition and tracking in remote bidding evaluation monitoring. Sci Rep 16, 15769 (2026). https://doi.org/10.1038/s41598-026-42936-8

Anahtar kelimeler: ihale değerlendirme izlemesi, kişi takibi, yüz tanıma, video gözetimi, sinir ağı