Sınıf İçi Taşınabilir Yüz Tanıma Destekli Yoklama Asistanı

GÖRSEL ALGILAMA · TAŞINABİLİR UÇ YAPAY ZEKÂ SİSTEMİ · TÜBİTAK 2209-A

Sınıf İçi Taşınabilir Yüz Tanıma Destekli Yoklama Asistanı

Kürsü mesafesinden tek elle yönlendirilen, çift kameralı ve tamamen cihaz üzerinde çalışan yoklama asistanı prototipi. Belirsiz eşleşmeler ham yüz görüntüsü aktarılmadan, internete kapalı WPA3 yerel Wi-Fi erişim noktası üzerinden öğretmenin akıllı telefonundaki yerel web arayüzüne sunulur.

Başvuru Sahibi / Yürütücüler: Mahmut ÖZEN, Batu ONUR Akademik Danışman: Öğr. Gör. Dr. Hasan MAZLUM (ISUBÜ, Isparta OSB MYO) Revizyon: MV-20 · Bütçe: 10.610,00 TL (6 Kalem)
LV–01 / BÜTÜN SİSTEM MİMARİSİ VE KAPALI DEVRE MOBİL ONAY HEDEFLENEN YERLEŞİM · ≤ 190 × 110 × 55 MM · ≤ 650 G
Sınıf İçi Taşınabilir Yüz Tanıma Destekli Yoklama Asistanı çift kameralı gövde ve kapalı devre mobil onay mimarisi Sol tarafta ön yüzünde geniş açılı genel görüş ve 64 MP otofokus ayrıntı kamerası bulunan simetrik kutu; sağ tarafta arka hava menfezleri, internetsiz WPA3 yerel Wi-Fi AP modülü ve metaveri onaylı öğretmen telefonu yer alır. A B YOKLAMA ASİSTANI · PLA PRO CİHAZ ARKA YÜZÜ Aktif Soğutucu Menfezi (≤ 65 °C) WPA3 Yerel Wi-Fi AP İnternetsiz · 0 bayt dış trafik Yalnız Metaveri Görüntü yok FastAPI Mobil Onay Aday #12 (Belirsiz) Bölge: 7. Sıra · Sol Benzerlik: 0.41 Onayla Reddet Onay sonrası FAR: %0 ÖN / SINIFA BAKAN YÜZ ARKA YÜZ VE KAPALI DEVRE MOBİL ONAY AKIŞI A · Module 3 Wide (102° FOV, 11,9 MP) B · Arducam 64 MP AF (72° FOV, 9152×6944) Simetrik gövde · Tutamak yok · Fiziksel onay arayüzü öğretmenin akıllı telefonundadır Ham yüz görüntüsü/kırpıntısı cihaza yazılmaz ve telefona aktarılmaz
Simetrik dikdörtgen gövde (≤ 190 × 110 × 55 mm, ≤ 650 g, Flashforge PLA Pro). Dahili onay arayüzü ihtiyacı Pi 5'in internetsiz WPA3 yerel Wi-Fi erişim noktası üzerinden karşılanarak maliyet, ağırlık ve KVKK riskleri azaltılmıştır.

1. BİLİMSEL NİTELİK · ARAŞTIRMA SORUSU VE HİPOTEZLER

Kürsüden 90 saniyenin altında, vekâleten yoklamayı sıfırlayan doğrulama.

Kalabalık sınıflarda isim okuma ders süresinin %10–15'ini harcamakta, imza listesi ise vekâleten imza hatasına açık kalmaktadır. Sınıf İçi Taşınabilir Yüz Tanıma Destekli Yoklama Asistanı; geniş açı kapsama (102° FOV) ile yüksek çözünürlüklü ayrıntı yakalamayı (64 MP AF) tek elde taşınır sabit blokta birleştirir, Hailo-8 NPU üzerinde INT8 çıkarım yaparak ham görüntü depolamadan belirsiz eşleşmeleri kapalı devre yerel Wi-Fi arayüzünde metaveri olarak öğretmenin onayına sunar.

Araştırma Sorusu: Kürsü mesafesinden tek elle yönlendirilen çift kameralı taşınabilir bir uç yapay zekâ sistemi; 40 kişilik derslikte yoklama süresini 90 saniyenin altına indirirken vekâleten yoklama hatasını sıfırlayabilir ve arka sıralardaki (6–8 m) öğrencileri en az %90 doğrulukla tespit edebilir mi?
H1 · OPTİK ÇÖZÜNÜRLÜK

Çift Kamera Kazancı

Geniş açı + 64 MP otofokus ayrıntı kamerası düzeneği, 6–8 m sıralarda tek geniş açı kameraya göre tanıma doğruluğunu en az ≥ 15 yüzde puan artırır (p < 0,05).

H2 · UÇ HIZLANDIRMA

Hailo-8 NPU Gecikmesi

Hailo-8 INT8 hattı, Raspberry Pi 5 CPU'suna kıyasla çıkarım gecikmesini ≥ 4 kat azaltarak 40 kişilik tarama ve eşleştirme aşamasını < 30 saniyede tamamlar.

H3 · İNSAN ONAYI

Sıfır Hatalı Kabul (FAR)

Belirsiz adayların yerel WPA3 mobil web arayüzünde metaveriyle onaylanması, hatalı kabul oranını %0'a çekerken onay yükünü < 45 s (toplam ≤ 90 s) sınırında tutar.

01 / GÖRÜNTÜLE · ÇİFT KAMERA KALİBRASYONU

Geniş açı ile bütünü gör, 64 MP otofokusla arka sırayı çöz.

A — Genel Görüş (Raspberry Pi Camera Module 3 Wide): Sony IMX708 algılayıcı (11,9 MP, 102° ultra geniş yatay FOV, PDAF, HDR). Kürsüden sınıfın ön ve orta sıralarını (1–5. sıralar) tek karede kapsayarak 300–700 lüks ışıkta ≥ %95 doğru kabul ve FAR ≤ %0,5 hedefler.

B — Ayrıntı Kamerası (Arducam 64 MP AF B0399): 9152 × 6944 piksel, 72° FOV ve motorize otomatik odak. Optik yakınlaştırma olmadan yüksek sensör çözünürlüğüyle 6–8 m mesafedeki arka sıralarda yüz başına ≥ 80 × 80 piksel yoğunluk ve ≥ %90 doğru kabul sağlar.

İki kamera libcamera üzerinden ortak zaman damgasıyla (< 50 ms senkronizasyon) tetiklenir; OpenCV satranç tahtası hedefiyle içsel/dışsal homografi kalibrasyonu (yeniden projeksiyon hatası ≤ 1,5 piksel) doğrulanır.

LV–01 çiziminden çift kamera yerleşim detayı
LV–01 / Ön yüz detayı — Camera Module 3 Wide (A) ve Arducam 64 MP AF (B) simetrik rijit plakada eşit eksen aralığıyla konumlanır.

02 / İŞLE · UÇ YAPAY ZEKÂ VE KVKK MİMARİSİ

Ham görüntü saklamayan, RAM üzerinde çalışan INT8 çıkarım hattı.

Donanım Çekirdeği: Raspberry Pi 5 (16 GB LPDDR4X RAM) ve PCIe 2.0 üzerinden bağlı Raspberry Pi AI HAT+ (Hailo-8, 26 TOPS INT8 NPU). SCRFD tespit [4] ve ArcFace gömme [2] modelleri Hailo Dataflow Compiler ile INT8 olarak derlenir; kare başına uçtan uca çıkarım ≤ 60 ms, FP32'ye kıyasla doğruluk kaybı ≤ %1,5 hedeflenir.

Enerji, Isıl Kontrol ve KVKK: Taşınabilir 20.000 mAh USB-C PD (5V/5A) batarya tek şarjla ≥ 150 dakika (en az 3 ders bloku) çalışma sağlar; mevcut resmi aktif soğutucu gövde içi sıcaklığı ≤ 65 °C tutar. Açık rıza veren öğrencilerin gömme vektörleri yalnızca RAM'de tutulur; kalıcı belleğe %100 ham görüntü yazılmaz ve harici ağ trafiği 0 bayttır.

LV–02 gövde içi donanım yerleşim kesiti A / B Çift CSI Kamera Plakası Raspberry Pi 5 16 GB RAM · Yerel Wi-Fi AP AI HAT+ Hailo-8 (26 TOPS) 20.000 mAh USB-C PD 5V/5A Aktif Soğutucu Hava Menfezi Ön optik yüz Arka AP / menfez LV–02 / İşlevsel yerleşim kesiti · SolidWorks parametrik gövde + Flashforge PLA Pro baskı
LV–02 / Gövde içi yerleşim — 16 GB RAM, 26 TOPS NPU, resmi aktif soğutucu hava kanalları ve 20.000 mAh taşınabilir güç tek blokta birleşir.

03 / KONTROL ET · KAPALI DEVRE MOBİL WEB ONAYI

Telefona görüntü aktarmadan, tek dokunuşla öğretmen onayı.

ROC eşik değeri altında kalan veya çakışan adaylar otonom olarak kesinleştirilmez. Raspberry Pi 5 dahili kablosuz yongası üzerinden yalnızca öğretmenin cihazının bağlanabildiği internete kapalı WPA3 yerel erişim noktası (Local AP) oluşturur ve FastAPI yerel web arayüzünü sunar.

Mahremiyet ilkesi gereği telefon tarayıcısına ham kare veya yüz kırpıntısı gönderilmez; yalnızca aday kimliği, tahmini sıra/oturma bölgesi ve benzerlik puanı metaverisi iletilir. Öğretmen sınıftaki öğrenciyi doğrudan gözlemleyerek tek dokunuşla onaylar veya reddeder (≤ 200 ms arayüz gecikmesi, ≤ 3 s tekil onay, onay sonrası FAR = %0).

LV–01 çiziminden kapalı devre WPA3 yerel Wi-Fi AP ve mobil web arayüz detayı
Kapalı devre yerel ağ detayı — Pi 5 WPA3 Local AP yalnız sınıf içi öğretmen telefonuna metaveri sunar; internete çıkış yoktur.

SPESİFİK HEDEFLER, 8 AYLIK TAKVİM VE AKADEMİK KAYNAKÇA

Ölçülebilir başarı ölçütleri (SH1–SH8) ve çalışma planı.

Doğrulama Yöntemi ve İstatistiksel Analiz

ISUBÜ OSB MYO 40 kişilik dersliklerinde gönüllü katılımcılarla en az 3 bağımsız oturumda tek kamera vs çift kamera ve CPU vs Hailo-8 NPU karşılaştırmaları yapılacaktır. Hipotezler (H1–H3) eşleştirilmiş t-testi ve ANOVA ile p < 0,05 düzeyinde sınanacak, sonuçlar LFW [6] ve NIST FRVT Part 3 [7] demografik hata ölçütleriyle raporlanacaktır.

Stratejik Uyum ve Çıktılar

12. Kalkınma Planı ve 2030 Sanayi ve Teknoloji Stratejisi'nin yapay zekâ, gömülü sistemler ve akıllı cihazlar alanlarıyla tam uyumludur. Proje çıktıları: çalışan donanım/yazılım prototipi, KVKK uyumlu yerel onay mimarisi, açık başarım veri kümesi ve hakemli konferans bildirisi (SIU / IEEE).

Spesifik Hedefler ve Başarı Ölçütleri (SH1–SH8)
NoSpesifik HedefBaşarı Ölçütü
SH1Simetrik dikdörtgen gövdenin 3B modellenmesi ve üretimiToplam ağırlık ≤ 650 g; boyutlar ≤ 190 × 110 × 55 mm; FDM PLA Pro rijitliği ve kablo güvenliği tam.
SH2Çift kamera optik/donanım entegrasyonu ve kalibrasyonuKürsüden tüm sınıfı kapsama; yeniden projeksiyon hatası ≤ 1,5 piksel; tetikleme senkronizasyonu < 50 ms.
SH3Modellerin Hailo-8 NPU üzerinde INT8 olarak derlenmesiUçtan uca çıkarım süresi ≤ 60 ms/kare; INT8 niceleme doğruluk kaybı ≤ %1,5 (FP32 referansa göre).
SH41–5. sıralarda (yakın/orta mesafe) yüksek tanıma doğruluğuDoğru kabul oranı ≥ %95; yanlış kabul oranı (FAR) ≤ %0,5 (300–700 lüks aralığında).
SH56–8. sıralarda (6–8 m) ayrıntı kamerası ile tanımaYüz çözünürlüğü ≥ 80 × 80 piksel; doğru kabul oranı ≥ %90 (çift kamera desteğiyle).
SH6Kapalı devre yerel Wi-Fi AP mobil web onay arayüzüYerel arayüz gecikmesi ≤ 200 ms; tekil onay ≤ 3 s; onay sonrası FAR = %0.
SH7KVKK uyumlu ham görüntü saklamayan cihaz üzeri boru hattıHam yüz görüntülerinin kalıcı belleğe yazılmaması (%100); şablonlar yalnız RAM'de; dış ağ trafiği 0 bayt.
SH8Sistem düzeyinde yoklama süresi ve batarya dayanımı40 kişilik sınıfta toplam yoklama süresi ≤ 90 s; tek şarjla ≥ 150 dakika kesintisiz çalışma (≥ 3 ders).
Çalışma Takvimi (01.03.2027 – 31.10.2027 · 8 Ay · İP1–İP8 = %100)
Tarihİş PaketiSorumluBaşarı Ölçütü ve Katkı
01.03–31.03.2027İP1: Sistem mimarisi, optik bütçe ve test protokolü tasarımıMahmut ÖZEN, Batu ONURTeknik tasarım belgesi (%10)
01.04–30.04.2027İP2: 3B SolidWorks gövde, ısıl akış tasarımı ve PLA Pro baskıBatu ONUR, Mahmut ÖZEN≤ 650 g rijit gövde, SH1 (%15)
01.05–31.05.2027İP3: Çift kamera donanım entegrasyonu ve kalibrasyonMahmut ÖZEN, Batu ONURHata ≤ 1,5 px, senkron < 50 ms, SH2 (%15)
01.06–30.06.2027İP4: SCRFD/ArcFace derleme ve Hailo-8 INT8 nicelemeMahmut ÖZEN≤ 60 ms/kare, kayıp ≤ %1,5, SH3 (%20)
01.07–31.07.2027İP5: WPA3 Local AP FastAPI arayüzü ve RAM/KVKK hattıBatu ONUR, Mahmut ÖZENGecikme ≤ 200 ms, 0 bayt dış trafik, SH6–7 (%15)
01.08–31.08.2027İP6: Bataryalı entegrasyon, güç ve ısıl dayanım testleriMahmut ÖZEN, Batu ONUR≥ 150 dk çalışma, sıcaklık ≤ 65 °C, SH8 (%10)
01.09–30.09.2027İP7: 40 kişilik sınıf testleri ve H1–H3 hipotez analiziMahmut ÖZEN, Batu ONURSüre ≤ 90 s, 1–5. ≥ %95, 6–8 m ≥ %90, p < 0,05 (%10)
01.10–31.10.2027İP8: Dayanıklılık, hata analizi ve tekrarlanabilirlikMahmut ÖZEN, Batu ONUR≥ 3 oturumda SH1–SH8 ve %0 FAR onayı (%5)
Akademik Kaynakça ([1]–[7] · IEEE Biçimi ve Doğrulanmış DOI/arXiv)

[1] F. Schroff, D. Kalenichenko, and J. Philbin, "FaceNet: A unified embedding for face recognition and clustering," in Proc. IEEE CVPR, 2015, pp. 815–823, doi: 10.1109/CVPR.2015.7298682.

[2] J. Deng, J. Guo, N. Xue, and S. Zafeiriou, "ArcFace: Additive angular margin loss for deep face recognition," in Proc. IEEE/CVF CVPR, 2019, pp. 4690–4699, doi: 10.1109/CVPR.2019.00482.

[3] J. Deng, J. Guo, E. Ververas, I. Kotsia, and S. Zafeiriou, "RetinaFace: Single-shot multi-level face localisation in the wild," in Proc. IEEE/CVF CVPR, 2020, pp. 5203–5212, doi: 10.1109/CVPR42600.2020.00525.

[4] J. Guo, J. Deng, A. Lattas, and S. Zafeiriou, "Sample and computation redistribution for efficient face detection," in Proc. ICLR, 2022, arXiv:2105.04714.

[5] J. Deng, J. Guo, T. Liu, M. Gong, and S. Zafeiriou, "Sub-center ArcFace: Boosting face recognition by large-scale noisy web faces," in Proc. ECCV, 2020, pp. 741–757, doi: 10.1007/978-3-030-58621-8_43.

[6] G. B. Huang, M. Ramesh, T. Berg, and E. Learned-Miller, "Labeled faces in the wild: A database for studying face recognition in unconstrained environments," Univ. of Massachusetts, Amherst, Tech. Rep. 07-49, 2007.

[7] P. Grother, M. Ngan, and K. Hanaoka, "Face Recognition Vendor Test (FRVT) Part 3: Demographic effects," National Institute of Standards and Technology, NISTIR 8280, 2019, doi: 10.6028/NIST.IR.8280.

PROJE BÜTÇESİ (10.610,00 TL ≤ 12.000,00 TL) VE MEVCUT ALTYAPI

Talep edilen 6 kalem ve kurum envanterindeki ana birimler.

KALEM 1 · İP3

Camera Module 3 Wide (SC1224)

1 Adet · 2.790,00 TL

Kürsüden tüm sınıf düzlemini tek karede kapsayan 102° FOV, 11,9 MP PDAF genel görüş kamerası. Mevcut Camera Module 2 sabit odaklı ve dar açılı olduğu için talep edilmektedir.

SAMM — Genel kamera bağlantısı
KALEM 2 · İP3, İP7

Arducam 64 MP AF (B0399 Hawkeye)

1 Adet · 5.160,00 TL

6–8 m arka sıralarda yüz başına ≥ 80×80 piksel yoğunluğu sağlayan motorize otofokus ayrıntı kamerası. Çift kamera vs tek kamera kazancını ölçen SH5 ve H1'in önkoşuludur.

SAMM — Ayrıntı kamerası bağlantısı
KALEM 3 · İP6

Taşınabilir Güç Kaynağı (20.000 mAh)

1 Adet · 1.350,00 TL

USB-C PD 5V/5A destekli taşınabilir güç kaynağı. Mevcut sabit priz adaptörü kablosuz çalışmaya imkân vermediğinden kesintisiz ≥ 150 dakika hedefi (SH8) için talep edilmektedir.

KALEM 4 · İP2

Flashforge PLA Pro Filament (1 kg)

1 Adet · 600,00 TL

ISUBÜ OSB MYO atölyesindeki FDM 3B yazıcılarla ≤ 650 g simetrik gövde, kamera yuvaları, tasarım revizyonları ve yedek parça üretimi (SH1) için sarf malzemesidir.

KALEM 5 · İP3

Pi 5 CSI Şerit Kablolar & Montaj

1 Paket · 270,00 TL

İki kameranın Raspberry Pi 5 çift 22-pin MIPI CSI portuna gövde içi yönlendirilmesi, eşzamanlı tetikleme bağlantıları ve mekanik sabitleme sarfları için gereklidir.

KALEM 6 · İP3

Kalibrasyon & Ölçüm Sarfları

1 Paket · 440,00 TL

OpenCV satranç tahtası hedef deseni baskıları; çift kamera içsel/dışsal parametre çıkarımı ve yeniden projeksiyon hatasının SH2 (≤ 1,5 px) doğrulaması için gereklidir.

NoTalep KalemiAdetTutarİlgili İş Paketi / Gerekçe
1Raspberry Pi Camera Module 3 Wide (SC1224)1 Adet2.790,00 TLİP3 · Geniş görüş kanalı (102° FOV)
2Arducam 64 MP AF Otofokus Modülü (B0399)1 Adet5.160,00 TLİP3, İP7 · SH5 ve H1 arka sıra ayrıntı kanalı
320.000 mAh USB-C PD 5V/5A Taşınabilir Güç Kaynağı1 Adet1.350,00 TLİP6 · SH8 (≥ 150 dk kablosuz kullanım)
4Flashforge PLA Pro Filament (1 kg)1 Adet600,00 TLİP2 · SH1 simetrik gövde 3B baskısı
5Pi 5 22-pin/15-pin CSI Şerit Kablolar ve Montaj Sarfları1 Paket270,00 TLİP3 · Çift CSI bağlantısı ve gövde içi montaj
6Rijit Satranç Tahtası Kalibrasyon Hedef Deseni Baskısı1 Paket440,00 TLİP3 · SH2 (≤ 1,5 px) homografi kalibrasyonu
TOPLAM TALEP EDİLEN BÜTÇE6 Kalem10.610,00 TL2209-A 12.000,00 TL üst sınırının altındadır
Kurum Altyapısı (Ek Bütçe Gerektirmez): Raspberry Pi 5 (16 GB RAM), Raspberry Pi AI HAT+ (Hailo-8, 26 TOPS), resmi aktif soğutucu, Camera Module 2 referans modülü, ISUBÜ OSB MYO Mekatronik Laboratuvarı, SolidWorks / RTX 4070 derleme istasyonu, Flashforge Creator 3 ve Creality Ender-3 V3 FDM yazıcılar ile 40 kişilik örnek derslik mevcuttur.