PİLOT ÇALIŞMA BİLGİSİ
25–26 Şubat 2026 tarihlerinde Ankara’da ETKİM’de bulunan Profesyonel Öğrenme Laboratuvarı’nda, Notmatix sistemine yönelik bir pilot uygulama gerçekleştirilmiştir. Yapay zekâ destekli otomatik puanlama yaklaşımının gerçek kullanım koşullarındaki performansını değerlendirmek amacıyla yürütülen çalışmaya, ortaokul ve lise düzeylerinden farklı branşlarda görev yapan 113 öğretmen katılım sağlamıştır. Pilot uygulama kapsamında toplam 941 sınav kâğıdı toplanmış; veri bütünlüğü ve karşılaştırılabilirlik kriterleri doğrultusunda yapılan ayıklama süreci sonrasında 764 sınav kâğıdı üzerinden sistem çıktıları ile öğretmen değerlendirmeleri karşılaştırmalı olarak analiz edilmiştir. Uygulamada kullanılan sınavlar, etik ilkelere uygun biçimde öğrencilerin gerçek notlandırma süreçlerinden bağımsız olarak hazırlanmış ve sistemin mevcut versiyonu bu veri seti üzerinden test edilmiştir. Elde edilen bulgular, Notmatix sistemi ile öğretmen değerlendirmeleri arasında belirli bir düzeyde yakınsama bulunduğunu ortaya koymakla birlikte, bu uyumun tüm soru türleri ve değerlendirme senaryoları açısından istikrarlı olmadığına işaret etmektedir. Özellikle açık uçlu, çok adımlı ve yorum gerektiren sorularda puanlama farklılıklarının belirginleştiği; bazı örneklerde sistemin öğretmen değerlendirmelerine kıyasla daha yüksek, bazı durumlarda ise daha düşük puanlama yaptığı tespit edilmiştir. Nicel veri seti analizi sonuçları, kabul edilebilir aralıklarda yakınsama sağlanan örneklerin yanında, dikkat gerektiren düzeyde puan sapmalarının da bulunduğunu göstermektedir. Bunun yanı sıra pilot uygulama sürecinde teknik altyapı, veri yükleme ve sistem işlem sürelerine ilişkin çeşitli sınırlılıklar gözlemlenmiştir. Bu çerçevede, sistemin mevcut haliyle belirli senaryolarda işlevsel çıktılar üretebildiği; ancak ölçme ve değerlendirme süreçlerinde güvenilir ve sürdürülebilir biçimde kullanılabilmesi için doğruluk, tutarlılık ve teknik performans boyutlarında geliştirilmesine ihtiyaç bulunduğu değerlendirilmektedir.
Bizim tarafımızdan bilgilendirilmek istiyorsanız, E-Posta adresinizi buraya yazın