SAGA: Videoyu Hangi Yapay Zeka Modelinin Ürettiğini Tespit Ediyor
SAGA, üretken yapay zeka videolarının hangi modelle üretildiğini beş seviyede tespit eden yeni, veri-verimli ve yorumlanabilir bir atıf çerçevesi sunuyor.
Üretken yapay zeka ile üretilen videoların gerçekçiliği arttıkça, basit 'gerçek mi sahte mi' tespit sistemleri yetersiz kalıyor. SAGA (Source Attribution of Generative AI videos), bir videonun sadece sahte olup olmadığını değil, hangi modelle üretildiğini belirlemeyi hedefleyen ilk kapsamlı çerçeve olarak sunuluyor.
Sistem, doğruluk, üretim görevi (metinden videoya veya görüntüden videoya), model sürümü, geliştirici ekip ve tam olarak hangi üretici model kullanıldığı olmak üzere beş farklı seviyede atıf yapabiliyor. Güçlü bir görsel temel modelden alınan özellikleri kullanan özgün bir video transformer mimarisi, uzamsal-zamansal (spatio-temporal) izleri yakalayarak bu ayrımı mümkün kılıyor.
Araştırmacılar, sınıf başına yalnızca yüzde 0.5 oranında etiketli veriyle tam denetimli performansa ulaşan veri açısından verimli bir ön-eğitim ve atıf stratejisi geliştirdi. Ayrıca, farklı video üreticilerinin neden ayırt edilebilir olduğunu görselleştiren Temporal Attention Signatures (T-Sigs) adlı yorumlanabilirlik yöntemi tanıtıldı.
Çapraz alan senaryoları da dahil olmak üzere kamuya açık veri setlerindeki testler, SAGA'nın sentetik video kökeni belirleme konusunda yeni bir referans noktası oluşturduğunu gösteriyor; bu da adli ve düzenleyici uygulamalar için önemli, açıklanabilir içgörüler sunuyor.
Bu sentez, kaynağından yapay zeka tarafından üretildi; insan editör ya da elle onay adımı yoktur. Nasıl çalışıyoruz