StoryScope: Yapay Zekanın Anlatı İmzasını Ortaya Çıkarıyor

StoryScope, yapay zeka tarafından üretilen kurgusal metinleri insan yazınından ayırt etmek için üslupsal ipuçları yerine söylem düzeyindeki anlatı seçimlerine odaklanan bir araştırma hattı. Karakter özerkliği ve kronolojik süreksizlik gibi 10 boyutta yorumlanabilir özellikler çıkaran sistem, 10.272 yazma isteminden (her biri bir insan ve beş farklı büyük dil modeli tarafından yazılmış) toplam 61.608 hikayeden oluşan paralel bir korpusa uygulanmış. Her hikayeden 304 anlatı özelliği çıkarılmış.

Sadece anlatı özellikleri kullanılarak insan-yapay zeka ayrımında %93,2 makro-F1 skoru, altı yönlü yazar atfında ise %68,4 makro-F1 skoru elde edilmiş; bu da üslup ipuçlarını da içeren modellerin performansının %97'sinden fazlasına karşılık geliyor. 30 özellikten oluşan kompakt bir çekirdek küme, sinyalin büyük kısmını yakalıyor: yapay zeka hikayeleri temaları fazla açıklama eğiliminde ve tek çizgili, düzenli olay örgülerini tercih ederken, insan hikayeleri protagonistin seçimlerini daha ahlaki belirsizlikle çerçeveliyor ve daha karmaşık bir zamansal yapı sergiliyor.

Modele özgü parmak izleri de dikkat çekici: Claude olay yükselişini düz tutuyor, GPT rüya sekanslarına aşırı ağırlık veriyor, Gemini ise dış karakter betimlemesine varsayılan olarak yöneliyor. Yapay zeka hikayeleri anlatı uzayında ortak ve dar bir bölgede kümelenirken, insan yazınları çok daha fazla çeşitlilik gösteriyor. Bu bulgular, insan ve yapay zeka kurgusunu ayırt etmenin sadece yazım stiliyle değil, altta yatan anlatı kurgusu farklılıklarıyla da mümkün olduğunu gösteriyor.