LLM ile Üretilen Testler Uygulama Seçimini Nasıl Değiştirir?
Büyük dil modellerinin test üretimi üzerindeki etkileri ve uygulama seçimindeki rolü hakkında önemli bulgular.
Büyük dil modelleri, aday kodu değerlendirmek için testler ve yürütülebilir kanıtlar üretmekte giderek daha fazla kullanılmaktadır. Ancak, bu durum, adayın gözlemlenmesi sonrasında üretilen kanıtların kullanılması nedeniyle karşılaştırmalı ölçüm sorunları yaratmaktadır. Araştırma, adayların görünürlüğünün test üretimini nasıl etkilediğini ve bu durumun değerlendirme sonuçlarını nasıl değiştirdiğini incelemektedir.