LLM'ler Bilgisayar Mimarisi Makalelerini Derinlemesine Anlayabilir mi?
Büyük dil modellerinin bilgisayar mimarisi makalelerini derinlemesine anlama yeteneği inceleniyor. Gauntlet pipeline'ı ile yapılan analizler önemli bulgular sunuyor.
Büyük dil modellerinin bilgisayar mimarisi makalelerini derinlemesine anlama yeteneği, özetleme değil, yapısal eleştiri üzerine odaklanıyor. Gauntlet adlı açık kaynaklı bir pipeline, beş bağımsız uzman kişilik inceleyicisi ile bir karşıt sentez aşaması aracılığıyla bir makaleyi analiz ediyor. 20 ISCA 2025 ve HPCA 2026 makalesi üzerinde yapılan çalışmada, değerlendiriciler Gauntlet'i insan analizine tercih etti. Gauntlet, derinlikten ziyade güven ve fayda açısından insanları geride bırakıyor.