» Etiket
benchmark
6 yayınLoRA Speedrun: Fine-Tuning Teknikleri İçin Açık Hız Sıralaması
LoRA Speedrun, Qwen2.5-1.5B ve GSM8K üzerinde tek bir L40S GPU'da doğrulanmış, herkese açık bir LoRA fine-tuning hız sıralaması sunuyor.
CVE-Bench: LLM Ajanlarını Gerçek Güvenlik Açıklarını Onarmakta Test Ediyor
CVE-Bench, LLM ajanlarının gerçek Python güvenlik açıklarını Docker sandbox içinde düzeltme becerisini ölçen açık kaynak benchmark aracı.
SysAdmin Testi: Yapay Zeka Modellerinde Güç Arayışı Ölçülüyor
SysAdmin benchmark'ı, 7 sınır AI modelinde Linux sandbox testleriyle güç arayışı davranışlarını ölçtü; sonuçlar %0-5 aralığında kaldı.
CommitBrief — terminalde yapay zekâ destekli kod incelemesi
Staged değişiklikleri, bir commit aralığını ya da bütün bir GitHub pull request'ini yerelde inceleyen sağlayıcı bağımsız CLI. Sıfır telemetri, sunucu yok. Açık kaynak, GPL-3.0.
commitbrief.comKeiro, $0.10/1K Fiyatla Web Arama Hizmeti Sunmaya Başladı
Keiro, $0.25/1k fiyatla web arama hizmeti sunarak, Parallel'i geride bıraktı. Mühendisler için veri alma süreçlerinde önemli bir gelişme.
TTFT Benchmark: LLM Gateway ve OpenRouter Karşılaştırması
LLM Gateway, OpenRouter'a göre %35 daha hızlı. TTFT benchmark sonuçları ve mühendisler için önemi.
Velocity: Yerel AI Yığınını Sıfırdan Geliştirme
Velocity, sıfırdan geliştirilmiş yerel AI yığını ile bellek darboğazını çözüyor.