Apple SpeechAnalyzer, Whisper ve eski API'yi WER testinde geride bıraktı

Bağımsız bir kıyaslama, Apple'ın iOS/macOS 26 ile gelen yeni SpeechAnalyzer API'sini üç Whisper modeli ve eski SFSpeechRecognizer'a karşı LibriSpeech'in temiz ve gürültülü test setlerinde ölçtü. Tüm motorlar aynı M2 Pro cihazında, tamamen cihaz üzerinde ve aynı üretim kod yolları üzerinden çalıştırıldı.

Sonuçlar net: SpeechAnalyzer, en büyük Whisper modeli olan Small'ı bile hem temiz hem gürültülü konuşmada geride bıraktı ve bunu yaklaşık üç kat daha hızlı yaptı. Eski SFSpeechRecognizer ise temiz konuşmada 40MB'lık Whisper Tiny'nin bile gerisinde kaldı; bu da Apple'ın yeni API'sine geçişin doğruluk açısından tartışmasız bir kazanç olduğunu gösteriyor.

Metodoloji şeffaflığı dikkat çekici: Whisper sonuçları OpenAI'nin yayımladığı rakamlarla neredeyse birebir örtüşüyor, ham transkriptler herkese açık paylaşıldı ve test süreci geliştiricinin kendi uygulamasında SpeechAnalyzer'ın sonlandırma çağrısı eksikliğinden kaynaklanan bir hatayı ortaya çıkardı.

Bulgular yalnızca İngilizce ve okunan konuşma metinleriyle sınırlı; çok dilli veya toplantı ses kayıtları için Whisper hâlâ gerekli. Ancak İngilizce cihaz üzerinde konuşma tanıma için Apple'ın yerleşik motoru artık en güçlü seçenek.