koedesk STT Bench

Önceden kayıt altına alınmış bir metodolojiye göre ölçülen çok dilli konuşmadan metne dönüştürme doğruluğu — Track A (FLEURS), 13 barındırılan motor varyantı × 12 dil × 200 ifade.

Baştan belirtilen çıkar çatışması: bu karşılaştırma, ElevenLabs Scribe v2 kullanan bir dikte ürünü olan koedesk tarafından oluşturulmuş ve finanse edilmektedir. Tarafsız olduğumuzu iddia etmiyoruz — bunun yerine bize güvenmemeniz ve karşılaştırmayı kendiniz yeniden çalıştırmanız için gereken her şeyi yayımlıyoruz: metodoloji (asıl koşulardan önce kayıt altına alınmıştır — bkz. commit geçmişi), her bir ham API yanıtı (results/raw), tüm puanlama kodu ve hangi motorların dahil edilebileceğine karar veren kullanım koşulları denetimi. Scribe'ın kaybettiği yerlerde bile sonuç değiştirilmeden yayımlanır.
v1 yalnızca Track A'yı içerir. Track A, motorların üzerinde eğitilmiş olabileceği herkese açık test setlerini kullanır — bu sayfadaki her rakamın bilinen bir sınırlılığıdır, çözülmek yerine açıkça belirtilmiştir. Track B (yeni kaydedilmiş ses) herhangi bir ölçüm yapılmadan önce iptal edildi: insan tarafından üretilen referansları, bu karşılaştırmanın tamamen deterministik, yeniden hesaplanabilir tasarımıyla uyumsuzdur (Amendment 7).

Tablolar nasıl okunur

Motorlar her dil için eşdeğerlik grupları (tier) hâlinde sıralanır (T1, T2, …): eşleştirilmiş bootstrap (n=10.000, seed ön kayıt sırasında sabitlenmiştir) bir motoru tier lideriyle istatistiksel olarak ayırt edemiyorsa (eşleştirilmiş farkın %95 GA'sı sıfırı içeriyorsa), o motor aynı tier'i paylaşır. Bir tier içindeki farklar — Scribe v2 için bile — istatistiksel olarak anlamlı değildir. Ana metrik Japonca, Çince ve Tayca için CER, diğer dokuz dil için WER'dir; her ikisi de her zaman gösterilir. Düşük değer daha iyidir.

Genel bakış — dile göre tier

Motorjaenzhkoviidthdefresptru#T1
Gemini 3.1 Pro (preview)T1T1T2T2T1T1T1T1T1T1T1T110
Microsoft MAI Transcribe (Azure Speech)T1T2T1T1T2T2T1T1T1T1T1T19
ElevenLabs Scribe v2 koedesk tarafından kullanılıyorT1T2T3T1T2T1T2T2T1T1T1T17
Google STT v2 (Chirp 3)T2T2T3T2T2T1T1T1T2T1T1T16
OpenAI gpt-4o-transcribeT2T1T2T2T3T2T2T1T1T1T1T16
Gemini 3.5 FlashT2T2T3T2T2T1T1T2T2T1T2T23
Gemini 2.5 ProT2T3T6T2T2T1T2T3T2T2T2T12
Gemini 2.5 FlashT4T4T6T3T4T3T2T3T4T2T3T11
AmiVoice (会話_汎用)T5n/an/an/an/an/an/an/an/an/an/an/a0
Deepgram Nova-3T4T4T5T6T5T5T3T4T4T3T4T40
Gemini 3.1 Flash-LiteT3T3T5T2T4T2T2T3T3T2T2T20
Mistral Voxtral Mini Transcribe V2T3T3T4T4n/an/an/aT2T2T2T2T30
OpenAI whisper-1T4T3T5T5T5T4T4T3T3T2T3T30

“n/a” = motor bu dili desteklemiyor (AmiVoice: yalnızca Japonca; Voxtral: vi/id/th yok). #T1, motorun üst tier'de yer aldığı dillerin sayısını gösterir.

Dile göre sonuçlar — Track A (FLEURS)

Japonca ana metrik: CER · 200 ifade

TierMotor CER% (%95 GA)WER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
1.91 (1.33–2.60)2.32 (1.83–2.84)00.22 / 0.30$0.3602026-07-05
ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
2.26 (1.75–2.85)2.69 (2.20–3.20)00.16 / 0.20$0.2202026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
2.49 (1.96–3.06)2.88 (2.36–3.44)00.75 / 1.422026-07-05
T2Google STT v2 (Chirp 3)
chirp_3
2.92 (2.35–3.52)3.55 (2.92–4.21)00.37 / 0.43$0.9602026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
2.96 (2.34–3.64)3.50 (2.88–4.18)00.09 / 0.15$0.3602026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
3.43 (2.72–4.19)3.80 (3.13–4.50)00.40 / 0.592026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
3.75 (2.77–5.04)4.32 (3.41–5.54)00.44 / 0.672026-07-05
T3Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
4.18 (3.41–5.02)4.90 (4.20–5.63)00.17 / 0.22$0.1802026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
4.53 (3.72–5.39)5.41 (4.59–6.29)00.24 / 0.352026-07-05
T4Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
5.19 (4.06–6.57)6.43 (5.31–7.81)00.33 / 0.492026-07-05
OpenAI whisper-1
whisper-1
5.49 (4.67–6.36)6.71 (5.84–7.63)00.15 / 0.25$0.3602026-07-05
Deepgram Nova-3
nova-3
5.87 (4.91–6.93)6.70 (5.81–7.63)00.18 / 0.25$0.2582026-07-05
T5AmiVoice (会話_汎用)
-a-general
7.60 (6.46–8.84)7.96 (6.85–9.15)00.18 / 0.232026-07-04, 2026-07-05

İngilizce ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1OpenAI gpt-4o-transcribe
gpt-4o-transcribe
2.18 (1.63–2.83)1.13 (0.74–1.63)00.10 / 0.15$0.3602026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
2.47 (1.91–3.09)1.40 (1.03–1.82)00.82 / 1.842026-07-05
T2Google STT v2 (Chirp 3)
chirp_3
2.68 (2.09–3.31)1.30 (0.96–1.68)00.41 / 0.55$0.9602026-07-05
Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
2.75 (2.09–3.47)1.31 (0.94–1.72)00.28 / 0.43$0.3602026-07-05
ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
2.91 (2.30–3.60)1.55 (1.17–1.99)00.19 / 0.27$0.2202026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
2.91 (2.29–3.60)1.45 (1.07–1.87)00.43 / 0.722026-07-05
T3Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
3.33 (2.68–4.05)1.45 (1.09–1.84)00.20 / 0.31$0.1802026-07-05
OpenAI whisper-1
whisper-1
3.64 (2.98–4.36)1.64 (1.27–2.05)00.18 / 0.33$0.3602026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
3.66 (2.54–5.31)2.18 (1.24–3.76)00.51 / 0.892026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
3.69 (2.94–4.50)1.75 (1.33–2.22)00.30 / 0.542026-07-05
T4Deepgram Nova-3
nova-3
4.74 (3.99–5.55)2.29 (1.86–2.75)00.20 / 0.33$0.2582026-07-05
Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
4.84 (3.46–6.67)3.01 (1.72–4.81)00.38 / 0.622026-07-05

Çince (Mandarin, basitleştirilmiş) ana metrik: CER · 200 ifade

TierMotor CER% (%95 GA)WER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
5.25 (3.59–7.16)4.69 (3.67–5.77)00.23 / 0.36$0.3602026-07-05
T2Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
5.74 (4.06–7.64)5.20 (4.14–6.38)00.95 / 1.962026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
5.86 (4.17–7.76)5.35 (4.25–6.54)00.09 / 0.16$0.3602026-07-05
T3ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
6.12 (4.38–8.06)5.75 (4.59–7.01)00.17 / 0.23$0.2202026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
6.37 (4.69–8.27)6.29 (5.20–7.46)00.46 / 0.732026-07-05
Google STT v2 (Chirp 3)
chirp_3
6.65 (4.88–8.59)6.71 (5.50–8.00)00.40 / 0.49$0.9602026-07-05
T4Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
6.77 (5.01–8.72)7.47 (6.13–8.92)00.17 / 0.26$0.1802026-07-05
T5OpenAI whisper-1
whisper-1
7.21 (5.45–9.17)7.84 (6.55–9.20)00.17 / 0.29$0.3602026-07-05
Deepgram Nova-3
nova-3
7.47 (5.66–9.49)8.95 (7.47–10.49)00.18 / 0.28$0.2582026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
7.67 (5.87–9.66)12.90 (9.89–16.33)00.26 / 0.392026-07-05
T6Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
8.68 (6.71–10.94)10.36 (8.61–12.41)00.41 / 0.662026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
48.34 (5.18–137.31)28.64 (5.74–75.51)00.46 / 0.772026-07-05

Korece ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
10.08 (8.09–12.29)4.93 (3.45–6.65)00.16 / 0.21$0.2202026-07-05
Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
10.60 (8.53–12.81)5.15 (3.67–6.83)00.21 / 0.31$0.3602026-07-05
T2Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
11.46 (9.36–13.74)5.30 (3.82–7.00)00.67 / 1.322026-07-05
Google STT v2 (Chirp 3)
chirp_3
11.49 (9.47–13.64)5.30 (3.84–6.97)00.37 / 0.43$0.9602026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
11.59 (9.45–13.87)5.27 (3.80–6.96)00.43 / 0.792026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
11.76 (9.69–13.94)5.45 (3.98–7.14)00.25 / 0.352026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
12.31 (10.07–14.75)5.41 (3.89–7.16)00.09 / 0.14$0.3602026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
12.48 (10.24–14.83)5.72 (4.20–7.46)00.37 / 0.642026-07-05
T3Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
13.07 (10.96–15.30)5.82 (4.34–7.50)00.34 / 0.562026-07-05
T4Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
15.11 (12.90–17.42)6.09 (4.60–7.80)00.15 / 0.21$0.1802026-07-05
T5OpenAI whisper-1
whisper-1
16.92 (14.56–19.36)6.62 (5.12–8.34)00.15 / 0.24$0.3602026-07-05
T6Deepgram Nova-3
nova-3
22.09 (18.80–25.49)9.27 (7.45–11.27)00.17 / 0.25$0.2582026-07-05

Vietnamca ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
2.11 (1.58–2.70)1.13 (0.81–1.47)00.86 / 1.752026-07-05
T2Google STT v2 (Chirp 3)
chirp_3
2.72 (2.14–3.37)1.51 (1.17–1.89)00.38 / 0.44$0.9602026-07-05
Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
2.95 (2.34–3.61)1.58 (1.17–2.05)00.21 / 0.31$0.3602026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
3.08 (2.38–3.88)1.71 (1.28–2.18)00.40 / 0.602026-07-05
ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
3.11 (2.48–3.79)1.74 (1.36–2.15)00.17 / 0.21$0.2202026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
3.49 (2.21–5.19)2.18 (1.03–3.81)00.46 / 0.822026-07-05
T3OpenAI gpt-4o-transcribe
gpt-4o-transcribe
3.55 (2.86–4.30)1.99 (1.56–2.45)00.09 / 0.12$0.3602026-07-05
T4Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
4.28 (3.44–5.19)2.32 (1.82–2.89)00.24 / 0.342026-07-05
Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
4.90 (3.93–6.00)2.86 (2.05–3.96)00.33 / 0.522026-07-05
T5Deepgram Nova-3
nova-3
9.10 (7.64–10.71)5.10 (4.04–6.39)00.17 / 0.26$0.2582026-07-05
OpenAI whisper-1
whisper-1
9.60 (8.40–10.85)4.54 (3.91–5.21)00.17 / 0.27$0.3602026-07-05

Endonezyaca ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1Google STT v2 (Chirp 3)
chirp_3
1.79 (1.29–2.37)0.58 (0.38–0.83)00.38 / 0.46$0.9602026-07-05
ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
2.03 (1.45–2.66)0.76 (0.48–1.09)00.16 / 0.22$0.2202026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
2.05 (1.46–2.68)0.78 (0.50–1.12)00.64 / 1.092026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
2.08 (1.49–2.71)0.68 (0.45–0.93)00.50 / 0.832026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
2.31 (1.69–2.98)0.91 (0.57–1.31)00.40 / 0.592026-07-05
T2Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
2.44 (1.80–3.10)0.83 (0.56–1.13)00.26 / 0.422026-07-05
Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
2.87 (1.75–4.53)1.33 (0.51–2.81)00.23 / 0.34$0.3602026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
2.92 (2.24–3.65)1.12 (0.77–1.53)00.09 / 0.14$0.3602026-07-05
T3Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
3.44 (2.66–4.28)1.03 (0.72–1.38)00.34 / 0.522026-07-05
T4OpenAI whisper-1
whisper-1
6.72 (5.63–7.85)2.04 (1.60–2.50)00.15 / 0.26$0.3602026-07-05
T5Deepgram Nova-3
nova-3
8.31 (7.01–9.68)2.52 (1.86–3.30)10.17 / 0.26$0.2582026-07-05

Tayca ana metrik: CER · 200 ifade

TierMotor CER% (%95 GA)WER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
3.91 (3.10–4.80)00.23 / 0.37$0.3602026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
5.14 (3.73–6.97)01.05 / 1.992026-07-05
Google STT v2 (Chirp 3)
chirp_3
5.17 (3.73–7.00)00.40 / 0.52$0.9602026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
5.26 (3.74–7.22)00.48 / 0.882026-07-05
T2ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
5.48 (4.04–7.33)00.18 / 0.27$0.2202026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
5.55 (4.29–7.07)00.11 / 0.17$0.3602026-07-05
Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
5.67 (4.20–7.53)00.37 / 0.672026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
5.70 (4.19–7.60)00.26 / 0.442026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
5.94 (4.22–8.11)00.49 / 0.912026-07-05
T3Deepgram Nova-3
nova-3
8.39 (6.82–10.34)00.18 / 0.31$0.2582026-07-05
T4OpenAI whisper-1
whisper-1
12.08 (10.64–13.69)00.21 / 0.36$0.3602026-07-05

Almanca ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1OpenAI gpt-4o-transcribe
gpt-4o-transcribe
2.21 (1.63–2.85)0.67 (0.45–0.91)00.09 / 0.16$0.3602026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
2.26 (1.72–2.85)0.75 (0.52–1.02)00.59 / 1.132026-07-05
Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
2.26 (1.67–2.87)0.70 (0.47–0.96)00.21 / 0.34$0.3602026-07-05
Google STT v2 (Chirp 3)
chirp_3
2.64 (2.07–3.25)0.72 (0.53–0.93)00.37 / 0.48$0.9602026-07-05
T2ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
2.80 (2.20–3.41)0.98 (0.67–1.35)00.17 / 0.27$0.2202026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
2.93 (2.30–3.60)0.99 (0.70–1.34)00.34 / 0.632026-07-05
Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
3.20 (2.48–3.98)0.81 (0.61–1.04)00.15 / 0.25$0.1802026-07-05
T3Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
3.58 (2.80–4.43)0.95 (0.72–1.21)00.24 / 0.432026-07-05
OpenAI whisper-1
whisper-1
3.87 (3.05–4.73)1.20 (0.88–1.57)00.15 / 0.26$0.3602026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
3.98 (2.75–5.58)1.71 (0.71–3.27)00.41 / 0.722026-07-05
Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
4.18 (3.29–5.16)1.06 (0.81–1.34)00.32 / 0.532026-07-05
T4Deepgram Nova-3
nova-3
5.86 (4.75–7.07)2.57 (1.80–3.51)00.17 / 0.26$0.2582026-07-05

Fransızca ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
3.43 (2.81–4.09)1.04 (0.83–1.28)00.25 / 0.37$0.3602026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
3.45 (2.74–4.20)1.19 (0.92–1.47)00.81 / 1.542026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
3.55 (2.83–4.28)1.13 (0.88–1.41)00.10 / 0.15$0.3602026-07-05
ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
3.90 (3.20–4.60)1.40 (1.09–1.72)00.18 / 0.27$0.2202026-07-05
T2Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
4.21 (3.48–4.99)1.64 (1.32–1.98)00.45 / 0.802026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
4.40 (3.56–5.27)1.42 (1.11–1.75)00.55 / 1.032026-07-05
Google STT v2 (Chirp 3)
chirp_3
4.60 (3.72–5.52)1.45 (1.14–1.77)00.40 / 0.52$0.9602026-07-05
Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
4.91 (4.08–5.79)1.55 (1.26–1.85)00.17 / 0.27$0.1802026-07-05
T3Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
5.24 (4.30–6.23)1.79 (1.43–2.17)00.28 / 0.502026-07-05
OpenAI whisper-1
whisper-1
6.03 (5.13–6.97)1.97 (1.63–2.33)00.19 / 0.33$0.3602026-07-05
T4Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
6.77 (5.48–8.36)2.50 (1.81–3.53)00.39 / 0.652026-07-05
Deepgram Nova-3
nova-3
7.57 (6.39–8.81)2.75 (2.26–3.26)00.19 / 0.30$0.2582026-07-05

İspanyolca ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1OpenAI gpt-4o-transcribe
gpt-4o-transcribe
1.53 (1.07–2.05)0.56 (0.38–0.78)00.09 / 0.12$0.3602026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
1.61 (1.13–2.16)0.60 (0.41–0.81)00.64 / 1.022026-07-05
ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
1.63 (1.12–2.24)0.61 (0.40–0.85)00.17 / 0.22$0.2202026-07-05
Google STT v2 (Chirp 3)
chirp_3
1.63 (1.21–2.08)0.52 (0.38–0.69)00.38 / 0.44$0.9602026-07-05
Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
1.67 (1.24–2.12)0.59 (0.43–0.78)00.22 / 0.31$0.3602026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
1.76 (1.29–2.28)0.62 (0.44–0.83)00.36 / 0.502026-07-05
T2Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
2.11 (1.42–3.02)0.97 (0.49–1.83)00.45 / 0.662026-07-05
Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
2.17 (1.58–2.80)0.72 (0.50–0.96)00.16 / 0.22$0.1802026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
2.30 (1.76–2.89)0.74 (0.55–0.95)00.24 / 0.342026-07-05
Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
2.34 (1.84–2.87)0.72 (0.55–0.89)00.33 / 0.512026-07-05
OpenAI whisper-1
whisper-1
2.70 (2.08–3.40)0.78 (0.59–1.00)00.15 / 0.26$0.3602026-07-05
T3Deepgram Nova-3
nova-3
3.99 (3.09–5.05)1.39 (1.04–1.78)00.17 / 0.25$0.2582026-07-05

Portekizce (Brezilya) ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
2.34 (1.79–2.93)1.10 (0.78–1.43)00.15 / 0.20$0.2202026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
2.40 (1.81–3.06)0.83 (0.59–1.10)00.09 / 0.13$0.3602026-07-05
Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
2.53 (1.95–3.14)0.91 (0.68–1.16)00.20 / 0.29$0.3602026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
2.61 (2.01–3.24)1.06 (0.76–1.39)00.68 / 1.132026-07-05
Google STT v2 (Chirp 3)
chirp_3
2.63 (2.05–3.22)0.90 (0.68–1.15)00.37 / 0.44$0.9602026-07-05
T2Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
3.02 (2.34–3.73)0.99 (0.75–1.26)00.44 / 0.672026-07-05
Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
3.31 (2.69–3.99)1.08 (0.85–1.33)00.15 / 0.22$0.1802026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
3.41 (2.66–4.20)1.14 (0.87–1.44)00.23 / 0.342026-07-05
Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
3.80 (2.80–5.08)1.86 (1.08–3.12)00.34 / 0.532026-07-05
T3Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
3.92 (3.20–4.70)1.35 (1.06–1.68)00.32 / 0.472026-07-05
OpenAI whisper-1
whisper-1
3.94 (3.19–4.75)1.26 (1.00–1.54)00.15 / 0.25$0.3602026-07-05
T4Deepgram Nova-3
nova-3
5.47 (4.52–6.49)2.12 (1.66–2.61)00.16 / 0.22$0.2582026-07-05

Rusça ana metrik: WER · 200 ifade

TierMotor WER% (%95 GA)CER% (%95 GA) BoşRTF p50/p90$ / ses-saati Çalıştırma tarihi
T1Microsoft MAI Transcribe (Azure Speech)
mai-transcribe-1.5
2.22 (1.66–2.84)0.66 (0.44–0.91)00.23 / 0.35$0.3602026-07-05
Google STT v2 (Chirp 3)
chirp_3
2.37 (1.56–3.35)0.90 (0.41–1.67)10.40 / 0.48$0.9602026-07-05
Gemini 3.1 Pro (preview)
google-ai-studio/gemini-3.1-pro-preview
2.45 (1.75–3.29)1.12 (0.61–1.80)00.83 / 1.442026-07-05
Gemini 2.5 Pro
google-ai-studio/gemini-2.5-pro
2.74 (1.95–3.66)1.12 (0.59–1.83)00.49 / 0.762026-07-05
ElevenLabs Scribe v2 koedesk tarafından kullanılıyor
scribe_v2
2.77 (2.02–3.63)1.22 (0.75–1.79)00.18 / 0.24$0.2202026-07-05
Gemini 2.5 Flash
google-ai-studio/gemini-2.5-flash
2.82 (2.14–3.59)0.91 (0.60–1.28)00.37 / 0.592026-07-05
OpenAI gpt-4o-transcribe
gpt-4o-transcribe
2.85 (1.88–4.04)0.93 (0.51–1.47)00.10 / 0.14$0.3602026-07-05
T2Gemini 3.5 Flash
google-ai-studio/gemini-flash-latest
2.93 (2.24–3.69)1.17 (0.80–1.60)00.41 / 0.672026-07-05
Gemini 3.1 Flash-Lite
google-ai-studio/gemini-3.1-flash-lite
3.01 (2.22–3.87)0.90 (0.58–1.29)00.27 / 0.392026-07-05
T3Mistral Voxtral Mini Transcribe V2
voxtral-mini-2602
3.72 (2.94–4.55)1.18 (0.82–1.60)00.17 / 0.24$0.1802026-07-05
OpenAI whisper-1
whisper-1
3.80 (3.00–4.66)1.08 (0.78–1.43)00.17 / 0.28$0.3602026-07-05
T4Deepgram Nova-3
nova-3
4.51 (3.57–5.58)1.67 (1.17–2.24)00.19 / 0.29$0.2582026-07-05

Notlar ve bilinen sorunlar

Yeniden üretim / denetim

Her şey depoda yer alır: 28.400 ifadenin tamamı için ham API yanıtları, testleriyle birlikte sabitlenmiş normalize ediciler ve puanlama kodu, yalnızca ekleme yapılabilen değişiklik günlüğü ve results/scores.json ile bu sayfayı deterministik olarak yeniden oluşturan make_scores.py / make_site.py — elle düzenlenmiş hiçbir sayı yoktur. Herhangi bir hücreyi yeniden çalıştırmak için yalnızca kendi API anahtarlarınız gerekir.