برای انتخاب سرویس تبدیل گفتار فارسی، فقط کیفیت رونویسی کافی نیست؛ سرعت، پوشش ورودیها و هزینه هم باید کنار هم دیده شوند. این بنچمارک سرویسهای ابری و مدلهای قابلاجرا را با ورودیهای ثابت مقایسه میکند.
این اجرا در یک نگاه
در اجرای ۲۸ سپتامبر ۲۰۲۶، ۲۴ مدل OpenRouter روی ۲۰ ورودی فارسی آزمایش شدند. جزئیات کامل شامل ۴۸۰ تلاش است؛ خطاهای endpoint و پاسخهای بدون متن جدا از کیفیت رونویسی تفسیر میشوند.
- کمترین WER مشاهدهشده مربوط به Gemini 3.5 Transcribe بود؛ این مدل از ۲۰ ورودی به ۱۹ ورودی پاسخ متندار داد.
- در میان مدلهایی که به همهٔ ورودیها پاسخ دادند، کمترین WER برای GPT Transcribe ثبت شد.
WER کمتر یعنی خطای واژهای کمتر؛ نتیجه را باید همراه با نرخ پاسخگویی و محدودیتهای endpoint خواند.




No comments yet