قارن مسودة كل نموذج بالمرجع البشري
اختر التسجيل والنموذج. النص الآلي محفوظ كما أعاده المزود، والمرجع البشري منفصل عنه. الكلمات المرشحة أدناه ناتجة عن فرق آلي مع المرجع بعد تطبيع الكتابة، وليست احتمالات ثقة صادرة من المزود.
يستخدم المرجع لحساب WER/CER ولإظهار مواضع المراجعة، ولا يُرسل مجددًا إلى النموذج.
مسودة Cohere Arabic 07-2026 · نموذج مفتوح الأوزان
المرجع البشري (Ground truth)
كلمات مرشحة للمراجعة (29)
هذه عينة من أول الفروق الفريدة. «—» تعني حذفًا أو إضافة.
| نوع الفرق | في مسودة النموذج | في المرجع البشري |
|---|---|---|
| حذف | — | ال |
| استبدال | جدتي | يدتي |
| استبدال | فكنت | فااا |
| استبدال | — | كنت |
| استبدال | صغيرة | صغيره |
| استبدال | للبس | لل |
| استبدال | — | ل |
| استبدال | — | لبس |
| استبدال | صراحه | صراحة |
| استبدال | وطلبونا | وطلبوا |
| استبدال | — | لنا |
| استبدال | عندنا | عنا |
| استبدال | الحرفه | الحرفة |
| استبدال | الشغله | الشغلة |
| استبدال | عباره | عبارة |
| استبدال | سد | سدو |
| استبدال | لاشكال | لا |
| استبدال | هندسيه | اشكال |
| استبدال | — | هندسية |
| حذف | — | اا |
| استبدال | نسبه | اا |
| استبدال | — | نسبة |
| استبدال | مو | موب |
| استبدال | بوايد | وايد |
| استبدال | الجايه | الجاية |
| حذف | — | ااام |
| استبدال | هني | هنا |
| استبدال | الاكسبو | اكسبو |
| استبدال | يسون | يسوون |
النصوص المعروضة نواتج من التشغيل المحفوظ نفسه. قوائم الاشتباه فروق آلية أمام المرجع البشري وليست درجات ثقة من المزود.
تسجيل الحرفية الإماراتية
نطاق القياس: 00:43–03:05. المرجع البشري 267 كلمة بعد تطبيع الكتابة العربية.
| النموذج | WER · خطأ الكلمات | CER · خطأ الحروف |
|---|---|---|
| ElevenLabs Scribe v2 | 11.61% | 2.97% |
| Cohere Arabic 07-2026 | 14.98% | 4.95% |
| fal-ai/whisper | 40.45% | 20.68% |
المرجع: تفريغ بشري مستقل. عُدّت الكلمات بعد إزالة التشكيل وتوحيد الألف وعلامات الترقيم، مع الحفاظ على مفردات اللهجة. النتيجة تخص هذا المقطع فقط.
حديث حرفة السدو في الأحساء
نطاق القياس: 02:39–15:00. المرجع البشري 1352 كلمة بعد تطبيع الكتابة العربية.
| النموذج | WER · خطأ الكلمات | CER · خطأ الحروف |
|---|---|---|
| Cohere Arabic 07-2026 | 18.79% | 8.74% |
| ElevenLabs Scribe v2 | 26.41% | 9.30% |
| fal-ai/whisper | 42.53% | 19.98% |
المرجع: تفريغ بشري مستقل. عُدّت الكلمات بعد إزالة التشكيل وتوحيد الألف وعلامات الترقيم، مع الحفاظ على مفردات اللهجة. النتيجة تخص هذا المقطع فقط.
قراءة النتيجة
تصدر Scribe v2 مقطع الإمارات، وتصدر Cohere مقطع الأحساء. عند جمع أخطاء الكلمات على المقطعين، حصل Cohere على 18.16%، وScribe v2 على 23.97%، وWhisper على 42.19%. يهيمن مقطع الأحساء الأطول على الرقم المجمّع؛ لذلك تظهر النتائج المنفصلة أعلاه أولًا.
مرجع الأحساء يتضمن ترددات الكلام وتصحيحات بشرية، والقياس لا يشمل سوى تسجيلين. لا تعني هذه النتائج ضمان الأداء على متحدثين أو تسجيلات أخرى.
هل تساعد مصطلحات السدو عبر اللهجات؟
استُخدمت سبعة مصطلحات من كل لهجة على حدة، ثم جُمعت مصطلحات نجد والأحساء على تسجيل الإمارات. يستقبل Scribe v2 المصطلحات أثناء فك الكلام. Cohere Arabic يؤدي التفريغ المعتاد أولًا، ثم يطبّق برنامج منفصل تصحيحًا معجميًا حتميًا على النص. واجهة Cohere المستخدمة هنا لا تستقبل مصطلحات خلال التفريغ.
الأقل في WER وCER أفضل. قد يحسّن القاموس كتابة مصطلح بعينه مع زيادة أخطاء الكلمات عمومًا؛ ليس تحسين التفريغ مضمونًا.
الإمارات
| النموذج / الطريقة | مصدر المصطلحات | WER ↓ | CER ↓ | كلمات المرجع | تصحيحات معجمية | مصطلحات ظهرت في المرجع | استدعاء المصطلح | دقة المصطلح | خطأ المصطلح | WER خارج المصطلح | التغير |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Cohere Arabic — تفريغ فقط | دون مصطلحات | 14.98% | 4.95% | 267 | 0 | 0 | — | — | — | 14.98% | — |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات نجد | 14.98% | 4.95% | 267 | 0 | 1 | 100% | 100% | 0% | 15.33% | 0.00 نقطة |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات الأحساء | 14.98% | 4.95% | 267 | 0 | 1 | 100% | 100% | 0% | 15.33% | 0.00 نقطة |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات الإمارات · استكشافي من العينة نفسها | 14.98% | 4.95% | 267 | 0 | 6 | 90.91% | 100% | 9.09% | 15.23% | 0.00 نقطة |
| Cohere Arabic + تصحيح معجمي لاحق | نجد + الأحساء | 14.98% | 4.95% | 267 | 0 | 1 | 100% | 100% | 0% | 15.33% | 0.00 نقطة |
| Scribe v2 — تفريغ فقط | دون مصطلحات | 11.61% | 2.97% | 267 | غير قابل للقياس | 0 | — | — | — | 11.61% | — |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات نجد | 13.86% | 4.14% | 267 | غير قابل للقياس | 1 | 100% | 100% | 0% | 14.18% | +2.25 نقطة |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات الأحساء | 14.61% | 4.41% | 267 | غير قابل للقياس | 1 | 100% | 100% | 0% | 14.94% | +3.00 نقطة |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات الإمارات · استكشافي من العينة نفسها | 14.23% | 3.69% | 267 | غير قابل للقياس | 6 | 90.91% | 90.91% | 9.09% | 14.45% | +2.62 نقطة |
| Scribe v2 — تلقين مصطلحات أصلي | نجد + الأحساء | 13.48% | 4.05% | 267 | غير قابل للقياس | 1 | 100% | 100% | 0% | 13.79% | +1.87 نقطة |
الأحساء
| النموذج / الطريقة | مصدر المصطلحات | WER ↓ | CER ↓ | كلمات المرجع | تصحيحات معجمية | مصطلحات ظهرت في المرجع | استدعاء المصطلح | دقة المصطلح | خطأ المصطلح | WER خارج المصطلح | التغير |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Cohere Arabic — تفريغ فقط | دون مصطلحات | 18.79% | 8.74% | 1352 | 0 | 0 | — | — | — | 18.79% | — |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات نجد | 18.71% | 8.75% | 1352 | 5 | 1 | 75% | 60% | 25% | 18.69% | -0.08 نقطة |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات الأحساء · استكشافي من العينة نفسها | 17.90% | 8.56% | 1352 | 20 | 7 | 96.15% | 89.29% | 15.38% | 17.95% | -0.89 نقطة |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات الإمارات | 18.57% | 8.72% | 1352 | 3 | 3 | 83.33% | 100% | 14.29% | 18.59% | -0.22 نقطة |
| Scribe v2 — تفريغ فقط | دون مصطلحات | 26.41% | 9.30% | 1352 | غير قابل للقياس | 0 | — | — | — | 26.41% | — |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات نجد | 26.63% | 9.35% | 1352 | غير قابل للقياس | 1 | 100% | 50% | 0% | 26.71% | +0.22 نقطة |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات الأحساء · استكشافي من العينة نفسها | 26.48% | 9.32% | 1352 | غير قابل للقياس | 7 | 96.15% | 89.29% | 7.69% | 26.85% | +0.07 نقطة |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات الإمارات | 26.70% | 9.33% | 1352 | غير قابل للقياس | 3 | 100% | 100% | 0% | 26.84% | +0.29 نقطة |
نجد · ثمانية مقاطع محجوبة
| النموذج / الطريقة | مصدر المصطلحات | WER ↓ | CER ↓ | كلمات المرجع | تصحيحات معجمية | مصطلحات ظهرت في المرجع | استدعاء المصطلح | دقة المصطلح | خطأ المصطلح | WER خارج المصطلح | التغير |
|---|---|---|---|---|---|---|---|---|---|---|---|
| Cohere Arabic — تفريغ فقط | دون مصطلحات | 22.29% | 9.14% | 525 | 0 | 0 | — | — | — | 22.29% | — |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات الأحساء | 22.29% | 9.14% | 525 | 0 | 1 | 0% | — | 100% | 22.14% | 0.00 نقطة |
| Cohere Arabic + تصحيح معجمي لاحق | مصطلحات الإمارات | 22.29% | 9.14% | 525 | 0 | 1 | 0% | — | 100% | 22.14% | 0.00 نقطة |
| Scribe v2 — تفريغ فقط | دون مصطلحات | 16.95% | 6.65% | 525 | غير قابل للقياس | 0 | — | — | — | 16.95% | — |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات نجد · استكشافي من العينة نفسها | 14.86% | 5.93% | 525 | غير قابل للقياس | 5 | 76.92% | 95.24% | 16.67% | 14.72% | -2.09 نقطة |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات الأحساء | 16.57% | 6.52% | 525 | غير قابل للقياس | 1 | 100% | 100% | 0% | 16.6% | -0.38 نقطة |
| Scribe v2 — تلقين مصطلحات أصلي | مصطلحات الإمارات | 17.33% | 7.06% | 525 | غير قابل للقياس | 1 | 100% | 100% | 0% | 17.37% | +0.38 نقطة |
القيمة السالبة في عمود التغير تحسن. عدد التصحيحات ينطبق على Cohere فقط؛ لا يكشف Scribe عدد مرات تأثير التلقين داخليًا. مقاييس المصطلح تقريبية عند تكرار الكلمة، وتُحسب بعد تطبيع الكتابة. مصطلحات الإمارات والأحساء مشتقة من النص المرجعي نفسه، لذلك النتائج استكشافية وليست اختبارًا على تسجيل مستقل. مرجع نجد تعديل بشري لمخرج ElevenLabs ويحتاج إعادة إعداد مستقلة. تسجيل واحد لكل من الإمارات والأحساء لا يكفي لتعميم النتيجة على لهجة كاملة.
المقارنة التجريبية المتاحة
هذه أرقام القياس على ثمانية مقاطع محجوبة من شرح نجدي للسدو. هي مرجع تجريبي لطريقة التقييم، وليست نتيجة لتسجيلي الإمارات والأحساء.
| النموذج | معدل خطأ الكلمات WER | معدل خطأ الحروف CER | فاصل الثقة 95% لـ WER |
|---|---|---|---|
| ElevenLabs Scribe v2 + 7 مصطلحات | 14.86% | 5.93% | 13.08–16.70% |
| ElevenLabs Scribe v2 | 16.95% | 6.65% | 15.72–18.18% |
| Cohere Arabic 07-2026 | 22.29% | 9.14% | 16.84–26.60% |
| fal-ai/whisper | 56.38% | 41.96% | 39.25–73.23% |
| fal-ai/cohere-transcribe | 72.95% | 58.40% | 62.24–81.41% |
المرجع النجدي تعديل بشري سابق لنص ElevenLabs، لذا قد يميل القياس لصالحه. جميع النماذج المعروضة غطت المقاطع الثمانية. العودة للرئيسية