كل طالب يتابع المحاضرة بلغته.

FLEURS: جمل قصيرة من ويكيبيديا تُقرأ بصوت عالٍ. يقيس عدد الكلمات التي تخرج خاطئة.

نشرت AssemblyAI نتائج 14 محرّكًا للوقت الفعلي. وشغّلنا المترجم الفوري المباشر من بيان على مجموعة الاختبار نفسها.

جمعنا المقاطع في تسجيلات مدتها 15 دقيقة بفواصل 1.5 ثانية، وشغّلناها في المترجم الفوري المباشر من بيان في الوقت الفعلي، كأنها ميكروفون، مع اكتشاف اللغة تلقائيًا. أما AssemblyAI فبثّت كل مقطع على حدة مع تحديد اللغة مسبقًا. يتجاهل التقييم علامات الترقيم والأحرف الكبيرة والتشكيل العربي وطريقة كتابة الأرقام. تعرض رسومنا 13 من محركات AssemblyAI الأربعة عشر، والجدول الكامل على موقع AssemblyAI.

148 جملة إنجليزية لها أيضًا ترجمات بشرية احترافية. يقيس جودة الترجمة بالمُقيِّم الآلي MetricX-24 من Google.

أجرت بيان الاختبار. والترجمات البشرية مأخوذة من مجموعة FLoRes-200 العامة.

عملت بيان من الصوت المنطوق، وعمل المترجمون من النص. قارنّا الدرجات جملةً بجملة، ولم نحتسب النتيجة إلا حين لم يتجاوز نطاق الثقة 95% الصفر واتفقت جولتان. «مماثلة تقريبًا» تعني أن الاختبار لم يجد فرقًا واضحًا، ولا تثبت أن الترجمات متطابقة.

المدة بين انتهاء الجملة وظهور ترجمتها المكتملة.

بيان، على خدمة الترجمة المباشرة الفعلية.

قيس على خدمة الترجمة المباشرة الفعلية لبيان من 13 إلى 15 أكتوبر 2026، من نهاية كل جملة منطوقة حتى اكتمال السطر الإنجليزي في تغذية المستمعين التي التقطناها. تنتظر الكلمات الأولى في الجملة الطويلة مدة أطول من ذلك. ويصل الصوت المنطوق بعد النص بقليل ولم يُقَس.

تقديرات من تغذية المستمعين التي التقطناها للتسجيلات الـ53 نفسها. الالتقاط غير مكتمل، فبعض المعاينات المبكرة مفقودة، وقد تتغير المعاينات قبل اكتمال الجملة. وتُقاس الأوقات حتى التغذية، لا حتى شاشة الهاتف.