شفافية التحقق
ما الذي تغيّر.
الاختبار المعياري الذي نشرناه سابقًا مقابل الذي ننشره اليوم، على مجموعة التسجيلات المرجعية نفسها، في هذه المنطقة. ويبقى التقريران متاحين كاملين، والأرقام أدناه محسوبة منهما، لا مكتوبة يدويًا.
تغيّرت لجنة التقييم أيضًا. قيّم جولتنا السابقة زوجٌ أصغر وأرخص من نماذج التحكيم. ووجدنا أنهما ارتكبا أخطاء كان يمكن تجنبها، كالخطأ في عدّ الجمل وسوء قراءة بنية المستند، لذا تُقيَّم الجولة الحالية بنماذج أقوى. وقد تعمّدنا عدم إعادة تقييم الجولة الأقدم لتتطابق. فأرقامها باقية كما قيست في يومها. وهذا يعني أن جزءًا من تغيّر التغطية أدناه يعكس تقييمًا أفضل لا منتجًا أفضل، ونفضّل أن نقول ذلك بدلًا من إعادة كتابة التاريخ بصمت.
ما الذي غيّرناه
- مسار التسجيل. أصلحنا بوابة كشف النشاط الصوتي وتأخرًا في وحدة فك الترميز كان يُسقط نهاية التسجيلات الأطول بصمت. ويفسّر هذا معظم التحسّن في معدل خطأ الكلمات.
- المرجع الصحيح. صحّحنا التفريغات النصية المرجعية حيث اختلفت عن الصوت في طريقة الكتابة لا في الكلمات: الأرقام المنطوقة المكتوبة بالحروف، والتهجئات الإقليمية، واختصارات الوحدات. وتُركت أخطاء السمع الحقيقية كما هي؛ فهي ما وُضع الاختبار المعياري لقياسه.
- التصحيح بعد التسجيل. تعيد مرحلة ثانية الآن الاستماع إلى الصوت وتصلح أخطاء تحويل الكلام إلى نص قبل كتابة الملاحظة. وكانت هذه المرحلة تفشل سابقًا بصمت في معظم التسجيلات.
- نموذج إنشاء الملاحظات. حُدِّث إلى نموذج أحدث، ثم قيس أثره بدلًا من افتراضه. فقد قلّل المحتوى المختلق؛ ولم يغيّر دقة تحويل الكلام إلى نص تغييرًا يُذكر، لأنه ليس ما يحوّل الكلام إلى نص.
لماذا ننشر هذا
يغيّر مزوّدو النماذج ما يقف خلف واجهة API دون إعلان، وادعاء أي مورّد بأن ترقية ما «ستكون أفضل» ليس دليلًا. لذا نُجري اختبارنا المعياري الخاص، لكل منطقة، عبر مسار المتصفح نفسه الذي يستخدمه الممارس الصحي، وننشر ما رأيناه في ذلك التاريخ. وإن تراجعت نتائج جولة مستقبلية، فسننشر ذلك أيضًا: فإما أن نستطيع تفسيره، أو نكون قد وجدنا شيئًا يحتاج إلى إصلاح.