مستويان، لأن المجموعة الكاملة بطيئة جدًّا
بضع مئات من طلبات عرض النماذج تستغرق دقائق وتكلف أموالاً حقيقية. إذا قمت بتنفيذ ذلك مع كل عملية نشر، فسيبدأ الناس في إيجاد طرق للتحايل عليه.
- عند كل ضغطة
- خمسون حالة، تم اختيارها لتغطية كل فئة، مع إعطاء وزن أكبر للاستثناءات. تستغرق أقل من دقيقتين. تمنع عملية الدمج.
- ليلاً وقبل الإصدار
- المجموعة الكاملة، كل فئة، مع تسجيل الاتجاه. يمنع الإصدار.
- عند تغيير النموذج أو المزود
- المجموعة الكاملة بالإضافة إلى اختبارات الأذونات والسلامة، دائمًا، بغض النظر عن مدى صغر التغيير.
تحديد فترات تشغيل مجموعة غير حتمية
قد تؤدي نفس المدخلات إلى مخرجات مختلفة، لذا فإن الاعتماد الصارم على مبدأ «النجاح» أو «الفشل» في الحالات الفردية يؤدي إلى وجود بوابة غير موثوقة، مما يدفع المستخدمين إلى إعادة التشغيل مرارًا وتكرارًا حتى تظهر النتيجة باللون الأخضر. وهذا أسوأ من عدم وجود بوابة على الإطلاق.
- يتم تقييم النتيجة الإجمالية حسب الفئة، وليس حسب الحالات الفردية. فـ«الاستثناءات التي تبلغ نسبتها 85% أو تزيد» تعتبر مستقرة، على عكس «الحالة 41 التي تم قبولها».
- حدد المعيار بناءً على النتيجة الحالية، وليس بناءً على طموح ما. فالهدف من هذا المعيار هو منع التراجع، وليس تحديد هدف معين.
- اترك هامشًا صغيرًا، نقطة واحدة تقريبًا، لامتصاص ضوضاء أخذ العينات، واضبط درجة الحرارة على الصفر إذا كان المزود يدعم ذلك.
- الفشل الصارخ في حالة انهيار إحدى الفئات. إن انخفاض فئة واحدة بمقدار عشرين نقطة يُعد تراجعًا حقيقيًّا حتى لو ظل المتوسط ثابتًا، وهذا هو المعيار الذي يكشف معظم حالات الانهيار الحقيقية.
- اطبع الفرق لكل فئة في مخرجات CI. يجب أن يتمكن المراجع من معرفة التغييرات التي طرأت دون الحاجة إلى فتح أي ملف.
لا تقم أبدًا بإعادة التشغيل للحصول على نتيجة خضراء. إذا كانت البوابة غير مستقرة، فإن الحل يكمن في زيادة حجم العينة أو توسيع نطاق التفاوت، وذلك بعد اتخاذ قرار مدروس، وليس بإجراء محاولة ثانية.
ما الذي ينبغي أن يكون موجودًا أيضًا في البوابة؟
- اختبارات الأذونات الواردة في دليل الاسترجاع. نادرًا ما تفشل هذه الاختبارات، وعندما تفشل فإن الفشل يكون كارثيًا، وهذا بالضبط الغرض من وجود البوابة.
- التكلفة لكل حالة. إن أي تغيير فوري يؤدي إلى تحسين الدقة بمقدار نقطة واحدة ويضاعف الفاتورة ثلاث مرات يجب أن يكون قرارًا مدروسًا، لا مفاجأة في الفاتورة.
- زمن الاستجابة عند p95، لأي شيء ينتظره الشخص.
- فحص التوافق مع المخطط لكل مخرجات منظمة، مما يتيح اكتشاف أي انحراف عن العقد على الفور.
اجعل النتيجة قابلة للمراجعة
يتم قراءة إشارة الخروج من البوابة بواسطة شخص يقرر ما إذا كان سيندمج في المسار أم لا. اكتبها نيابة عنهم.
التعليق الجيد في تقرير التكلفة والتأثير (CI) يوضح التغييرات التي طرأت، حسب الفئة، مقارنة بالخط الأساسي، مع ذكر الفرق في التكلفة ورابطًا للحالات التي لم تستوف المعايير. فعبارة مثل «الاستثناءات من 71% إلى 84%، الإجراءات الروتينية دون تغيير، ارتفاع تكلفة الحالة الواحدة بمقدار 0.4 فلس» هي جملة يمكن للمراجع أن يتخذ إجراءً بناءً عليها. أما العلامة الخضراء، فليست كذلك.
هل تريد أن ننفّذ هذا معك؟
التدقيق هو هذه المنهجية موجّهة إلى أنظمتك، وفي نهايته خطة بناء مُسعّرة.
تحديد موعد مكالمة