المسار التقنيمتوسط 38 دقيقة
تقييم النماذج والمقاييس
اختيار مقياس يناسب تكلفة الخطأ بدل الاكتفاء بالدقة العامة.
أهداف الدرس
- قراءة مصفوفة الالتباس
- فهم precision وrecall
- اختيار عتبة قرار
مصفوفة الالتباس
تقسم النتائج إلى صحيحة وخاطئة لكل فئة. منها نحسب الدقة والاستدعاء، ونفهم نوع الخطأ بدل رقم واحد.
المقياس والتكلفة
إذا كان فقد حالة مهمة مكلفًا نرفع recall. إذا كانت الإنذارات الكاذبة مكلفة نهتم precision. العتبة قرار أعمال وليست رقمًا تقنيًا فقط.
- Accuracy قد تضلل مع عدم توازن الفئات
- F1 يوازن precision وrecall
- AUC يقارن عبر عتبات
التقييم الواقعي
اختبر على بيانات تمثل الزمن والجمهور الحقيقيين، وراقب الأداء بعد التشغيل لأن التوزيع قد يتغير.
التطبيق العملي
اكتب تكلفة false positive وfalse negative في حالة استخدام تختارها، ثم اختر المقياس الأول.
قائمة التحقق
- أفهم نوعي الخطأ
- أربط المقياس بالأثر
- أراقب بعد التشغيل