- الرئيسية
- مسرد المصطلحات
- الاختبار المتقلب (Flaky test)
الاختبار المتقلب (Flaky test)
آخر تحديث
الاختبار المتقلب ينجح ويفشل على الكود نفسه دون أي تغيير. أسبابه الشائعة، ولماذا يقوض التقلب الثقة في البوابات، وكيف يتعامل AI CodeOps مع إعادة التشغيل.
الاختبار المتقلب اختبار ينجح أحيانا ويفشل أحيانا على الكود نفسه، دون أن يتغير شيء بين المرتين. فنتيجته تتوقف على شيء لا يتحكم فيه الاختبار.
التعريف
الأسباب الشائعة:
- التوقيت: فترات انتظار ثابتة، أو تسابق بين الخيوط، أو مهلة ضيقة جدا على جهاز بطيء.
- الترتيب: اختبارات تعتمد على حالة تركها اختبار آخر.
- الموارد المشتركة: قاعدة بيانات أو منفذ أو ملف تستخدمه اختبارات تعمل بالتوازي.
- العالم الخارجي: استدعاءات الشبكة، أو التاريخ الحالي، أو المناطق الزمنية، أو القيم العشوائية دون بذرة ثابتة.
والاختبار الذي يفشل على جهاز وينجح على آخر مشكلة قريبة، سببها عادة اختلاف في البيئة.
الأهمية
كل فشل متقلب يعلّم الناس أن اللون الأحمر لا يعني عطلا. فتبدأ الفرق بإعادة التشغيل حتى يظهر الأخضر، ثم يمحى فشل حقيقي بإعادة التشغيل أيضا. والبوابة المبنية على الاختبارات لا تكون أجدر بالثقة من أقل اختبار موثوقية فيها. ووكلاء الذكاء الاصطناعي الذين يكتبون الاختبارات قد يضيفون التقلب بالسهولة التي يضيفون بها التغطية، فالاختبارات الجديدة تستحق التدقيق نفسه الذي يستحقه الكود الجديد.
في AI CodeOps
لا يكتشف AI CodeOps الاختبارات المتقلبة ولا يعزلها. وتحكم بوابة الإصدار فيه على كل سير عمل بآخر تشغيل منته له: فإعادة تشغيل ناجحة تمحو فشلا سابقا، بينما إعادة التشغيل التي ما زالت قيد التنفيذ أو الملغاة لا تحتسب نجاحا. ولا تحتسب نتائج الاختبار إلا لإصدار الكود الذي عملت عليه.
الأسئلة الشائعة
هل أعيد تشغيل الاختبارات المتقلبة تلقائيا وكفى؟
كحل مؤقت، وبحذر. فإعادة المحاولة التلقائية تخفي أيضا الأخطاء المتقطعة الحقيقية. تتبع الاختبارات التي احتاجت إلى إعادة محاولة، وأصلحها أو اعزلها.
هل يكتشف AI CodeOps الاختبارات المتقلبة؟
لا. يسجل نتائج الاختبار لكل تشغيل. وتحكم بوابة الإصدار على كل سير عمل بآخر تشغيل منته له.