AI CodeOps

Mutasyon testi (mutation testing)

Son güncelleme

Mutasyon testi, kodda küçük değişiklikler yapıp herhangi bir testin başarısız olup olmadığına bakarak testlerinizi kontrol eder. Nasıl çalıştığı ve kapsamdan farkı.

Mutasyon testi, bir test paketinin hataları ne kadar iyi yakaladığını ölçmenin bir yoludur. Bir araç, kodda mutant adı verilen çok sayıda küçük değişiklik yapar ve testleri her birine karşı çalıştırır. İyi bir test paketi bunların çoğunda başarısız olur.

Nedir

Stryker dokümantasyonunun ifadesiyle: hatalar, yani mutantlar, kodunuza otomatik olarak eklenir. Testleriniz başarısız olursa mutant öldürülmüş (killed) olur. Geçerlerse mutant hayatta kalmıştır (survived); bu da testlerde bir boşluğa işaret eder. Öldürülen mutantların payı ne kadar yüksekse testler o kadar etkilidir.

Tipik mutasyonlar bir karşılaştırmayı tersine çevirir (< yerine <=), true ile false değerlerini değiştirir, bir fonksiyon çağrısını kaldırır veya bir dönüş değerini değiştirir. Stryker; JavaScript ve TypeScript, C# ve Scala'yı kapsar; diğer ekosistemlerin kendi araçları vardır.

Mutasyon testi yavaştır, çünkü test paketini her mutant için bir kez çalıştırır; bu yüzden ekipler onu genellikle yalnızca değişen dosyalarda veya bir zamanlamayla çalıştırır.

Neden önemlidir

Kapsam, testler sırasında hangi kodun çalıştığını söyler. Mutasyon testi ise o kod yanlış olsaydı testlerin bunu fark edip etmeyeceğini söyler. Bu fark, her satırı çalıştırıp yine de çok az şeyi kontrol edebilen yapay zekâ yazımı testlerde önemlidir.

AI CodeOps'ta

AI CodeOps mutasyon testi çalıştırmaz. Yayın kapısı test sonuçlarınızı ve bir kapsam alt sınırını kullanır. CI'da bir mutasyon aracı çalıştırıyorsanız onun puanını ayrı bir kontrol olarak ele alın.

Sık sorulan sorular

Neden yalnızca kapsama güvenmemeli?

Kapsam, testler sırasında hangi satırların çalıştığını gösterir; bu satırlar yanlış olsaydı herhangi bir testin bunu fark edip etmeyeceğini göstermez. Hiç doğrulama (assertion) içermeyen bir test de tam kapsama ulaşabilir.

AI CodeOps mutasyon testi çalıştırır mı?

Hayır. Kendi CI'ınızda bir mutasyon testi aracı çalıştırabilirsiniz. AI CodeOps, kapı kararını test sonuçlarına ve kapsama göre verir.