Testy pisze już AI. TypeMock chce sprawdzać, które z nich mają sens

Przez ostatnie lata problemem było napisanie wystarczającej liczby testów jednostkowych, tych małych sprawdzianów, które uruchamia się przy każdej zmianie kodu, żeby upewnić się, że pojedyncza funkcja nadal robi to, co powinna. Pisanie ich ręcznie jest żmudne, więc deweloperzy chętnie oddali tę robotę asystentom AI. I tu pojawia się nowy kłopot: kiedy testy generuje model, przybywa ich szybciej, niż ktokolwiek jest w stanie je przejrzeć, a połowa z nich może nie sprawdzać niczego sensownego. TypeMock, firma od lat zajmująca się narzędziami do testów jednostkowych dla platformy .NET, ogłosiła 22 czerwca nowe narzędzie o nazwie Test Review, które ma odpowiadać właśnie na to pytanie: które z tych wygenerowanych testów w ogóle warto trzymać.

Problem nie jest już w tym, ile testów masz, tylko które są warte utrzymania

Najlepiej ujął to sam założyciel firmy. "Przez lata branża skupiała się na tworzeniu większej liczby testów", powiedział Eli Lopian, założyciel i prezes TypeMock. "Dziś wyzwaniem jest zrozumienie, które testy zasługują na istnienie. Przechodzący test nie jest automatycznie testem przydatnym." To zdanie jest sednem całej sprawy. Test, który zawsze kończy się na zielono, wygląda na sukces, ale jeśli sprawdza coś trywialnego albo dubluje inny test, to tylko wydłuża czas każdego uruchomienia i daje fałszywe poczucie, że kod jest dobrze pokryty testami. Lopian nazywa to wprost: takie testy nie zwiększają pewności, zwiększają tylko koszt utrzymania.