Eine systematische Überprüfung der Anwendung und empirischen Untersuchung von suchbasierten Testfallgenerierung

Metaheuristische Suchtechniken wurden umfassend genutzt, um den Prozess der Generierung von Testfällen zu automatisieren und somit Lösungen für einen kostengünstigeren Testprozess bereitzustellen. Dieser Ansatz zur Testautomatisierung, oft als „Suchbasierte Softwaretests“ (SBST) bezeichnet, wurde für eine Vielzahl von Zwecken zur Generierung von Testfällen eingesetzt. Da SBST-Techniken von Natur aus heuristisch sind, müssen sie empirisch dahingehend untersucht werden, wie kostspielig und effektiv sie bei der Erreichung ihrer Testziele sind und ob sie auf realistische Entwicklungsartefakte skalierbar sind. Ansätze zur empirischen Untersuchung von SBST-Techniken haben in der Literatur jedoch eine große Variation gezeigt. Dieses Papier präsentiert die Ergebnisse einer systematischen, umfassenden Überprüfung, die darauf abzielt, zu charakterisieren, wie empirische Studien entworfen wurden, um die Kosteneffektivität von SBST zu untersuchen und welche empirischen Beweise in der Literatur zur Kosteneffektivität und Skalierbarkeit von SBST verfügbar sind. Wir bieten auch einen Rahmen, der den Datenabholprozess dieser systematischen Überprüfung leitet und als Ausgangspunkt für Richtlinien dienen kann, wie SBST-Techniken empirisch bewertet werden können. Ziel ist es, zukünftige Forscher, die empirische Studien im Bereich SBST durchführen, zu unterstützen, indem eine unvoreingenommene Sicht auf den Bestand an empirischen Beweisen bereitgestellt wird und sie bei der Durchführung gut geplanter und durchgeführter empirischer Studien geleitet werden.