Mutantes como apoyo para la valoración de pruebas

Abstract

En este trabajo proponemos el uso de la técnica de mutation testing, o pruebas basadas en mutación, en asignaturas de pruebas de software para ayudar en la labor de evaluación de las mismas, a la vez que su propio uso ayuda a los alumnos a entender y asimilar la técnica en sí, utilizándola para mejorar sus conjuntos de pruebas. Describimos nuestra experiencia usando mutation testing en una asignatura de pruebas de software. Gracias al uso de una herramienta que automatiza la generación de mutantes y su evaluación, el profesor puede obtener una idea rápida de la calidad de las pruebas que puede servir para guiar/confirmar su evaluación. El alumno, por su parte, puede usarla para obtener una primera evaluación de su trabajo y como guía para mejorar el conjunto de pruebas.

In this work, we propose the use of the mutation testing technique in software testing courses, to help the instructor in the students’ assessment. Students can also use it to better understand the technique and improve their test suites. We describe our experience using mutation testing in a software testing course. Supported by a software tool to automate the mutants generation and evaluation, the instructor can get a fast assessment of the test suites quality. This initial assessment can be used to guide/confirm the instructor’s personal assessment. Students can use such a tool to get a first assessment of their job and guide the steps to improve their test suite.