测试集有效性评价:问题、进展与挑战

作者：路则雨; 张鹏; 王洋; 郭肇强; 杨已彪^*; 周毓明^*

来源：软件学报, 2023, 35(2): 1-49.

DOI：10.13328/j.cnki.jos.006953

• 覆盖率
• 变异得分
• 缺陷检测
• 测试集有效性

测试用例集的缺陷检测有效性指测试集能够在多大程度上检测出软件中存在的缺陷.如何评价测试集的缺陷检测有效性是一个重要问题.覆盖率和变异得分是两个最重要和最广泛使用的测试集有效性度量.为量化测试集的缺陷检测能力,研究人员对测试集有效性评价进行了大量研究并且取得了较大的进展.与此同时,现有研究存在不一致的结论,该领域依然存在一些亟待解决的挑战.对多年来国内外学者在测试集有效性评价领域的研究成果进行系统性的梳理和总结.首先,阐述测试集有效性评价研究中的问题.然后,介绍并分析基于覆盖率和基于变异得分的测试集有效性的评价以及介绍测试集有效性评价在测试集优化中的应用.最后,指出测试集有效性评价研究中面临的挑战并给出建议的研究方向.

• 单位
  南京大学; 计算机软件新技术国家重点实验室