When Generative AI Writes Test Cases: Scenario-Driven Evaluation of Generated Tests
本論文は、シナリオ駆動型の評価手法を導入して、生成AIが作成したテストスイートを人間が作成したテストスイートと比較し、直接的なプロンプトはより多くの期待される振る舞いを復元する一方で、「着想してから実装する(ideate-then-implement)」戦略は重複の少ないより効率的なスイートをもたらし、「着想のみ(ideate-only)」のアプローチは追加のテストシナリオを効果的に発見することを明らかにしている。