Code Agents under Split Specifications: An Empirical Study of Silent Failure in System Integration
Diese empirische Studie zeigt auf, dass durch große Sprachmodelle gesteuerte Code-Agenten während der Systemintegration häufig stillschweigend versagen, wenn kritische Fakten in aufgeteilten Spezifikationen fehlen, was verdeutlicht, dass das Pipeline-Design – insbesondere die Fähigkeit, klärende Fragen zu stellen oder strikte Tests durchzusetzen – entscheidender ist als die Modellauswahl, um diese unentdeckten Fehler zu verhindern.