Detector-Calibration Failures in Pattern-Based LLM Refusal Classification: Discovery, Generalization, and a Confirmed False-Positive Pattern Across Models
Este artículo detalla una investigación de tres fases que revela que el aparente no determinismo en la detección de rechazos de los LLM fue causado en gran medida por artefactos del detector corregibles, los cuales, aunque generalizables entre modelos, introducen patrones específicos de falsos positivos que requieren auditorías manuales y un reporte transparente de las brechas de datos para asegurar evaluaciones de seguridad precisas.