How Reliable Are Bengali LLM Benchmarks? A Cross-Lingual Contamination and Robustness Audit of Open-Weight Language Models
Este artículo introduce y valida un marco sistemático para auditar la fiabilidad de los benchmarks de LLM en bengalí mediante la detección de la contaminación de datos translingüísticos y la medición de la robustez frente a perturbaciones, revelando que los resultados piloto iniciales muestran un rendimiento apenas por encima de los niveles de azar.