Navigating the Prompt Space: Improving LLM Classification of Social Science Texts Through Prompt Engineering
Este artículo demuestra que, si bien la variación sistemática de los elementos de la ingeniería de prompts, tales como las descripciones de etiquetas, los estímulos instructivos y los ejemplos de pocos disparos (few-shot), puede mejorar significativamente la precisión de la clasificación de los LLM para textos de las ciencias sociales, las ganancias de rendimiento suelen ser marginales más allá de incrementos mínimos de contexto, a veces pueden disminuir con un exceso de contexto y varían sustancialmente entre modelos y tareas, lo que requiere una validación individual en lugar de depender de reglas generales.