Context-Aware LLM Evaluators for Content Moderation Judgments in a Low-Resource Setting
Diese Studie zeigt, dass, während kontextsensitive Prompting-Verfahren und der Abruf früherer Entscheidungen die Leistungsfähigkeit von Large Language Model-Evaluatoren für die Moderation deutscher Zeitungsforen verbessern können, die Wahl der Modellkapazität entscheidender ist als die Prompting-Strategie, wobei das größte Modell über supervised Systeme bei seltenen Löschkategorien ohne die Notwendigkeit annotierter Trainingsdaten übertrifft.