Red Teaming LLMs as Socio-Technical Practice: From Exploration and Data Creation to Evaluation
22 चिकित्सकों (प्रैक्टिशनर्स) के साक्षात्कारों पर आधारित यह शोध पत्र डेटासेट निर्माण और मूल्यांकन की सामाजिक-तकनीकी प्रथाओं का परीक्षण करके LLM रेड टीमिंग के वर्तमान तकनीकी फोकस की आलोचना करता है, जो यह प्रकट करता है कि जोखिम की अवधारणा अक्सर संदर्भ और उपयोगकर्ता विशिष्टता की अनदेखी करती है, और साथ ही HCI अनुसंधान के लिए नए दिशा-निर्देश प्रस्तावित करता है।