🤖 machine learning
Online Data Selection Is Implicit Alignment
यह शोध पत्र प्रदर्शित करता है कि सुपरवाइज्ड फाइन-ट्यूनिंग के दौरान ऑनलाइन डेटा चयन एक अंतर्निहित संरेखण तंत्र (implicit alignment mechanism) के रूप में कार्य करता है जो उपयोग किए गए स्कोरिंग मानदंडों के आधार पर मॉडल की व्यवहार संबंधी प्राथमिकताओं—जैसे कि इनकार की दर (refusal rates), वाचालता (verbosity), और चाटुकारिता (sycophancy)—को व्यवस्थित रूप से आकार देता है, और इस विचलन (drift) का ऑडिट और नियंत्रण करने की विधियों का प्रस्ताव करता है।