Meet Dynamic Individual Preferences: Resolving Conflicting Human Value with Paired Fine-Tuning
تقدم هذه الورقة البحثية "الضبط الدقيق المعتمد على تفضيلات مزدوجة" (PFT)، وهو إطار عمل جديد ومعه مجموعة بيانات "معضلة صراع القيم" (VCD) المصممة لمواءمة النماذج اللغوية الكبيرة مع التفضيلات البشرية الفردية الديناميكية والمتضاربة، مما يظهر أداءً فائقاً على الأساليب الحالية مثل DPO وSFT في كل من مهام التصنيف والتوليد.