SALT: When More Rollouts Don't Help in Group-Based Policy Optimization and How to Make Them Matter
यह शोध पत्र SALT को पेश करता है, जो ग्रुप रिलेटिव पॉलिसी ऑप्टिमाइज़ेशन (GRPO) के लिए एक प्लग-इन घटक है जो एक साझा उप-स्थान (shared subspace) के भीतर हस्ताक्षरित ग्रेडिएंट रद्दीकरण (signed gradient cancellation) का मुकाबला करने के लिए अपडेट गुणांकों को अनुकूल रूप से पुन: भारित (reweight) करके बढ़ते रोलआउट द्वारा होने वाली प्रदर्शन गिरावट को कम करता है।