💬 NLP
Evaluating LLM-Based Grant Proposal Review via Structured Perturbations
यह शोध पत्र छह गुणवत्ता अक्षों पर संरचित विचलनों (structured perturbations) का उपयोग करके एलएलएम-आधारित अनुदान प्रस्ताव समीक्षाओं का मूल्यांकन करता है, जिसमें यह पाया गया कि एक खंड-दर-खंड विश्लेषण दृष्टिकोण अन्य आर्किटेक्चर की तुलना में बेहतर प्रदर्शन करता है, लेकिन वर्तमान मॉडल अभी भी स्पष्टता का पता लगाने और समग्र मूल्यांकन में संघर्ष करते हैं, जो यह सुझाव देता है कि वे मानव समीक्षकों के प्रतिस्थापन के बजाय पूरक उपकरणों के रूप में सबसे उपयुक्त हैं।