Evaluating Legal Reasoning Traces with Legal Issue Tree Rubrics
यह योगदान LEGIT को प्रस्तुत करता है, जो 24,000 विशेषज्ञ-स्तरीय कानूनी तर्क पथों का एक बड़े पैमाने का डेटासेट है जो पदानुक्रमित समस्या वृक्षों (hierarchical problem trees) के रूप में संरचित है और एक सुदृढ़ मूल्यांकन ढांचे के रूप में कार्य करता है ताकि यह आकलन और प्रदर्शन किया जा सके कि कैसे रिट्रीवल-ऑगमेंटेड जनरेशन (retrieval-augmented generation) और रीइन्फोर्समेंट लर्निंग (reinforcement learning) एलएलएम (LLMs) में कानूनी तर्क की कवरेज और शुद्धता को पूरक रूप से बढ़ा सकते हैं।