Is this Idea Novel? An Automated Benchmark for Judgment of Research Ideas
تقدم هذه الورقة البحثية RINoBench، وهو أول معيار شامل لتقييم أحكام حداثة الأفكال البحثية المؤتمتة، والذي يكشف أنه على الرغم من قدرة النماذج اللغوية الكبيرة على توليد استدلال مشابه للخبراء البشر، إلا أنها لا تزال تواجه صعوبة في إنتاج تقييمات دقيقة للحداثة تتوافق مع المعايير الذهبية البشرية.