What Do Resume–Job Matching Benchmarks Actually Measure? Keywords, Embeddings and LLMs on Public Data
यह शोध पत्र यह प्रदर्शित करते हुए सार्वजनिक रेज़्यूमे-नौकरी मिलान बेंचमार्क का आलोचनात्मक मूल्यांकन करता है कि वर्तमान विधियाँ अक्सर डेटा लीकेज और शोर वाले लेबल (noisy labels) पर निर्भर करती हैं, मार्कडाउन जैसे सतही स्वरूपण आर्टिफैक्ट्स के प्रति संवेदनशील हैं, और सरल कीवर्ड बेसलाइन पर केवल मामूली लाभ प्रदान करती हैं (LLM जज एम्बेडिंग्स से महत्वपूर्ण रूप से बेहतर प्रदर्शन नहीं करते हैं), जिससे अनदेखे-रेज़्यूमे स्प्लिट्स (unseen-resume splits) और डेटा क्लीनिंग सहित सख्त मूल्यांकन प्रोटोकॉल की सिफारिश की जाती है।