Position: Let's Develop Data Probes to Fundamentally Understand How Data Affects LLM Performance
यह शोध पत्र व्यवस्थित "डेटा प्रोब्स" (data probes)—जो परिभाषित यादृच्छिक प्रक्रियाओं से व्युत्पन्न सिंथेटिक अनुक्रम हैं—विकसित करने का समर्थन करता है ताकि कंप्यूट-गहन अनुभवजन्य ह्यूरिस्टिक्स (empirical heuristics) से आगे बढ़ा जा सके और एक सैद्धांतिक समझ प्राप्त की जा सके कि कैसे विशिष्ट डेटा विशेषताएँ विभिन्न वर्कफ़्लो चरणों में लार्ज लैंग्वेज मॉडल के प्रदर्शन, सामान्यीकरण (generalization) और सुदृढ़ता (robustness) को मौलिक रूप से प्रभावित करती हैं।