💻 संगणक विज्ञान
Performance evaluation and benchmarking across 16 large language models on a comprehensive real-world emergency department triage data set
यह अध्ययन वास्तविक दुनिया के आपातकालीन विभाग ट्राइएज डेटा पर 16 लार्ज लैंग्वेज मॉडल्स का बेंचमार्किंग करता है, जिसमें यह पाया गया कि हालांकि संरचित प्रॉम्प्टिंग गंभीरता वर्गीकरण के लिए मानव नर्सों के साथ पर्याप्त सहमति प्राप्त कर सकती है, लेकिन अधिकांश मॉडल सीमित सटीकता, खराब सेक्टर असाइनमेंट, व्यवस्थित अति-आत्मविश्वास और गैर-नियतात्मक व्यवहार प्रदर्शित करते हैं, जो यह संकेत देता है कि वे बिना आगे के सत्यापन और सुधार के नैदानिक कार्यान्वयन के लिए अभी तैयार नहीं हैं।
Leo Benning, Anja Hirsch, Matthias Gröschel, Tobias Röschl, Martin Spott, Felix Patricius Hans, Tim Urban, Hans-Jörg Bus (…)2026-06-28