A Multi-Language Perspective on the Robustness of LLM Code Generation
यह शोध पत्र कोड जनरेशन के लिए लार्ज लैंग्वेज मॉडल्स का एक व्यापक बहुभाषी मूल्यांकन प्रस्तुत करता है, जो यह प्रकट करता है कि विभिन्न भाषाओं में विभिन्न प्रॉम्प्ट परिवर्तनों के तहत प्रदर्शन लगातार घटता है, बड़े मॉडल आकार कोई विश्वसनीय मजबूती लाभ प्रदान नहीं करते हैं और LLM-आधारित डॉकस्ट्रिंग रिपेयर केवल मामूली या यहाँ तक कि नकारात्मक लाभ प्रदान करता है।