Large Language Models for Code Generation from Multilingual Prompts: A Curated Benchmark and a Study on Code Quality
यह शोध पत्र एक क्यूरेटेड बहुभाषी बेंचमार्क प्रस्तुत करता है और एक ऐसा अध्ययन प्रदर्शित करता है जो यह दर्शाता है कि प्रॉम्प्ट में उपयोग की जाने वाली भाषा एलएलएम (LLMs) द्वारा जनरेट किए गए कोड की कार्यात्मक शुद्धता, संरचनात्मक गुणवत्ता और शाब्दिक विशेषताओं को महत्वपूर्ण रूप से प्रभावित करती है, जिससे यह पता चलता है कि अंग्रेजी प्रॉम्प्ट लगातार सर्वोत्तम परिणाम नहीं देते हैं और इसका प्रभाव विभिन्न मॉडलों और प्रोग्रामिंग भाषाओं में भिन्न होता है।