What You Prompt is What You Get: Increasing Transparency of Prompting Using Prompt Cards
تقترح هذه الورقة "بطاقات التلقين" (prompt cards)، وهي توثيق مهيكل مستوحى من بطاقات النماذج (model cards)، لمعالجة غياب المعايير في هندسة التلقين من خلال التسجيل المنهجي لقرارات التصميم، وممارسات التقييم، والاعتبارات الأخلاقية لتعزيز الشفافية، وقابلية التكرار، وتقييم الجودة في تفاعلات النماذج اللغوية الكبيرة.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك وظفت للتو طباخاً عبقرياً، سريعاً للغاية، ولكنه غريب الأطوار قليلاً (وهو النموذج اللغوي الكبير أو LLM) ليطهو لك وجبة. أنت تريد طبقاً محدداً: وصفاً لمهارات لاعب كرة قدم، أو ملخصاً لاختبار شخصية.
أنت تعطي الطباخ بطاقة وصفة (وهي المطالبة أو البرومبت). إذا كانت الوصفة غامضة ("اصنع شيئاً جيداً")، فقد يخمن الطباخ، أو يتخيل (يخترع مكونات غير موجودة)، أو يقدم لك طبقاً لا يشبه ما أردته بتاتاً. أما إذا كانت الوصفة دقيقة، فسيقدم لك تحفة فنية.
المشكلة:
في الوقت الحالي، يكتب الجميع هذه البطاقات في السر. البعض يكتبها على مناديل ورقية، والبعض الآخر يكتبها على مناديل بحبر سري، ولا أحد يعرف بالضبط ما هي المكونات (البيانات) التي استُخدمت أو ما هي الخطوات التي اتُّبعت. إذا خرجت الوجبة سيئة، فلا يمكننا معرفة السبب. هل كان الطباخ سيئاً؟ هل كانت الوصفة مربكة؟ أم أن المكونات كانت فاسدة؟
الحل: "بطاقة المطالبة" (Prompt Card)
يقترح مؤلفو هذه الورقة طريقة جديدة للقيام بالأمر تسمى بطاقات المطالبة. فكر في هذا كـ "كتاب قائمة طعام ووصفات" معياري وشفاف يجب على كل طباخ ملؤه قبل تقديم الطبق.
إليك كيف تفصل الورقة ذلك، باستخدام تشبيهات بسيطة:
1. ما هي بطاقة المطالبة؟
إنها تشبه بطاقة النموذج (وثيقة تشرح كيفية عمل نموذج تعلم الآلة)، ولكنها مخصصة للتعليمات التي تعطيها للنموذج.
- الطريقة القديمة: تقول فقط، "اكتب قصة عن لاعب كرة قدم".
- الطريقة الجديدة (بطاقة المطالبة): تقوم بإرفاق وثيقة مفصلة تقول:
- من هو الطباخ؟ (أي إصدار من الذكاء الاصطناعي نستخدمه؟ فالذكاء الاصطناعي يتغير باستمرار، مثل تحديثات البرامج على هاتفك).
- ما هو الهدف؟ (هل هذا لمشروع مدرسي أم لمكتشف مواهب محترف؟ لا تستخدم مشروعاً مدرسياً لوظيفة حقيقية!).
- ما هي المكونات التي استخدمناها؟ (من أين جاءت البيانات؟ هل كانت مليون إجابة استبيان؟ أم 500 إحصائية لكرة القدم؟).
- ما هي القواعد؟ (هل أخبرنا الذكاء الاصطناعي أن يتصرف كمجري كشوفات صارم؟ هل أعطيناه أمثلة على إجابات جيدة؟).
2. لماذا نحتاج إليها؟
تجادل الورقة بأنه بدون هذه البطاقات، نحن نعمل في عماء.
- فخ "الهلوسة": أحياناً يبتكر الذكاء الاصطناعي أشياء من خياله. إذا كنت لا تعرف الوصفة، فلن تعرف ما إذا كان الذكاء الاصطناعي قد اخترع إحصائيات اللاعب أم أن البيانات كانت مفقودة فحسب.
- حساء "التحيز": إذا كانت البيانات التي تغذي بها الذكاء الاصطراعي متحيزة (على سبيل المثال، بالنظر فقط إلى لاعبي كرة القدم الرجال)، فستكون المخرجات متحيزة. تجبرك بطاقة المطالبة على الاعتراف: "مهلاً، هذه الوصفة تعمل فقط للاعبين الذكور؛ لن تعمل مع الرياضيين الإناث".
- قابلية التكرار: إذا أردت طهي نفس الطبق مرة أخرى غداً، فأنت بحاجة إلى نفس الوصفة تماماً. إذا لم تكتبها، فلن تتمكن من فعل ذلك.
3. مثال "التحويل إلى كلمات" (Wordalisation)
لإثبات أن فكرتهم تعمل، جرب المؤلفون مهمة محددة تسمى "التحويل إلى كلمات".
- المهمة: تحويل الأرقام المملة (مثل سرعة لاعب كرة القدم، وأهدافه، وتدخلاته) إلى فقرة نصية ممتعة وسهلة القراءة.
- بطاقة المطالبة: أنشأوا بطاقة تشرح بالضبط كيف حولوا رقماً مثل "7.5" إلى عبارة "مؤدٍ صلب وموثوق". لقد وثقوا كل خطوة، من البيانات الخام إلى الجملة النهائية، بحيث يمكن لأي شخص رؤية كيف حدث السحر.
4. لماذا لا نستخدم "الاختبارات المعيارية" (Benchmarks)؟
قد تتساءل، "لماذا لا نختبر الذكاء الاصطناعي على اختبار قياسي، مثل امتحان الرياضيات؟"
يقول المؤلفون: هذا لا يصلح لكل شيء.
- التشبيه: تخيل أنك تحاول تقييم موسيقي جاز من خلال جعله يجتاز اختباراً من متعدد حول نظرية الموسيقى الكلاسيكية. إنها الأداة الخاطئة للمهمة.
- العديد من مهام الذكاء الاصطناعي فريدة وإبداعية. لا يمكنك امتلاك "اختبار قياسي" واحد لكل مطالبة ممكنة. بدلاً من محاولة حشر كل مطالبة في أنبوب اختبار، يجب أن نكون فقط صادقين وشفافين بشأن ما فعلناه. بطاقة المطالبة هي تلك الصراحة.
5. السلامة والأخلاقيات (النصوص الصغيرة)
تماماً كما تحتوي زجاجة الدواء على ملصق تحذيري، فإن بطاقة المطالبة تحتوي على قسم السلامة.
- الخصوصية: هل قمنا بتغذية الذكاء الاصطناعي بسجلات طبية خاصة؟ إذا كان الأمر كذلك، فيجب أن تقول البطاقة: "لقد حذفنا الأسماء أولاً، ولكن كن حذراً".
- الأخلاق: إذا كان الذكاء الاصطناعي يقيم شخصيات الناس، فيجب أن تعترف البطاقة: "هذا الاختبار ليس مثالياً وقد يكون متحيزاً ضد ثقافات معينة".
الصورة الكبيرة
الورقة تقول في جوهرها: "توقفوا عن إخفاء الوصفة."
في عالم يتخذ فيه الذكاء الاصطناعي قرارات بشأن الوظائف، والقروض، والمشورة الطبية، نحتاج إلى معرفة كيفية اتخاذ تلك القرارات بدقة. من خلال استخدام بطاقات المطالبة، ننتقل من "الصندوق الأسود" (حيث نرى المخرجات فقط ونأمل الأفضل) إلى "الصندوق الزجاجي" (حيث يمكننا رؤية المكونات، والخطوات، والتحذيرات).
الأمر يتعلق ببناء الثقة. إذا كنت تعرف بالضبط كيف طهى الطباخ الوجبة، فيمكنك تحديد ما إذا كانت آمنة للأكل، حتى لو كان الطباخ روبوتاً.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.