Translate or Simplify First: An Analysis of Cross-lingual Text Simplification in English and French
تقيم هذه الدراسة استراتيجيات التلقين المختلفة لتبسيط النصوص عبر اللغات بين الإنجليزية والفرنسية باستخدام النماذج اللغوية الكبيرة، حيث وجدت أنه في حين يؤدي التلقين المباشر إلى أعلى دقة في المعنى، فإن نهج "الترجمة ثم التبسيط" ينتج المخرج الأكثر تبسيطاً.
تخيل أن لديك وصفة طهي معقدة للغاية وكثيفة مكتوبة باللغة الإنجليزية. تريد تقديم هذا الطبق لصديق يتحدث الفرنسية وهو مبتدئ في الطبخ. تحتاج إلى القيام بشيئين في آن واحد: ترجمة الكلمات إلى الفرنسية وتبسيط التعليمات حتى لا تكون مربكة.
هذه الورقة البحثية تشبه مسابقة طبخ حيث اختبر الباحثون طرقًا مختلفة لإنجاز تلك المهمة باستخدام "روبوتات فائقة الذكاء" (تسمى النماذج اللغوية الكبيرة أو LLMs). أرادوا معرف الاكتشاف: ما هي أفضل طريقة لطلب الترجمة والتبسيط من الروبوت في وقت واحد؟
إليك تفاصيل تجربتهم بكلمات بسيطة:
"الوصفات" الخمس لسؤال الروبوت
جرب الباحثون خمس طرق مختلفة لإعطاء تعليمات للروبوت (تسمى "المطالبات" أو Prompts):
نهج "افعل كل شيء دفعة واحدة" (المباشر): تخبر الروبوت: "إليك نصاً إنجليزياً صعباً؛ يرجى إعطائي النسخة الفرنسية المبسطة منه". أنت لا تخبره كيف يفعل ذلك، بل تريد النتيجة فقط.
نهج "الترجمة ثم التبسيط" (التركيب): تخبر الروبوت: "أولاً، ترجم هذا إلى الفرنسية. ثم، خذ هذا النص الفرنسي واجعله أبسط". تقوم بذلك في رسالة واحدة.
نهج "التبسيط ثم الترجمة" (التركيب): تخبر الروبوت: "أولاً، اجعل هذا النص الإنجليزي أبسط. ثم، ترجم هذا الإنجليزية البسيطة إلى الفرنسية". أيضاً في رسالة واحدة.
نهج "الترجمة ثم التبسيط" (التفكيك): تجري محادثة من خطوتين. أولاً، تطلب من الروبوت الترجمة. بمجرد أن يعطيك النص الفرنسي، تأخذ مخرجاته وتطرح سؤالاً ثانياً: "الآن، اجعل هذا النص الفرنسي أبداً أكثر بساطة".
نهج "التبسيط ثم الترجمة" (التفكيك): مشابه لـ رقم 4، ولكنك تطلب منه تبسيط النص الإنجلي English أولاً، ثم في رسالة ثانية، تطلب منه ترجمة النتيجة.
اختبار التذوق (التقييم)
لم يكتفِ الباحثون بالتخمين حول أيهما الأفضل؛ بل أجروا "اختبار تذوق" هائلاً باستخدام:
5 أنواع مختلفة من النصوص: من مقالات ويكيبيديا إلى التعليمات الطبية.
7 نماذج مختلفة من الروبوتات: بعضها مشهور جداً (مثل GPT-4)، وبعضها مفتوح المص المصدر، وبعضها نماذج قديمة.
ثلاث طرق للحكم على الطعام:
حكم الروبوت (المقاييس الآلية): قارنت الحواسيب المخرجات بمرجع "مثالي" للتحقق من مطابقة الكلمات والمعنى.
شرطة القواعد (التحليل اللغوي): تحققوا مما إذا كانت الجمل أقصر، واستخدمت كلمات أبسط، وتراكيب قواعدية أسهل.
الحكام البشر: قرأ أشخاص حقيقيون يتحدثون الإنجليزية والفرنسية النتائج ليروا ما إذا كانت تبدو بالفعل أسهل في الفهم وما إذا كان المعنى قد فُقد.
النتائج: ما الذي نجح بشكل أفضل؟
وجدت الدراسة أنه لا توجد "خلطة سحرية" واحدة تفوز في كل مرة. الأمر يعتمد على ما تقدره أكثر:
إذا كنت تهتم بالدقة (الحفاظ على المعنى الدقيق): كان نهج "افعل كل شيء دفعة واحدة" (المباشر) هو الفائز. فقد أنتج نصاً فرنسياً ظل أقرب إلى المعنى الإنجليلي الأصلي. كان الأمر يشبه مترجماً حريصاً جداً على عدم تغيير أي حقيقة، حتى لو ظلت الجمل طويلة ومعقدة نوعاً ما.
إذا كنت تهتم بالبساطة (جعل القراءة سهلة): كانت مناهج "الترجمة ثم التبسيط" هي الفائزة. من خلال الترجمة أولاً ثم طلب التبسيط من النص الفرنسي، كان النص الفرنسي الناتج أسهل بكثير في القراءة، وجمله أقصر، واستخدم كلمات أبسط.
تشبيه: فكر في الأمر كبناء منزل. إذا حاولت البناء والزينة في آن واحد، فقد تفقد بعض التفاصيل. لكن إذا بنيت الهيكل (الترجمة) أولاً، ثم عدت لتجريد الزينة غير الضرورية (التبسيط)، سينتهي الأمر بمنزل أكثر انفتاحاً وانشراحاً.
"فخ الترجمة"
لاحظ الباحثون شيئاً مثيراً للاهتمام حول ترتيب العمليات. إذا حاولت تبسيط النص الإنجلي English قبل ترجمته، فقد يرتبك الروبوت أو يفقد المعلومات. إنه يشبه محاولة شرح نكتة معقدة بلغة إنجليزية بسيطة، ثم ترجمة تلك النسخة البسيطة إلى الفرنسية؛ قد تضيع الفروق الدقيقة في الخطوة الأولى. ومع ذلك، فإن الترجمة أولاً ثم تبسيط الفرنسية سمحت للروبوت بالتعامل مع تعقيدات اللغة الفرنسية بشكل أفضل.
الخلاصة
خلصت الورقة إلى:
إذا كنت بحاجة إلى دقة مثالية (مثل وثيقة قانونية)، استخدم الطريقة المباشرة.
إذا كنت بحاجة إلى أقصى قدر من سهولة القراءة (مثل طفل أو متعلم مبتدئ)، استخدم طريقة الترجمة ثم التبسيط.
كما أشار الباحثون إلى أنه بينما تعد روبوتاتنا جيدة جداً، إلا أنها لا تزال مجرد لقطات من التكنولوجيا الموجودة اليوم. ومع زيادة ذكاء الروبوتات، قد تتغير الطريقة المثلى لسؤالها مرة أخرى. ولكن في الوقت الحالي، معرفة كيفية طرح السؤال لا تقل أهمية عن السؤال نفسه.
إليك ملخص تقني مفصل لورقة البحث بعنوان "تحليل التبسيط النصي عبر اللغات بين الإنجليزية والفرنسية".
1. بيان المشكلة
يهدف التبسيط النصي عبر اللغات (CLTS) إلى جعل المحتوى متاحاً لجمهور متنوع (مثل متعلمي اللغات، والأفراد الذين يعانون من صعوبات في القراءة) من خلال ترجمة النص من لغة المصدر إلى لغة الهدف وتقليل تعقيده اللغوي في آن واحد.
بينما تعد الترجمة الآلية (MT) والتبسيط النصي أحادي اللغة (TS) مجالات ناضجة، إلا أن CLTS يفرض تحديات فريدة:
الاعتماد المتبادل: تختلف استراتيجيات التبسيط باختاًف اللغات بسبب الاختلافات النحوية والثقافية.
غموض الترتيب: من غير الواضح ما إذا كان ينبغي الترجمة أولاً ثم التبسيط، أم التبسيط أولاً ثم الترجمة، أو تنفيذ المهمتين معاً.
فجوات التقييم: غالباً ما تعاقب المقاييس التقليدية (مثل BLEU) عمليات التبسيط المشروعة، وتفتقر التقييمات الحالية إلى مقارنات منهجية لاستراتيجيات التلقين (Prompting) للنماذج اللغوية الكبيرة (LLMs) في سياق عابر للغات.
2. المنهجية
الإعداد التجريبي
المجموعات النصية (Corpora): استخدمت الدراسة خمس مجموعات بيانات متنوعة تغطي المعرفة العامة (ويكيبيديا) والنصوص الطبية:
النماذج: تم تقييم سبعة نماذج من أحدث النماذج اللغوية الكبيرة، بما في ذلك النماذج المملوكة (GPT-3.5، GPT-4o-mini، Gemini 2.5 Flash-Lite) والنماذج مفتوحة المصدر (DeepSeek، Aya101، Mistral-NeMo، mT5).
استراتيجيات التلقين (Prompting Strategies): تقارن الدراسة الجوهرية بين خمس مقاربات متميزة للتعامل مع مهمة CLTS:
التلقين المباشر (Direct Prompting): تلقين واحد يوجه النموذج للترجمة والتبسيط في آن واحد.
التركيب (T→S Composition): تلقين واحد يوجه النموذج لـ "الترجمة ثم التبسيط" (استدلال تسلسلي ضمن تلقين واحد).
التركيب (S→T Composition): تلقين واحد يوجه النموذج لـ "التبسيط ثم الترجمة".
التشابه الدلالي: BERTScore (من الإنجليزية إلى الفرنسية) و CamemBERTScore (من الفرنسية إلى الإنجليزية) لتقييم الحفاظ على المعنى.
تحليل السمات اللغوية: تم استخراج مجموعة شاملة من 37 سمة (بناءً على إطار عمل BATS)، تشمل الثراء المعجمي، وعمق الشجرة النحوية، وطول الجملة، ودرجات سهولة القراءة (Flesch-Kincaid، Flesch Reading Ease)، والتراكيب النحوية.
التقييم البشري: قام المقيمون بتصنيف المخرجات بناءً على الحفاظ على المعنى (إضافة/حذف المعلومات) والبساطة (التعقيد النسبي) باستخدام مقاييس ليكرت (Likert scales).
3. المساهمات الرئيسية
أول مقارنة منهجية: هذه هي الدراسة الأولى التي تقارن بشكل منهجي بين خمس استراتيجيات تلقين مختلفة لـ CLTS بين الإنجليزية والفرنسية عبر نماذج لغوية كبيرة متعددة ومجالات مختلفة.
اكتشاف عدم التماثل الاتجاهي: تكشف الدراسة أن الاستراتيجية المثلى تعتمد بشدة على اتجاه الترجمة (EN→FR مقابل FR→EN).
تحديد المقايضة (Trade-off): تحدد الدراسة صراحةً المقايضة بين الدقة (الحفاظ على المعنى الأصلي) والبونة (تقليل التعقيد)، موضحة أن الاستراتيجيات المختلفة تحسن أهدافاً مختلفة.
4. النتائج الرئيسية
الأداء حسب المقياس
دقة الترجمة (BLEU): حقق التلقين المباشر باستمرار أعلى درجات BLEU عبر جميع النماذج والمجموعات النصية. يشير هذا إلى أن طلب تنفيذ المهمتين معاً من النموذج ينتج أكثر دقة وسلاسة في الترجمة، ويحافظ على بنية المصدر بشكل أفضل.
جودة التبسيط (SARI والسمات اللغوية): أظهرت المقاربات التسلسلية، وخاصة الترجمة ثم التبسيط (T→S)، قدرات تبسيط فائقة.
أدت استراتيجيات T→S Composition و Decomposition إلى عمق أقل في الشجرة النحوية، وجمل أقصر، ونسب أعلى للجمل القصيرة، ودرجات أفضل بكثير في سهولة القراءة (Flesch Reading Ease) مقارنة بالتلقين المباشر.
أدت مقاربات التبسيط ثم الترجمة (S→T) عموماً إلى أداء أسوأ من حيث درجات BLEU، خاصة في اتجاه الفرنسية إلى الإنجليزية، مما يشير إلى حدوث انزياح دلالي كبير عند التبسيط قبل الترجمة.
التشابه الدلالي: حافظ التلقين المباشر على أعلى درجات التشابه الدلالي. ومع ذلك، في مهام الفرنسية إلى الإنجليزية، أظهرت مقاربات T→S درجات BERT أقل، مما يشير إلى أن ترجمة النص الفرنسي المعقد أولاً، ثم تبسيطه، يحافظ على المعنى بشكل أفضل.
نتائج التقييم البشري
المقايضة بين البساطة والدقة: صنف المقيمون البشريون مقاربات التفكيك (Decomposition) على أنها الأكثر "بساطة" (أعلى درجات البساطة). ومع ذلك، جاء ذلك على حساب معدلات أعلى من إضافة وحذف المعلومات.
التلقين المباشر: صُنف على أنه الأقل بساطة ولكنه الأكثر أمانة للنص الأصلي، مما يؤكد قوته في الحفاظ على المعنى.
ترتيب العمليات: أثر ترتيب العمليات بشكل كبير على المخرج النهائي. فبشكل عام، أنتجت عملية "الترجمة ثم التبسيط" نصاً أكثر قابلية للقراءة من "التبسيط ثم الترجمة".
أداء النماذج
تفوقت النماذج المملوكة (GPT-4o، Gemini) عموماً على النماذج مفتوحة المصدر (Aya، Mistral، mT5) في جميع المقاييس.
أظهر نموذج mT5 الأساسي (المعدل بدقة) درجات SARI تنافسية، ولكن درجات BLEU والتشابه الدلالي كانت أقل بكثير مقارنة بالنماذج اللغوية الكبيرة التي استُخدمت مع التلقين، مما يسلط الضوء على قدرات Zero-shot للنماذج اللغوية الكبيرة الحديثة.
5. الأهمية والآثار المترتبة
اختيار الاستراتيجية: تخلص الورقة إلى أنه لا توجد استراتيجية واحدة "تناسب الجميع".
إذا كان الهدف هو أقصى قدر من الدقة والحفاظ على المعنى (مثل الترجمة القانونية أو الطبية حيث تكون الدقة حاسمة)، فإن التلقين المباشر هو الخيار الأفضل.
إذا كان الهدف هو أقصى قدر من الوصول وسهولة القراءة (مثل المواد التعليمية لغير الناطقين باللغة)، فمن المستحسن استخدام مقاربات الترجمة ثم التبسيط (T→S)، لأنها تنتج نصاً أكثر بساطة من الناحية الهيكلية.
هندسة التلقين (Prompt Engineering): تؤكد الدراسة أن هندسة التلقين (تحديداً ترتيب المهام واستخدام التركيب مقابل التفكيك) هي رافعة حاسمة للتحكم في خصائص مخرجات النماذج اللغية الكبيرة في المهام متعددة الأهداف والمعقدة.
الاتجاهات المستقبلية: يسلط المؤلفون الضوء على الحاجة إلى إجراء أبحاث في أزواج لغوية أخرى (خاصة اللغات ذات الموارد المحدودة أو المتباعدة نوعياً) وتطوير مقاييس تلتقط بشكل أفضل الملاءمة الثقافية والاستيعاب الفعلي للقارئ.
باختصار، توفر هذه الورقة تحليلاً تأسيسياً لكيفية الاستفادة المثلى من النماذج اللغوية الكبيرة في التبسيط النصي عبر اللغات، موضحة أن اختيار استراتيجية التلقين يغير بشكل جوهري التوازن بين دقة الترجمة وتبسيط النص.