RetroDFM-R: Reasoning-Driven Retrosynthesis Prediction with Large Language Models via Reinforcement Learning
يُعد RetroDFM-R نموذج لغة كبيرًا معززًا بالتعلم التعزيزي يعمل على تحسين التنبؤ بالتخليق الرجعي الكيميائي من خلال الجمع بين الدقة العالية والاستدلال الشفاف خطوة بخطوة، مما يعالج أوجه القصور في القدرة على التعميم والتفسير مع التفوق على النماذج المرجعية الرائدة في المعايير القياسية.
المؤلفون الأصليون:Situo Zhang, Hanqi Li, Lu Chen, Zihan Zhao, Xuanze Lin, Zichen Zhu, Danyu Luo, Bo Chen, Xin Chen, Kai Yu
لطالما اعتمد الكيميائيون على خريطة ذهنية لبناء جزيئات جديدة، وهي عملية تسمى "التخليق الرجعي" (retrosynthesis). فبدلاً من البدء من المواد الخام ومحاولة مزجها للوصول إلى المنتج النهائي، يعملون بشكل عكسي من الجزيء المكتمل، متسائلين عن القطع الأبسط التي كان يمكن دمجها لإنشائه. يشبه الأمر إلى حد كبير النظر إلى منزل مكتمل ومعرفة أي الطوب والعوارض والأنابيب استُخدمت في بنائه، ثم تتبع تلك المواد وصولاً إلى مصادرها الأصلية. يعد هذا الهندسة العكسية العمود الفقري لاكتشاف الأدوية وعلوم المواد، مما يسمح للعلماء بتصميم مسارات فعالة لإنشاء مركبات معقدة. ولعقود من الزمن، حاولت الحواسيب المساعدة في هذه المهمة، لكنها كانت تعمل غالباً كـ "صناديق سوداء"، حيث تقدم قائمة بالمكونات دون شرح المنطق الكامن وراء الاختيار. وقد جعل هذا النقص في الشفافية من الصعب على الخبراء البشريين الوثوق باقتراحات الآلة أو فهم سبب اختيار مسار معين دون غيره.
يقدم بحث جديد نظاماً يسمى "RetroDFM-R"، صُمم لتغيير كيفية تعامل الحواسيب مع هذا اللغز الكيميائي. فبدلاً من مجرد التخمين للخطوة التالية، يستخدم هذا النظام نموذج لغة ضخماً — وهو نوع من الذكاء الاصطناعي المدرب على كميات هائلة من النصوص — للتفكير في المشكلة خطوة بخلو. لقد درب الباحثون النموذج على مجموعة ضخمة من التفاعلات الكيميائية، ليس فقط لتعليمه التنبؤ بالمواد الأولية، بل لتعليمه أيضاً شرح تفكيره بلغة بسيطة. يقوم النظام بتحليل الجزيء المستهدف، وتحديد السمات الهيكلية الرئيسية، ثم بناء حجة منطقية لكيفية تفكيكه، تماماً كما يفعل الكيميائي البشري. يجمع هذا النهج بين القدرة على التعامل مع البيانات المعقدة ووضوح الاستدلال البشري، مما يجعل قرارات الكمبيوتر مرئية ومفهومة.
اختبر الفريق هذا النظام الجديد على معيار قياسي يحتوي على خمسين ألف تفاعل كيميائي معروف. وفي هذه الاختبارات، حدد النموذج المواد الأولية للجزيء المستهدف بنسبة نجاح بلغت ستين بالمائة دون أي مساعدة إضافية، وستة وستين بالمائة عند استخدام مجموعة كاملة من الأدوات لاستكشاف احتمالات متعددة. وقد تجاوز هذا الأداء الطرق المتطورة السابقة، والتي كانت تكافح للوصول إلى هذه المستويات من الدقة. والأهم من ذلك، أن النظام لم يكتفِ بالحصول على الإجابة الصحيحة فحسب؛ بل قدم تفسيراً مكتوباً واضحاً لكل قرار. وعندما راجع الخبراء البشريون اقتراحات النموذج، وجدوا أن الاستدلال سليم كيميائياً، وغالباً ما فضلوا المسارات التي اقترحها النموذج على تلك التي أنتجتها الأنظمة القديمة. وأشار الخبراء إلى أن النموذج يمكنه اقتراح كواشف وظروف تفاعل محددة، مما يقدم رؤى عملية تتجاوز مجرد قائمة المكونات.
كما أظهر الباحثون أن النظام يمكنه التعامل مع سيناريوهات واقعية معقدة، بما في ذلك تخليق أدوية صيدلانية فعلية ومواد متخصصة تُستخدم في الخلايا الشمسية. في إحدى الحالات، نجح النموذج في إعادة بناء مسار تخليق مكون من خمس خطوات لدواء لعلاج السرطان، محدداً التحولات الكيميائية الصحيحة في كل مرحلة. وفي حالة أخرى، رسم مسار إنشاء جزيء مصمم لتعزيز الجهاز المناعي ضد السرطان. وحتى عندما ارتكب النموذج خطأً، مثل تحديد نوع خاطئ من الروابط الكيميائية، كان الخطأ مرئياً في تفسيره المكتوب، مما سمح للبشر برصده وتصحيحه فوراً. تمثل هذه الشفافية تحولاً كبيراً عن الأدوات السابقة، التي ربما كانت تنتج نتيجة خاطئة دون أي إشارة إلى مكان فشل المنطق.
ولتحقيق هذا المستوى من الأداء، استخدم الباحثون عملية تدريب مكونة من ثلاث مراحل. أولاً، قاموا بتغذية النموذج بمجموعة بيانات منسقة تضم ملايين الأمثلة الكيميائية لبناء أساس قوي من المعرفة الكيميائية. بعد ذلك، استخدموا تقنية تسمى "التقطير" لتعليم النموذج كيفية هيكلة أفكاره، وتوجيهه لإنتاج سرد متماسك قبل إعطاء الإجابة. أخيراً، استخدموا طريقة التعلم التعزيزي، حيث يتم مكافأة النموذج ليس فقط للحصول على الإجابة الصحيحة، بل لتقديم عملية استدلال منطقية كيميائياً ومتسقة مع تنبؤه النهائي. سمح هذا المزيج من البيانات، والتفكير المنظم، والتغذية الراجعة للنموذج بتعلم الفروق الدقيقة في التخليق الكيميائي بطريقة تشبه الاستنتاج البشري أكثر من مجرد مطابقة الأنماط الإحصائية.
تشير الدراسة إلى أنه من خلال جعل عملية الاستدلال صريحة، يمكن للذكاء الاصطناعي أن يصبح شريكاً أكثر موثوقية للعلماء. النظام لا يحل محل الكيميائي، بل يعمل كمساعد شفاف يمكنه اقتراح المسارات، وشرح خياراته، وتسليط الضوء على المشكلات المحتملة. وبينما لا يعد النموذج مثالياً ويمكنه لا يزال إنتاج تفسيرات كيميائية خاطئة، فإن قدرته على توضيح منطقه تجعل منه أداة قوية لتسريع تصميم الأدوية والمواد الجديدة. وكما لاحظ الباحثون، فإن الهدف ليس مجرد التنبؤ بمستقبل التخليق، بل جعل المسار نحو ذلك المستقبل واضحاً ومفهوماً للبشر الذين سيسلكونه.
ملخص تقني: RetroDFM-R
بيان المشكلة
يعد التخطيط للتخليق الرجعي (Retrosynthetic planning) أمراً جوهرياً في التخليق العضوي واكتشاف الأدوية، ومع ذلك تواجه طرق الذكاء الاصطناعي الحالية قيوداً كبيرة في القدرة على التعميم والقابلية للتفسير. تعتمد النهج الحالية المتطورة، سواء كانت قائمة على الرسوم البيانية (مثل GLN وMEGAN) أو قائمة على التسلسل (مثل R-SMILES وEditRetro)، بشكل كبير على العمل كصناديق سوداء (black boxes) من البداية إلى النهاية. فهي تعتمد على مطابقة الأنماط أو القوالب المقيدة دون تقديم استدلال كيميائي صريح وقابل للنقل. علاوة على ذلك، تعاني النماذج اللغوية الكبيرة (LLMs) للأغراض العامة، وحتى النماذج اللغوية الكبيرة المتخصصة في الكيمياء (مثل ChemDFM)، من صعوبة في التعامل مع الصيغ الرسمية للكيمياء (مثل SMILES) وتفشل في تحقيق دقة عالية في اختبارات التقييم الخاصة بالتخليق الرجعي (على سبيل المثال، حقق ChemDFM نسبة 17.9% فقط في USPTO-50K) مع افتقارها إلى المبررات القابلة للقراءة من قبل البشر. هذا النقص في الاستدلال الصريح يعيق الثقة والانتشار العملي في الإعدادات التجريبية.
المنهجية
قدم المؤلفون RetroDFM-R، وهو نموذج لغوي كبير مدفوع بالاستدلال ومخصص للتخليق الرجعي الكيميائي، يدمج المعرفة المتخصصة في المجال مع استدلال سلسلة الأفكال (Chain-of-Thought - CoT) الصريح. يتكون الإطار من ثلاثة مكونات أساسية:
1. تنقية البيانات: Retro-Instruct
قام المؤلفون ببناء Retro-Instruct، وهو مجموعة بيانات عالية الجودة تضم أكثر من 24 مليون عينة عبر عشر مهام.
التنقية: قامت عملية تنقية متعددة المراحل وصارمة بإزالة الجزيئات غير الصالحة، والسجلات المشوشة، وضمان موثوقية رسم الذرات (atom-mapping confidence >0.3). كما تم تطبيق تصفية صارمة للتداخل لمنع تسرب مجموعة الاختبار من USPTO-50K وUSPTO-FULL.
تكوين المهام: تتضمن مجموعة البيانات ست مهام مباشرة (مثل تحويل SMILES إلى IUPAC، واستخراج قالب التفاعل، والتنبؤ بالتفاعل الأمامي/الخلفي) وأربع مهام استدلالية (تحليل البنية الجزيئية، تحليل التفاعل، تحليل التخليق الرجعي، والاستدلال العلمي العام). تم إنشاء مهام الاستدلال عبر مسار متعدد الوكلاء (المحلل، الملخص، التقييم) لضمان الصحة الكيميائية والاتساق المنطقي.
2. نموذج التدريب ثلاثي المراحل
بُني RetroDFM-R على النموذج الأساسي Qwen3-8B وتم تدريبه عبر مسار تصاعدي:
المرحلة 1: التدريب المسبق المستمر (Continual Pretraining): تم تدريب النموذج مسبقاً على مجموعة بيانات Retro-Instruct الكاملة لتأسيس قاعدة معرفة كيميائية واسعة، وتعلم بناء الجملة الجزيئي، وتحولات التفاعل، والربط بين SMILES وIUPAC.
المرحلة 2: التقطير لبدء التشغيل البارد (Cold-Start Distillation): لتهيئة الاستدلال المهيكل، يخضع النموذج لعملية تقطير "مشروطة بالإجابة". يتم تزويد النموذج المعلم (مثل DeepSeek-R1) بالمنتج والمتفاعلات الصحيحة لتوليد مبرر خطوة بخطوة. يتعلم النموذج الطالب محاكاة عملية الاستدلال المهيكلة هذه (تحديد المجموعات الوظيفية، مواقع الفصل، وأنواع التفاعل) قبل أن يُطلب منه التنبؤ بالمتفاعلات بشكل مستقل.
المرحلة 3: التعلم التعزيزي (RL): تم تحسين النموذج باستخدام DAPO (تحسين سياسة أخذ العينات الديناميكية). يوجه دالة مكافأة مركبة عملية التعلم:
مكافآت قائمة على القواعد:Ranswer (المطابقة التامة للمتفاعلات) و Rformat (هيكل المخرجات الصحيح).
نموذج مكافأة توليدي (GRM): يقوم نموذج منفصل بتقييم المبرر المولد من حيث الصحة الكيميائية (Rsound) والأمانة (Rfaith) تجاه المتفاعلات المتنبأ بها.
تزن المكافأة النهائية عامل الأمانة ($0.6$) بشكل كبير لضمان أن الاستدلال يدعم التنبؤ النهائي منطقياً.
3. استراتيجية الاستدلال
يستخدم RetroDFM-R بروتوكول توليد ثنائي المراحل لتعظيم التنوع:
أخذ عينات مسار الاستدلال: يتم توليد مسارات استدلال وسيطة متعددة لمنتج معين.
أخذ عينات المتفاعلات: بناءً على كل مسار استدلال، يتم أخذ عينات من مجموعات متفاعلات متعددة باستخدام درجة حرارة أعلى (1.4).
تعزيز SMILES: تُستخدم تمثيلات SMILES عشوائية للمنتج المدخل لزيادة تنوع فضاء البحث. يتم ترتيب التنبؤات النهائية حسب التكرار بعد عملية التوحيد القياسي (canonicalization).
النتائج الرئيسية
تم تقييم RetroDFM-R على معايير USPTO-50K و USPTO-FULL تحت ظروف فئات التفاعل غير المعروفة.
أداء USPTO-50K:
دقة Top-1: حقق 60.4% بدون تعزيز وقت الاختبار و 66.1% مع إعداد الاستدلال الكامل.
المقارنة: تفوق على الطريقة السابقة الأكثر تطوراً القائمة على التسلسل (EditRetro، بنسبة 60.8%) بمقدار 5.3 نقطة مئوية في الإعداد الكامل، وتجاوز أفضل طريقة قائمة على الرسوم البيانية (Graph2Edits، بنسبة 55.1%) بمقدار 5.3 نقطة حتى بدون تعزيز.
النماذج اللغوية المرجعية: تفوق بشكل كبير على النماذج اللغوية العامة ذات القدرة على الاستدلال (مثل GPT-5.2 بنسبة 21.8%) والنماذج اللغوية الكبيرة المتخصصة في الكيمياء (ChemDFM-v1.5 بنسبة 17.9%).
أداء USPTO-FULL: حقق دقة top-1 بنسبة 51.3%، مما أرسى نتائج جديدة متطورة لمقاييس top-3 و top-5.
مقاييس بديلة:
دقة الرحلة العكسية (RoundTrip Accuracy): بلغت 87.7% (top-1)، مما يشير إلى معقولية كيميائية عالية عند إعادة تخليق المتفاعلات المتنبأ بها.
دقة الجزء الأكبر (MaxFrag Accuracy): بلغت 70.4% (top-1)، مما يظهر قدرة فائقة على التنبؤ بأكبر وأهم سلائف.
دراسات الاستئصال (Ablation Studies):
رفع التدريب المسبق المستمر الدقة من 0% إلى 30.4% (توليد فردي).
حسن التقطير لبدء التشغيل البارد هيكل الاستدلال والدقة إلى 39.8%.
وفر التعلم التعزيزي أكبر مكسب، حيث وصل إلى 60.4%، مما يسلط الضوء على أهمية تحسين كل من التنبؤ وجودة الاستدلال.
التقييم البشري: في اختبارات AB مزدوجة التعمية، فُضل نموذج RetroDFM-R على الملصقات الأرضية (الحقيقية) (66% تفضيل/تساوي) وعلى النموذج المتطور EditRetro. قيم الخبراء مبرراته بأعلى الدرجات في الصحة الكيميائية (4.21/5) والأمانة في الاستنتاج (4.18/5) مقارنة بالنماذج اللغوية الأخرى القائمة على الاستدلال.
الحالات المعقدة: أظهر النموذج أداءً فائقاً في التفاعلات التي تشمل الكيرالية (chirality)، وتكوين الحلقات، وفتح الحلقات. نجح في إعادة بناء مسارات متعددة الخطوات لأدوية حقيقية (Osimertinib، Salmeterol) ومواد وظيفية (مشتقات STING synergists، وGL-B437) دون تعرض مسبق لهذه الجزيئات المحددة أثناء التدريب.
الأهمية والادعاءات
يزعم البحث أن RetroDFM-R يعالج عائقاً حاسماً في التخليق المدعوم بالذكاء الاصطناعي: غياب الشفافية والثقة في التنبؤات "الصندوق الأسود". ومن خلال الجمع بين الدقة المحسنة والمبررات الشفافة خطوة بخطوة، يسد النموذج الفجوة بين النماذج اللغوية الكبيرة للأغراض العامة وبين الاستدلال الكيميائي المتخصص.
يؤكد المؤلفون أن RetroDFM-R لا يتنبأ بالمتفاعلات فحسب، بل يحاكي سير العمل الاستنباطي لخبراء الكيمياء: تحليل البنية الجزيئية، تحديد مواقع الفصل الاستراتيجية، واقتراح كواشف وظروف محددة. يسمح هذا الاستدلال الصريح للكيميائيين بفحص صلاحية المسارات المقترحة، مما يجعل النظام أكثر ملاءمة للنشر العملي في التخطيط التخليقي الآلي. يوضح العمل أن دمج التكيف مع المجال مع تحسين الاستدلال المهيكل يمكن أن ينتج نماذج أكثر دقة وقابلية للتفسير من النهج السابقة المتخصصة أو العامة.