Benchmarking Data Augmentation Strategies for Drug--Target Interaction Prediction under Class Imbalance: A Controlled Comparative Study
تقدم هذه الدراسة تحليلاً معيارياً منضبطاً لأربع عشرة استراتيجية لتعزيز البيانات للتنبؤ بالتفاعل بين العقار والهدف في ظل عدم توازن الفئات، كاشفةً أن التنظيف المدرك للحدود والتعزيز المدرك للبنية الكامنة يتفوقان على الإفراط في أخذ العينات في تحسين مقياس F1-score ومقياس PR-AUC عبر أربع عائلات بروتينية.
في المكتبة الصامتة والشاسعة لعلم الأحياء، يوجد سؤال جوهري يحرك الطب الحديث: أي المركبات الكيميائية ستتفاعل مع أي بروتينات لتغيير مسار مرض ما؟ هذا هو مجال التفاعل بين الدواء والهدف، وهو مجال يحاول فيه العلماء رسم خريطة للمصافحة غير المرئية بين دواء محتمل والآلية البيولوجية التي يُفترض به إصلاحها. لا يكمن التحدي في نقص البيانات، بل في نقص التوازن. ففي العالم الحقيقي، التفاعلات المؤكدة نادرة، مثل العثور على مفاتيح قليلة محددة تناسب قفلاً واحداً من بين الملايين من المفاتيح غير المجدية. الغالبية العظمى من الاقترانات الممكنة إما مجهولة أو معروف بأنها غير وظيفية. هذا الاختلال الشديد يخلق نقطة عمياء للنماذج الحاسوبية، التي تميل إلى تجاهل المطابقات النادرة والمهمة لصالح المطابقات الشائعة والآمنة. ولحل هذه المعضلة، حاول الباحثون طويلاً تعليم هذه النماذج عبر عرض المزيد من الأمثلة على المطابقات النادرة، من خلال إنشاء نقاط بيانات جديدة اصطناعياً لملء الفجوات. لكن يبقى سؤال حاسم: هل يساعد اختلاق البيانات حقاً، أم أنه يربك النموذج فحسب؟
وضع فريق من الباحثين في جامعة تيلوك (TELUQ) ومركز CHUM للأبحاث في مونتريال نصب أعينهم الإجابة على هذا السؤال من خلال تجربة منضبطة ومحكومة. لم يكتفوا بمجرد اقتراح طريقة جديدة، بل بنوا ساحة اختبار لمقارنة أربعة عشر استراتيجية مختلفة لإنشاء بيانات اصطناعية. وتراوحت هذه الاستراتيجيات بين النسخ واللصق البسيط للأمثلة الموجودة، وبين النماذج التوليدية المعقدة التي تحاول ابتكار أزواج جديدة تماماً ومعقولة من الدواء والبروتين من العدم. طبق الفريق هذه الأساليب على أربع عائلات متميزة من البروتينات — الإنزيمات، والمستقبلات المقترنة بالبروتين ج (GPCRs)، والقنوات الأيونية، والمستقبلات النووية — باستخدام مجموعة بيانات معيارية تعمل كلغة مشتركة في هذا المجال. وقد ضمنوا اختبار كل طريقة تحت نفس الظروف تماماً، باستخدام نفس تقسيمات البيانات ونفس محرك التنبؤ النهائي، لضمان أن تكون النتائج مقارنة عادلة بدلاً من كونها مجرد مجموعة من الحكايات المنعزلة.
كانت النتائج دقيقة ومتباينة بشكل مفاجئ. فقد اكتشف الباحثون أنه لا توجد طريقة واحدة "مثلى" لتعزيز البيانات تصلح لكل حالة. وفي الواقع، لم تتفوق الطرق الأكثر تطوراً وتقنية باستمرار على التقنيات الأقدم والأبسط. فبالنسبات لبعض عائلات البروتينات، جاءت أفضل النتائج من طرق أساسية تكتفي بتعديل عدد الأمثلة أو تنقية الحواف حيث تتداخل فئات البيانات المختلفة. وفي حالات أخرى، قدمت النماذج التوليدية الأكثر تعقيداً، والتي تستخدم رياضيات متقدمة لتعلم البنية الأساسية للبيانات وابتكار عينات جديدة، تحسينات طفيفة في مقاييس معينة، لكنها لم تضمن تنبؤاً أفضل بشكل عام. وكان أحد أهم الاكتشافات هو أن جودة التمثيل الأساسي للبيانات كانت أكثر أهمية من الطريقة المستخدمة لتوليد عينات جديدة؛ فإذا كان الأسلوب الأولي الذي فهم به الحاسوب الدواء والبروتين ضعيفاً، فلن يتمكن أي قدر من البيانات الاصطناعية من إصلاح التنبؤ النهائي.
كما سلطت الدراسة الضوء على مقايضة حاسمة في كيفية تقييم هذه النماذج. فعندما أجبر الباحثون بيانات التدريب على أن تكون متوازنة تماماً، مع أعداد متساوية من الأزواج المتفاعلة وغير المتفاعلة، أصبحت النماذج غالباً أفضل في العثور على التفاعلات النادرة ولكنها أسوأ في تجنب الإنذارات الكاذبة. وعلى العكس من ذلك، فإن ترك البيانات في حالتها الطبيعية غير المتوازنة أدى أحياناً إلى نتائج أكثر موثوقية بشكل عام. ووجد الفريق أنه بالنسبة لبعض عائلات البروتينات، تم تحقيق أفضل أداء ليس من خلال الذكاء الاصطناعي التوليدي الأكثر تعقيداً، بل من خلال نهج متوازن يحترم البنية الطبيعية للبيانات. وخلصوا إلى أن إضافة البيانات الاصطناعية ليست حلاً سحرياً يحسن عملية اكتشاف الأدوية تلقائياً. بدلاً من ذلك، يعتمد نجاح هذه التقنيات بشكل كبير على السياق البيولوجي المحدد، وجودة التمثيل الأولي للبيانات، والهدف المحدد من التنبؤ. ويعمل هذا العمل كإعادة تقييم واقعية ضرورية، تشير إلى أنه في السعي للتنبؤ بكيفية عمل الأدوية، غالباً ما تؤدي التجارب الدقيقة والمحكومة إلى رؤى أفضل من مجرد توليد المزيد من البيانات.
ملخص تقني: تقييم استراتيجيات تعزيز البيانات للتنبؤ بالتفاعل بين العقار والهدف في ظل عدم توازن الفئات
1. بيان المشكلة
يعد التنبؤ بالتفاعل بين العقار والهدف (DTI) مكونًا حاسمًا في اكتشاف الأدوية حسابيًا، ومع ذلك فإنه يواجه تحديات كبيرة بسبب عدم التوازن الشديد في الفئات ومصفوفات التفاعل المتفرقة. في مجموعات البيانات المرجعية والواقعية، تمثل التفاعلات الإيجابية المؤكدة جزءًا صغيرًا فقط من أزواج (عقار-هدف) المحتملة. النماذج التي يتم تدريبها في ظل هذه الظروف غالبًا ما تنحاز نحو الفئة الأكثر انتشارًا (عدم التفاعل)، مما يؤدي إلى محدودية الحساسية تجاه التفاعلات الحقيقية وتقديرات أداء مضللة.
بينما يُستخدم تعزيز البيانات بشكل متكرر لمعالجة التشتت وعدم التوازن، إلا أن الأدبيات تفتقر إلى إطار تقييم موحد. تستخدم الدراسات الحالية استراتيجيات متباهمة (مثل إعادة أخذ العينات، النماذج التوليدية، وتحليل المصفوفات) وبروتوكولات تقييم غير متسقة (مثل تباين تقسيم البيانات، التحكم في التسرب، وأخذ العينات السلبية)، مما يحد من إمكانية المقارنة ويحجب مدى قوة طرق معينة.
2. المنهجية
تقدم هذه الدراسة تحليلًا معياريًا محكمًا لـ 14 طريقة متميزة لتعزيز البيانات، وإعادة أخذ العينات، والتصفية، والنماذج التوليدية. أُجري التقييم عبر أربع عائلات بروتينية من مرجع يمانيشي (Yamanichi benchmark): الإنزيمات (Enzyme)، والمستقبلات المقترنة بالبروتين ج (GPCR)، والقنوات الأيونية (Ion Channel)، والمستقبلات النووية (Nuclear Receptor).
خط العمل التجريبي
استخدمت الدراسة خط عمل تجريبي موحدًا مصممًا لإزالة المتغيرات المربكة:
تقسيم البيانات: تم استخدام التحقق المتقاطع الخارجي الطبقي ذو الخمس طيات (five-fold outer cross-validation) الثابت. وضمن كل طية تدريب خارجية، حدد تقسيم داخلي طبقي بنسبة 80/20 مجموعات فرعية للتدريب والتحقق.
التحكم في التسرب: تم ضبط نماذج تحليل المصفوفات باستخدام فقط تسميات التدريب الداخلي. تم حجب تسميات التحقق والاختبار الخارجي من فقدان تحليل المصفوفات واستبعادها من إجراءات التعزيز.
تعلم التمثيل: تم استخدام ثلاثة هياكل خلفية لتحليل المصفوفات لتوليد التمثيلات الكامنة:
تحليل المصفوفة التعاونية متعدد التشابهات (MSCMF): يدمج مصفوفات تشابه العقاقير والأهداف عبر تنظيم لابلاس-الرسم البياني (graph-Laplacian regularization).
تحليل المصفوفة غير السالبة (NNMF): يقيد العوامل الكامنة لتكون غير سالبة.
**تحليل المصفوفة اللوجستي (LMF): يصيغ احتمالية التفاعل الثنائي مباشرة.
تم تثبيت الأبعاد الكامنة عند k=50. تم تمثيل أزواج العقار-الهدف عن طريق دمج تمثيلات العقار والهدف ذات الـ 50 بُعدًا (إجمالي 100 بُعد).
استراتيجيات التعزيز: طُبقت 14 طريقة حصريًا على مجموعة التدريب الداخلية لتعديل توزيع الفئات إلى نسب مستهدفة هي 50/50، و80/20، و85/15، و90/10 (عدم التفاعل/التفاعل). شملت الطرق:
إعادة أخذ العينات/التنظيف: أخذ العينات العشوائي الزائد (ROS)، أخذ العينات العشوائي الناقص (RUS)، روابط توميك (Tomek Links)، وCNN + روابط توميك.
الإفراط الاصطناعي في أخذ العينات: سموت (SMOTE)، سموت الأساسي (Basic SMOTE)، سموت + روابط توميك، ADASYN، k-Means SMOTE، وBorderline-SMOTE.
النماذج التوليدية: المشفرات التلقائية التباينية (VAE)، وشبكات الخصومة التوليدية من نوع وايسرشتاين مع عقوبة التدرج (WGAN-GP)، ونماذج الانتشار الكامنة (Latent Diffusion Models).
التصنيف اللاحق: تم تدريب بنية شبكة عصبية عميقة (DNN) مشتركة (512–256–128 وحدة مخفية مع ReLU) على البيانات المعززة.
التقييم: تم تشغيل كل تكوين 10 مرات مع تدريب DNN عشوائي. شملت المقاييس الدقة (Accuracy)، والضبط (Precision)، والاستدعاء (Recall)، ومقياس F1، وROC-AUC، وPR-AUC، والتي حُسبت من التنبؤات المجمعة خارج الطية (out-of-fold).
3. المساهمات الرئيسية
معيار موحد: توفر الدراسة مقارنة محكومة لـ 14 استراتيجية تعزيز عبر أربع عائلات بروتينية باستخدام خط عمل تجريبي موحد وآمن من التسرب.
النماذج التوليدية مقابل الكلاسيكية: تقيم الدراسة النهج التوليدية الحديثة (WGAN-GP، VAE، Latent Diffusion) مقابل تقنيات إعادة أخذ العينات وتنظيف الحدود الكلاسيكية ضمن نفس الإطار.
الاعتماد على التمثيل: تبحث الدراسة صراحة في كيفية تفاعل اختيار التمثيل الكامن (MSCMF، NNMF، LMF) مع التعزيز التوليدي.
حساسية النسبة: تحلل تأثير تغير توزيع الفئات المستهدفة (من 50/50 إلى 90/10) على أداء النموذج.
4. النتائج
تشير النتائج إلى أنه لا توجد طريقة تعزيز واحدة أو نسبة فئة واحدة تهيمن عبر جميع العائلات البروتينية أو مقاييس التقييم.
تباين الأداء:
الإنزيمات والقنوات الأيونية: أظهرت هذه العائلات أداءً أساسيًا مرتفعًا. كان تكوين MSCMF بدون تعزيز تنافسيًا، حيث اقترب غالبًا أو طابق أفضل النتائج المعززة. بالنسبة للإنزيمات، تم تحقيق أعلى درجة F1 (0.7824) بواسطة k-Means SMOTE عند نسبة 90/10.
المستقبلات المقترنة بالبروتين ج (GPCR) والمستقبلات النووية: أظهرت هذه العائلات تباينًا أكبر. بالنسبة لـ GPCR، حققت روابط توميك (مع تعديل النسبة) عند 90/10 أعلى درجة F1 (0.5833). وبالنسبة للمستقبلات النووية، حقق أخذ العينات العشوائي الناقص عند 90/10 أعلى درجة F1 (0.3705).
النماذج التوليدية: لم تتفوق الطرق التوليدية (WGAN-GP، VAE، Latent Diffusion) باستمرار على الطرق الكلاسيكية من حيث درجة F1.
حقق VAE أعلى PR-AUC لـ GPCR.
حقق الانتشار الكامن (Latent Diffusion) أعلى ROC-AUC للمستقبلات النووية.
ومع ذلك، فإن المكاسب في مقاييس الترتيب (ROC-AUC، PR-AUC) لم تترجم بالضرورة إلى درجات F1 أعلى.
تأثير التمثيل الكامن: أثر اختيار الهيكل الخلفي بشكل كبير على الأداء التوليدي. حقق MSCMF باستمرار درجات F1 أعلى من NNMF أو LMF عند استخدامه مع WGAN-GP وVAE، مما يشير إلى أن التعزيز التوليدي لا يمكنه تعويض التمثيلات الأساسية الأضعف.
تأثير نسبة الفئات: أنتجت إعدادات 80/20 و90/10 في كثير من الأحيان درجات F1 أعلى من إعداد 50/50 المتوازن. مال أخذ العينات الزائد القياسي إلى تضخيم الاستدعاء (Recall) على حساب الضبط (Precision)، بينما أدى تنظيف الحدود (مثل روابط توميك) إلى تحسين درجات F1 في عدة إعدادات.
5. الأهمية والادعاءات
تزعم الورقة أن أداء التعزيز مرتبط ارتباطًا وثيقًا بالتمثيل الكامن، ونسبة الفئة، ومقياس التقييم.
لا يوجد حل عالمي: تخلص الدراسة إلى أنه لا توجد استراتيجية تعزيز واحدة "تناسب الجميع" للتنبؤ بـ DTI. تعتمد فعالية أي طريقة بشكل كبير على عائلة البروتين المحددة ومقياس الأداء المختار.
تنافسية الخط المرجعي: يظل تكوين MSCMF بدون تعزيز تنافسيًا للغاية، خاصة في عائلات الإنزيمات والقنوات الأيونية. يشير هذا إلى أن تعديل توزيع الفئات لا يضمن تلقائيًا تحسين أداء التصنيف، وأن جودة التمثيل الأساسي هي الأمر الأهم.
بروتوكول التقييم: تؤكد الدراسة على أهمية بروتوكولات التقييم المحكومة (التقسيمات الثابتة، التحكم في التسرب) لضمان إرجاع الاختلافات الملحوظة إلى استراتيجية التعزيز وليس إلى العوامل التجريبية.
ادعاءات متواضعة حول الذكاء الاصطناعي التوليدي: مع الإقرار بالإمكانات النظرية للنماذج التوليدية، يذكر المؤلفون بتواضع أن زيادة تعقيد النماذج التوليدية لا تؤدي، في حد ذاتها، إلى تحسينات ثابتة فوق طرق إعادة أخذ العينات أو الاضطراب البسيطة لهذه التمثيلات الكامنة الخاصة بـ DTI.
باختصار، تدعو الدراسة إلى تقييم استراتيجيات التعزيز جنبًا إلى جنب مع طريقة تعلم التمثيل وتوزيع الفئات، بدلاً من معاملة التعزيز كخطوة معالجة مسبقة مستقلة.