🤖 machine learning

Predicting Post Virality with Temporal Cross-Attention over Trend Signals

تقدم هذه الورقة البحثية ViralityNet، وهي بنية مبتكرة تعزز التنبؤ بانتشار المنشورات على Reddit من خلال دمج سمات المنشور الداخلية مع إشارات زمنية خارجية مستمدة من طفرات مشاهدات صفحات ويكيبيديا عبر آلية انتباه تقاطعي زمني، مما يثبت أن دمج ديناميكيات الانتباه في العالم الحقيقي يتفوق بشكل كبير على النماذج المرجعية التي تعتمد على النصوص فقط.

المؤلفون الأصليون: Sarvagya Somvanshi, Mohan Xu, Rakhi Chadalavada, Nathan Canera

نُشر 2026-05-06

📖 4 دقيقة قراءة☕ قراءة في استراحة قهوة

CC BY 4.0

المؤلفون الأصليون: Sarvagya Somvanshi, Mohan Xu, Rakhi Chadalavada, Nathan Canera

البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). ✨ هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل

تخيل أنك تحاول التخمين أي من منشورات أصدقائك على وسائل التواصل الاجتماعي سيصبح "تريند" (Viral)—أي يحصل على آلاف الإعجابات والتعليقات—مقابل المنشورات التي سيتم تجاهلها.

تحاول معظم برامج الكمبيوتر حل هذه المشكلة من خلال النظر فقط إلى المنشور نفسه. فهي تقرأ العنوان، وتعد الكلمات، وتتحقق مما إذا كان قد نُشر يوم الجمعة، وترى عدد متابعي المستخدم. الأمر يشبه محاولة التنبؤ بما إذا كانت أغنية ستكون ناجحة بمجرد قراءة كلماتها، دون سماعها في الراديو أو معرفة ما يغنيه الناس حالياً.

تجادل هذه الورقة البحثية بأن هذا النهج يفتقد جزءاً ضخماً من اللغز: التوقيت والسياق. فقد يكون منشور حول موضوع معين مملاً في يوم ثلاثاء عادي، ولكن إذا أصبح هذا الموضوع فجأة هو الخبر الأهم في العالم، فقد ينفجر هذا المنشور في شعبيته.

إليك كيف قام المؤلفان، سارفاجيا سومفانشي وموهان شو، ببناء نظام جديد يسمى ViralityNet لإصلاح ذلك، مشروحاً ببساطة:

١. "تقرير الطقس" للإنترنت

أدرك المؤلفان أنه لكي تتنبأ بمدى انتشار المنشور (Virality)، عليك أن تعرف ما هو "المزاج العام" في تلك اللحظة تحديداً. وللقيام بذلك، استخدما مشاهدات صفحات ويكيبيديا كـ "تقرير طقس" للاهتمام العالمي.

التشبيه: تخيل أنك صياد سمك. يمكنك النظر إلى قاربك (المنشور) ومعدات الصيد الخاصة بك (النص)، ولكن لكي تصطاد سمكة كبيرة، تحتاج إلى معرفة أين توجد الأسماك الآن.
الطريقة: تتبعا المقالات التي شهدت في ويكيبيديا طفرة مفاجئة وهائلة في المشاهدات كل يوم. إذا كان مقال عن "الذكاء الاصطناعي" يحظى فجاً بـ ١٠٠,٠٠٠ مشاهدة إضافية عن المعتاد، فهذا يعني أن العالم كله مهووس بالذكاء الاصطناعي فجأة. يستخدم ViralityNet هذه البيانات ليرى ما إذا كان منشور "ريديت" (Reddit) "يركب موجة" الاهتمام العام الحالي.

٢. "القارئ الخارق" (البنية الهيكلية)

لقد بنيا شبكة عصبية (نوع من أنواع الذكاء الاصطناعي) تسمى ViralityNet. فكر فيها كقارئ خارق ينظر إلى منشور "ريديت" من خلال أربع عدسات مختلفة في نفس الوقت:
١. العنوان: ماذا يقول العنوان؟
٢. المتن: ما هي القصة الفعلية؟
٣. الهيكل: متى تم النشر؟ وكم طول النص؟
٤. المجتمع: في أي "نادي" (Subreddit) يتواجد المنشور؟ (على سبيل المثال، يتم تقييم منشور في نادي مالي بشكل مختلف عن منشور في نادي ألعاب).

السر المكنون:
عادةً، يتم دمج هذه العدسات الأربع معاً. لكن ViralityNet يمتلك ميزة "الانتباه المتقاطع" (Cross-Attention) الخاصة.

التشبيه: تخيل أنك تقرأ مقالاً إخبارياً. بينما تقرأ، تلتفت باستمرار لتنظر من النافذة لترى ما يحدث في الشارع. إذا رأيت موكباً، فإنك تعطي اهتماماً أكبر للجزء من المقال الذي يتحدث عن الموكب.
كيف يعمل: يقرأ ViralityNet منشور "ريديت"، ثم ينظر فوراً إلى "نافذة منزلقة" تضم أفضل ٥١٢ موضوعاً رائجاً على ويكيبيديا من الأسبوع الماضي. ويسأل نفسه: "هل يتوافق هذا المنشور مع ما يتحدث عنه العالم حالياً؟" إذا كانت الإجابة نعم، فإنه يعزز التنبؤ بأن المنشور سينتشر بشكل واسع.

٣. كيف قاسوا النجاح

اختبروا هذا النظام على ما يقرب من ٨٠٠,٠٠٠ منشور من "ريديت" من ١٠ مجتمعات مختلفة (مثل r/technology، r/politics، و r/gaming) على مدار ثلاث سنوات.

الهدف: التنبؤ بما إذا كان المنشور سيكون ضمن أعلى ١٠٪ من التفاعل لمجتمعه الخاص.
النتيجة:
- الطريقة القديمة (النظر فقط إلى النص) كانت جيدة، لكنها ليست رائعة.
- الطريقة الجديدة (ViralityNet)، التي تضمنت "تقرير طقس ويكيبيديا"، كانت أفضل باستمرار.
- لقد حسنت الدقة بهامش صغير ولكنه مؤثر. تعلم النظام أن منشوراً عن انهيار سوق الأسهم من المرجح جداً أن ينتشر إذا كان الناس يبحثون حالياً عن ذلك السهم في ويكيبيديا.

٤. تفاصيل هامة

تسلط الورقة الضوء على بعض التفاصيل المثيرة للاهتمام:

السياق مهم: عمل النظام بشكل أفضل في المجتمعات التي تهم فيها الأمور الخارجية (مثل r/technology أو r/stocks). بينما واجه صعوبة أكبر في المجتمعات التي تحركها النكات الداخلية أو ثقافة خاصة (مثل r/gaming)، حيث يقل تأثير "الطقس العالمي" مقابل "الأجواء المحلية".
الوقت عامل أساسي: تعلم النظام أن معايير التفاعل تتغير من سنة إلى أخرى. فالمنشور الذي يحصل على ١,٠٠٠ صوت تأييد (Upvote) في عام ٢٠٢١ قد يعتبر "تريند"، بينما في عام ٢٠٢٣، قد تحتاج إلى ٥,٠٠٠ صوت. لقد تعلم النموذج كيفية التكيف مع هذا التغيير.
إنه ليس سحراً: النظام ليس مثالياً. فأحياناً يُخدع؛ على سبيل المثال، إذا كان للمنشور عنوان يبدو وكأنه موضوع رائج ولكنه في الواقع مجرد نكتة أو محتوى منخفض الجودة، فقد يبالغ النظام في توقع نجاحه. وعلى العكس، قد يفوته أحياناً منشورات تنتشر بسبب الفكاهة المحضة أو الغضب، وهو أمر لا علاقة له باتجاهات الأخبار الحالية.

الخلا الخلاصة

الرسالة الأساسية بسيطة: المحتوى لا ينتشر في فراغ.

للتنبؤ بما سيشتعل، لا يمكنك فقط النظر إلى الخشب (المنشور)؛ بل يجب أن تنظر إلى الرياح (الاهتمام العام الحالي). ومن خلال الجمع بين نص المنشور وبيانات فورية حول ما يقرأه الناس ويفكرون فيه في العالم حالياً، أظهر المؤلفون أنه يمكننا تقديم تنبؤات أفضل بكثير بشأن ما سيصبح شائعاً عبر الإنترنت.

ملخص تقني: التنبؤ بالانتشار الفيروسي عبر الانتباه المتقاطع الزمني فوق إشارات الاتجاهات

بيان المشكلة

تعتمد النماذج الحالية للتنبؤ بالانتشار الفيروسي (virality) عبر وسائل التواصل الاجتماعي بشكل أساسي على السمات النصية والهيكلية الثابتة (مثل عدد المتابعين، وقت النشر، المركزية الشبكية، ودلالات النص). ويتمثل أحد القيود الجوهرية لهذه النهج في "العمى الزمني": فهي تفشل في مراعاة الطبيعة الديناميكية للاهتمام العام. فقد يمتلك منشور حول موضوع معين إمكانات انتشار متفاوتة تماماً اعتماداً على ما إذا كان ذلك الموضوع يشهد طفرة حالية في الاهتمام العام أو كان خاملاً. وتفترض الورقة البحثية أن تجاهل هذه الديناميكيات الزمنية يؤدي إلى توصيف خاطئ لمحركات التفاعل وتقليل دقة التنبؤ. وتتمثل المشكلة الجوهرية التي تعالجها الدراسة في ما إذا كانت إشارات الاهتمام الخارجية الواقعية يمكن أن تحسن التنبؤ بالانتشار الفيروسي بما يتجاوز ما يكشفه نص المنشور وحده.

المنهجية

البيانات والتوسيم

تستخدم الدراسة مجموعة بيانات تضم 788,873 منشوراً من Reddit من 10 مجتمعات (subreddits) متنوعة (تشمل الأخبار، التكنولوجيا، التمويل، العلوم، والترفيه) تم جمعها بين يناير 2021 وديسمبر 2023.

تعريف الانتشار الفيروسي: يتم تعريف الانتشار الفيروسي عبر استراتيجية توسيم ثنائية مصنفة حسب المجتمع (subreddit) لمراعاة الاختلافات في الحجم بين المجتمعات. يُوسم المنشور بأنه فيروسي ( $y=1$ ) إذا تجاوزت درجة التفاعل الخاصة به $v$ المئين التسعين لتوزيع مجتمعه الخاص، وَتجاوزت درجته الخام $s$ حداً أدنى قدره 100.
درجة التفاعل: $v = s + 0.3 \cdot c$ ، حيث $s$ هي درجة المنشور (الأصوات الإيجابية ناقص الأصوات السلبية) و $c$ هو عدد التعليقات. يعكس الوزن $\beta=0.3$ الجهد الأعلى للتعليق مقارنة بالتصويت.
الإشارات الخارجية: يدمج النموذج بيانات مشاهدات صفحات ويكيبيديا كوكيل للاهتمام العام الجماعي. يتم تحديد مصطلحات "الطفرة" (Spike terms) يومياً بناءً على نسبة المشاهدات الحالية إلى مشاهدات اليوم السابق ( $\rho \ge 2.0$ ) والزيادات المطلقة في المشاهدات. يتم الاحتفاظ بأفضل 512 مصطلحاً رائجاً لكل يوم، مع تصفيتها من الضجيج (مثل الصفحات الدائمة/Evergreen)، وتشفيرها.

البنية الهندسية: ViralityNet

ViralityNet هي بنية انتباه متقاطع (cross-attention) مصممة لدمج تمثيلات المنشور الداخلية مع إشارات الاتجاهات الزمنية الخارجية.

مشفر المنشور (Post Encoder): يولد تمثيلاً للمنشور بـ 256 بُعداً ( $p$ ) عبر دمج أربعة مسارات متوازية:
- العنوان والمتن: يتم تشفيرهما باستخدام all-mptext-base-v2 (768 بُعداً). يتم تقسيم متن النص إلى أجزاء (400 حرف)، ثم تطبيق المتوسط الحسابي (mean-pooling)، وإعادة المعايرة. ويتعامل تضمين الحشو المتعلم (learned padding embedding) مع المنشورات التي لا تحتوي على متن.
- السمات الهيكلية: 9 سمات (ساعة النشر، يوم الأسبوع، الطول والعمر باللوغاريتم الطبيعي، حجم المجتمع، إلخ) يتم إسقاطها إلى 64 بُعداً.
- تضمين المجتمع (Subreddit Embedding): تضمين متعلم بـ 32 بُعداً خاص بالمجتمع المحدد.
- الدمج: يتم دمج هذه المسارات (1632 بُعداً)، وإسقاطها إلى 256 بُعداً، ودمجها مع تضمين السنة ( $e_y$ ) عبر اتصال متبقي (residual connection) لمراعاة التحولات في معايير التفاعل من سنة إلى أخرى.
كتلة الانتباه المتقاطع (Cross-Attention Block):
- مصفوفة الاتجاهات ( $T_d$ ): يتم إنشاء نافذة منزلقة لمدة 7 أيام لأفضل 512 مصطلح طفرة من ويكيبيديا لكل يوم $d$ . يتم تشفير هذه المصطلحات في مصفوفة $512 \times 768$ .
- الآلية: يعمل تشفير المنشور $p$ كاستعلام (Query - $Q$ ) واحد مقابل مفاتيح وقيم (Keys and Values - $K, V$ ) مصفوفة الاتجاهات. تسمح آلية الانتباه متعدد الرؤوس (MHA) ذات الـ 4 رؤوس للموديل بالانتباه انتقائياً إلى المجموعة الفرعية من مواضيع الاهتمام العام الحديثة الأكثر توافقاً دلالياً مع محتوى المنشور.
- المخرج: يتضمن متجه السياق $c$ الناتج (256 بُعداً) مدى التوافق بين المنشور والاتجاهات الحالية.
المصنف (Classifier): يتم تمرير دمج تشفير المنشور ومتجه السياق ( $[p; c]$ ) عبر شبكة عصبية متعددة الطبقات (MLP) ذات طبقتين مخفيتين لإنتاج لوجيت (logit) الانتشار الفيروسي. يتم تدريب النموذج باستخدام فقد التركيز (Focal Loss) ( $\alpha=0.25, \gamma=2.0$ ) لمعالجة عدم التوازن الشديد في الفئات (معدل إيجابي 9.7%).

المساهمات الرئيسية

إشارة محاذاة الاتجاه: تقديم إشارة محاذاة اتجاه على مستوى المنشور مستمدة من طفرات مشاهدات ويكيبيديا، والتي ثبتت أهميتها الإحصائية على مستوى المنشور الفردي.
بنية ViralityNet: بنية انتباه متقاطع مبتكرة تعمل على تكييف تمثيلات المنشور بناءً على مصفوفات الاتجاهات اليومية المنزلقة، مدعومة بتضمينات السنة والمجتمع المتعلمة.
دراسة الاستئصال المنهجي (Systematic Ablation): دراسة تفصل مساهمات السياق الزمني (تضمينات السنة)، والاتجاهات الخارجية (الانتباه المتقاطع)، ومزيجهما معاً.

النتائج

تم تقييم النموذج على مجموعة اختبار محجوزة تضم 118,331 منشوراً (11,459 منها فيروسي). المقياس الأساسي هو AUC-PR، مع ذكر AUC-ROC و F1 عند عتبة ثابتة قدرها 0.31 (المُحسّنة لـ F1).

مكاسب الأداء: حقق نموذج ViralityNet الكامل AUC-PR قدره 0.3584 و AUC-ROC قدره 0.8355.
المقارنة مع النماذج المرجعية (Baselines):
- النص فقط: AUC-PR 0.3431.
- النص + السنة: AUC-PR 0.3554 (+0.012 تحسن).
- النص + الاتجاهات: AUC-PR 0.3476 (+0.005 تحسن).
- النموذج الكامل: AUC-PR 0.3584 (+0.015 تحسن عن "النص فقط").
تحليل المكونات: ساهم تضمين السنة بأكبر مكسب ملحوظ (+0.012)، ويُعزى ذلك إلى تغير معايير التفاعل عبر الفترة 2021-2023. وفر الانتباه المتقاطع للاتجاهات مكسباً تكميلياً أصغر ولكنه ثابت (+0.003 فوق خط الأساس "النص + السنة").
تباين المجتمعات: تباين الأداء حسب المجتمع. المجتمعات ذات التداخل الموضوعي القوي مع اتجاهات ويكيبيديا (مثل r/technology و r/stocks) شهدت أعلى AUC-PR (>0.39). أما المجتمعات المدفوعة بالثقافة الداخلية (مثل r/gaming و r/wallstreetbets) فكانت أكثر صعوبة في التنبؤ باستخدام الإشارات الخارجية.
حساسية العتبة: بسبب عدم التوازن في الفئات، أدت العتبة الافتراضية 0.5 إلى استدعاء (recall) منخفض (2.7%). أدى خفض العتبة إلى 0.31 إلى تحسين الاستدعاء إلى 53.0% بدقة (precision) بلغت 31.9%، وهو ما يعد مناسباً لإظهار المنشورات المرشحة للانتشار الفيروسي للمراجعة.

الأهمية والادعاءات

تدعي الورقة أن دمج إشارات الانتباه الخارجية يؤدي إلى تحسينات ملموسة مقارنة بالنماذج المرجعية القائمة على النص فقط، مما يؤكد فرضية أن الانتشار الفيروسي لا يتحدد بالمحتوى وحده بل بمحاذاته مع الديناميكيات الواقعية.

دليل المحاذاة: تشير النتائج إلى أن المنشورات المتوافقة دلالياً مع طفرات الاهتمام العام المعاصرة هي أكثر عرضة للانتشار الفيروسي بشكل ملموس.
التكامل: تعمل الإشارات الخارجية (اتجاهات ويكيبيديا) كمكمل مفيد للميزات داخل المنصة، خاصة في المجتمعات التي يقود فيها الانتشار الفيروسي أحداث خارجية بدلاً من الثقافة الداخلية.
تطور متواضع لكن مستمر: وصف المؤلفون المكاسب بأنها "متواضعة ولكن مستمرة"، مشيرين إلى أنه بينما ليست إشارة الاتجاه عاملاً مهيمناً مقارنة بالسياق الزمني (السنة)، إلا أنها تدفع النموذج الكامل للوصول إلى أعلى أداء له.
القيود: أوضح المؤلفون صراحةً أن النموذج يقيس المحاذاة المعاصرة، وليس التنبؤ المستقبلي. كما أقروا بوجود قيود تتعلق بالطبيعة الثابتة لبيانات التفاعل (نقص السرعة المبكرة)، والتصميم التجريبي لخط المعالجة (pipeline)، ومشكلات التعميم المحتملة بسبب اختيار مجتمعات محددة. كما سلطوا الضوء على مخاوف التأثير الأوسع، حيث يمكن نظرياً إساءة استخدام مثل هذه القدرات التنبؤية لتحسين انتشار المحتوى المستقطب أو الرسائل المزعجة (spam).