Analyzing Middle School Students' Dialogue and Behaviors during Collaborative AI Chatbot Development Using Ordered Network Analysis
تستخدم هذه الدراسة تحليل الشبكة المرتبة للكشف عن أن تطوير طلاب المدارس المتوسطة لروبوتات الدردشة الاصطناعية التعاونية يتميز بتسلسلات متكاملة من الشرح والاختبار والتحسين، والتي ترتبط إيجابياً بكل من جودة مخرجات روبوت الدردشة الأعلى ونتائج معرفة الذكاء الاصطناعي الأقوى.
المؤلفون الأصليون:Shan Zhang, Andres Felipe Zambrano, Xiaoyi Tian, Yukyeong Song, Anthony F. Botelho, Kristy Elizabeth Boyer, Maya Israel, Shiyan Jiang
المؤلفون الأصليون: Shan Zhang, Andres Felipe Zambrano, Xiaoyi Tian, Yukyeong Song, Anthony F. Botelho, Kristy Elizabeth Boyer, Maya Israel, Shiyan Jiang
تخيل أنك تشاهد مجموعة من الأصدقاء يحاولون بناء روبوت يمكنه التحدث. إنهم لا يبرمجون في صمت فحسب؛ بل يتحدثون، ويتجادلون، ويختبرون، ويصلحون الأشياء معاً. هذا هو عالم التعلم التعاوني، حيث يحدث السحر ليس فقط في المنتج النهائي، بل في المحادثة المتبادلة والمضطربة بين البنائين. في هذا الركن المحدد من العلم، يبحث الباحثون في الثقافة المتعلقة بالذكاء الاصطناعي—تعليم الأطفال كيفية فهم واستخدام وحتى ابتكار الذكاء الاصطناعي. الأمر يشبه تعليم شخص ما ليس فقط كيفية قيادة السيارة، بل كيف يعمل المحرك حتى يتمكن من بناء سيارته الخاصة. السؤال الكبير هنا هو: عندما يعمل الطلاب معاً لبناء روبوت دردشة (chatbot) يعتمد على الذكاء الاصطناعي، كيف يبدو شكل حوارهم؟ هل تغير الطريقة التي يتحدثون بها ويعبثون بها في الكود فعلياً مدى جودة تعلمهم، أم أن المهم فقط هو إذا حصلوا على الإجابة الصحيحة في النهاية؟
تتعمق هذه الورقة البحثية في ذلك السؤال من خلال مراقبة طلاب في المرحلة المتوسطة أثناء بنائهم لروبوتات دردشة خاصة بهم باستخدام أداة ويب تسمى "AI Made By You" (AMBY). لم يكتفِ الباحثون بمراقبة روبوتات الدردشة النهائية لمعرفة ما إذا كانت جيدة أم سيئة؛ بل عملوا كالمحققين، حيث حللوا حوارات الطلاب وأفعالهم ثانية بثانية. استخدموا طريقة خاصة تسمى تحليل الشبكة المرتبة، وهي تشبه رسم خريطة لإيقاع رقصة. فبدلاً من مجرد عدّ عدد المرات التي قال فيها طالب ما "عمل جيد" أو "جرب هذا"، نظروا إلى التسلسل: هل شرحوا فكرة، ثم اختبروها، ثم أصلحوها؟ أم أنهم استمروا في التخمين دون تفكير؟
وجدت الدراسة أن المجموعات التي بنت أعلى جودة من روبوتات الدرشدة كان لديها إيقاع محدد للغاية. فقد كانوا يدورون باستمرار في حلقة من الشرح لمنطقهم، وإعطاء توجيهات (إخبار بعضهم البعض بما يجب فعله بعد ذلك)، والتكرار أو التأكيد على ما فعلوه للتو. لقد كانت حلقة محكمة: "إليك سبب اعتقادي بأن هذا سيعمل"، "حسناً، لنحاول"، "انتظر، لم يعمل"، "لنصلحه". كما تجادلوا، ولكن بطريقة جيدة—لقد اختلفوا أثناء تقديم الأسباب، مما ساعدهم على صقل أفكارهم. في المقابل، كانت المجموعات ذات روبوتات الدردشة الأقل جودة تركز أكثر على طرح أسئلة إجرائية ("أي زر أضغط؟") أو التحديق في مخرجات روبوت الدردشة دون فهم عميق لسبب تصرفه بهذا الشكل. لقد علقوا في خطوات معزولة بدلاً من التدفق عبر العملية بأكملها.
ومن المثير للاهتمام، تحقق الباحثون مما إذا كانت المجموعات "الفائزة" هي فقط تلك التي كانت تعرف بالفعل كيفية البرمجة. لم تكن كذلك. فقد كان بعض الطلاب في المجموعات عالية الأداء لم يكتبوا برنامجاً واحداً من قبل، بينما كان بعض الطلاب في المجموعات منخفضة الأداء لديهم خبرة سابقة. وهذا يشير إلى أن كيفية عملهم معاً كانت أهم بكثير مما يعرفونه بالفعل.
كما نظرت الورقة البحثية في كيفية ارتباط هذه الأنماط بما تعلمه الطلاب فعلياً عن الذكاء الاصطناعي. تشير البيانات إلى أن الطلاب الذين انخرطوا في تلك الحلقات المحكمة من الشرح والاختبار والتحسين انتهى بهم الأمر بامتلاك معرفة أقوى بمفاهيم الذكاء الاصطناعي. ومن ناحية أخرى، فإن المجموعات التي قضت وقتاً طويلاً في مجرد إعطاء الأوامر أو تقديم الاقتراحات دون تفكير عميق بدت وكأنها تعلمت أقل. استخدم الباحثون اختبارات إحصائية لإظهار أن هذه الأنماط لم تكن مجرد حظ عشوائي؛ فالعلاقة بين إيقاع "اشرح-اختبر-أصلح" وتحسن درجات التعلم كانت قوية وذات دلالة.
لذا، فإن الخلاصة ليست أنك بحاجة لتكون عبقرياً في البرمجة لبناء ذكاء اصطناعي رائع. بل هي أن أفضل أنواع التعلم تحدث عندما تتحدث أنت وشريكك باستمرار حول أفكاركما، وتختبرانها، وتصلحانها معاً. إنه الفرق بين شخصين يضغطان على الأزرار فحسب، وشخصين يبنيان آلة أثناء شرح كيفية دوران التروس لبعضهما البعض بدقة. تشير الدراسة إلى أنه إذا أردنا للطلاب أن يفهموا حقاً الذكاء الاصطناعي، فينبغي علينا تشجيعهم على استمرار ذلك الحوار، حتى عندما تصبح الأمور فوضوية.
ملخص تقني: تحليل حوار وسلوكيات طلاب المرحلة الإعدادية أثناء التطوير التعاوني لروبوتات الدردشة القائمة على الذكاء الاصطناعي باستخدام تحليل الشبكة المرتبة
بيان المشكلة مع تحول تعليم الذكاء الاصطناعي (AI) إلى جزء أساسي من المناهج الدراسية من الروضة وحتى الصف الثاني عشر، تشتمل الممارسات التعليمية بشكل متزايد على تصميم الطلاب للوكلاء الحواريين وتطويرهم. وبينما أثبتت الأبحاث السابقة فعالية هذه الأنشطة في مخرجات التعلم وجودة النواتج، إلا أن هناك فجوة كبيرة في فهم العمليات التعاونية التي يتجلى من خلالها التعلم. تعتمد الأدبيات الحالية غالبًا على التقييمات البعدية أو تقييمات النواتج النهائية، مما يقدم رؤية محدودة لآليات التفاعل لحظة بلحظة — وتحديدًا كيفية تنظيم الحوار وتطوير الأنظمة الموجهة بشكل مشترك عبر الزمن. علاوة على على ذلك، تُظهر نواتج الذكاء الاصطناعي سلوكيات احتمالية وناشئة تتطلب من المتعلمين تفسير المخرات غير المتوقعة والتفاوض حول التفسيرات المشتركة، وهو ديناميكي يختلف عن مجالات التعاون الأخرى مثل البرمجة القياسية. تعالج هذه الدراسة الحاجة إلى توصيف أنماط التفاعل التعاوني أثناء تطوير روبوتات الدردشة بالذكاء الاصطناعي وعلاقتها في آن واحد بجودة التصميم ومخرجات المعرفة بالذكاء الاصطناعي.
المنهجية استخدمت الدراسة نهجًا مختلط الأساليب قائمًا على تحليل بيانات التفاعل التعاوني لـ 100 طالب من طلاب المرحلة الإعدادية (47 زوجًا) في مدرسة عامة في جنوب شرق الولايات المتحدة.
الإجراء: على مدار عشر جلسات مدة كل منها 50 دقيقة، استخدم الطلاب بيئة "AI Made By You" (AMBY)، وهي بيئة قائمة على الويب، لتصميم روبوتات دردشة علمية بشكل تعاوني باستخدام نهج البرمجة الزوجية (بالتناوب بين دور "السائق" و"الملاح").
جمع البيانات: جمع الباحثون تسجيلات صوتية وفيديو لـ 47 ثنائيًا، مما نتج عنه مجموعة بيانات تضم 32,976 عبارة. كما شملت البيانات بيانات استطلاع قبلي حول الخبرة السابقة في البرمجة، وتقييمًا بعديًا لمعرفة الذكاء الاصطناعي (15 عنصرًا)، وتقييمًا من الباحثين لنواتج روبوت الدردشة باستخدام معيار مكون من 10 أبعاد.
مخططات الترميز: تم تطبيق مخططين متوازيين للترميز على بيانات الفيديو والنصوص:
الحوار التعاوني: مستمد من "الحديث الاستكشافي" لميرسر وتصنيف زكريا وآخرون، حيث يرصد أفعالًا مثل الشرح، والتوجيه، والاختلاف، وصنع المعنى.
سلوكيات تطوير روبوت الدردشة: ترصد أفعالًا محددة داخل واجهة AMBY، مثل الاختبار، وإضافة جمل التدريب، وتطوير الاستجابات، وتصحيح الأخطاء.
تقنية التحليل: كانت الطريقة التحليلية الأساسية هي تحليل الشبكة المرتبة (ONA). يستخدم ONA نافذة متحركة (حجم 4) لتحديد الاتصالات التسلسلية بين المفاهيم (أفعال الحوار وسلوكيات التطوير). ويميز التحليل بين قوة الانتقالات (على سبيل المثال، أ ← ب مقابل ب ← أ) والانتقالات الذاتية (التكرار).
تم تقسيم المجموعات حسب جودة روبوت الدردكة (أداء عالٍ مقابل أداء منخفض) باستخدام تقسيم الوسيط.
أُجريت اختبارات مقارنة إحصائية (اختبار مان ويتني يو) على هياكل الشبكة.
استُخدمت ارتباطات رتب سبيرمان، المصححة عبر طريقة بنجاميني-هوخبرج والمحققة عبر تحليل مونت كارلو، لربط أنماط التفاعل بمخرجات معرفة الذكاء الاصطناعي.
النتائج الرئيسية أسفر التحليل عن ثلاث نتائج رئيسية تقابل الأسئلة البحثية:
التنظيم الزمني للتفاعل (RQ1): يتميز التطوير التعاوني لروبوتات الدردشة بالذكاء الاصطناعي بدورات غير خطية ومتكررة بدلاً من التقدم الخطي. عبر جميع المجموعات، تم هيكلة النشاط حول تسلسلات متكررة تربط بين الشرح، وتنسيق التوجيه، والتفاعل مع سلوك الروبوت.
التمايز حسب جودة روبوت الدردشة (RQ2):
المجموعات عالية الأداء: أظهرت شبكات أكثر كثافة واتصالًا مع حلقات ذاتية أقوى وانتقالات ثنائية الاتجاه بين أفعال الشرح والتوجيه. كما أظهرت تسلسلات أقوى تربط بين الاختلاف المبرر والشرح. وفي سلوكيات التطوير، أظهرت انتقالات متكررة بين الاختبار وتحسين الاستجابات (تحديدًا للمقاصد الرئيسية).
المجموعات منخفضة الأداء: كانت أنماط التفاعل أكثر تجزئة، حيث تركزت حول الأسئلة الإجرائية، والاقتراحات، والتوجه نحو مخرجات النظام. وأظهرت سلوكيات التطوير لديهم انخراطًا ممتدًا في مهام الإعداد (مثل إعداد الهوية، وتكوين مقاصد المتابعة) مع انتقالات أقل إلى الاختبار والتحسين.
الخبرة السابقة: لم تُفسر الاختلافات في الأداء من خلال الخبرة السابقة في البرمجة، مما يشير إلى أن التنسيق التفاعلي هو عامل أكثر أهمية من الخلفية الفردية.
الارتباط بمعرفة الذكاء الاصطناعي (RQ3):
الارتباطات الإيجابية: ارتبطت مكاسب معرفة الذكاء الاصطناعي إيجابيًا بتسلسلات التفاعل التي تتضمن الشرح، والتكرار (للمساهمات السابقة)، والاتصالات ثنائية الاتجاه بين الشرح واستجابات الروبوت. وفي التطوير، ارتبطت حلقات الاختبار الذاتي الأقوى والانتقالات بين تطوير الاستجابات والاختبار بدرجات معرفية أعلى.
الارتباطات السلبية: ارتبطت مخرجات المعرفة سلبًا بالتسلسلات التي تهيمن عليها أفعال التوجيه والاقتراح، وكذلك التركيز المكثف على تكوين مقاصد المتابعة بدلاً من المنطق الجوهري.
الأهمية والمساهمات تدعي الورقة أنها توسع أدبيات الذكاء الاصطناعي في التعليم (AIED) والتعلم التعاوني المدعوم بالحاسوب (CSCL) بعدة طرق محددة:
عرض موجه بالعملية: تقدم حسابًا تفصيليًا موجهًا بالعملية لتطوير روبوتات الدردشة بالذكاء الاصطناعي التعاوني، متجاوزة التقييمات القائمة على النتائج لنمذجة كيفية تطور التعلم من خلال التفاعل المنظم زمنيًا.
تكامل الأنماط: من خلال استخدام ONA، توضح الدراسة كيفية تنسيق تدفقات متعددة من النشاط (الحوار وتطوير المنتج) عبر الزمن، مما يقدم رؤية أكثر شمولية للتعلم التعاوني من التحليلات أحادية المسار.
الخصوصية السياقية: تسلط النتائج الضوء على أن التعاون الناجح في سياقات تعليم الذكاء الاصطناعي يتطلب أنماط تفاعل محددة — وهي دمج الاستدلال المنطقي، والاختبار المتكرر، والتحسين المتكرر — للتنقل عبر الطبيعة الاحتمالية لأنظمة الذكاء الاصطناعي.
الآثار التصميمية: تشير النتائج إلى أن الدعم التعليمي يجب أن يعزز الدورات التفاعلية التي تدمج الشرح، والاختبار، والمراجعة، بدلاً من التركيز فقط على إكمال المهام الإجرائية.
يحافظ المؤلفون على موقف متواضع، حيث يقرون بأن الارتباطات الملحوظة هي ارتباطات وليس علاقات سببية. كما يشيرون إلى قيود تتعلق بإمكانية تعميم النتائج على الفئات العمرية الأخرى أو الأدوات الأخرى، واستبعاد الأنماط غير اللفظية مثل الإيماءات. ومع ذلك، فإن الدراسة تضع إطارًا تأسيسيًا لتحليل الديناميكيات الزمنية لتعلم الذكاء الاصطناعي التعاوني.