PlotPick: AI-powered batch extraction of numerical data from scientific figures
تقدم الورقة البحثية PlotPick، وهي أداة مفتوحة المصدر تستفيد من نماذج الرؤية واللغة لاستخراج البيانات الرقمية من الأشكال العلمية بكفاءة وبشكل دفعي، مما يظهر أداءً متفوقاً على نماذج تحويل المخططات إلى جداول المتخصصة مثل DePlot عبر مختلف المعايير وأنواع المخططات.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك باحث تحاول كتابة تقرير ضخم حول دراسات صحية. أنت بحاجة إلى أرقام من مئات الرسوم البيانية والمخططات المختلفة الموجودة في أوراق علمية قديمة. لكن المشكلة تكمن في أن تلك الأرقام محبوسة داخل صور. إنها ليست مكتوبة في جدول بيانات؛ بل هي مجرد خطوط وأعمدة على صفحة.
للحصول على هذه الأرقام، يتعين عليك عادةً ممارسة لعبة مملة من "التخمين والنقر"، حيث تقوم بقياس كل نقطة يدوياً في كل مخطط. الأمر يشبه محاولة نسخ مكتبة كاملة من الكتب عن طريق تتبع الحروف بقلم رصاص — فهذا يستغرق وقتاً طويلاً للغاية ولا يمكن توسيع نطاقه.
إليك "PlotPick".
اعتبر "PlotPick" بمثابة أمين مكتبة آلي فائق السرعة، لا يكتفي بقراءة النصوص فحسب، بل يمكنه أيضاً "رؤية" الصور. إنه أداة مجانية طورها تومي كارستنسن، وتستخدم نوعاً خاصاً من الذكاء الاصطناعي يسمى "نموذج اللغة والرؤية" (VLM). يمكنك التفكير في الـ VLM كطالب قرأ كل الكتب تقريباً ونظر إلى كل الصور تقريباً في العالم.
إليك كيف يعمل PlotPick وما وجدته الورقة البحثية، مشروحاً ببساطة:
الخدعة السحرية: طرح السؤال الصحيح
بدلاً من الحاجة إلى بناء روبوت معقد ومخصص لكل نوع معين من المخططات، يقوم PlotPick ببساطة بطرح سؤال بسيط على الذكاء الاصطناعي: "هذه صورة لمخطط بياني. يرجى تحويل الأرقام الموجودة في هذه الصورة إلى قائمة مرتبة (جدول)."
اختبرت الورقة البحثية ذلك من خلال وضع هذه النماذج "العامة" في مواجهة روبوت "متخصص" يسمى DePlot. DePlot يشبه النجار الماهر الذي يجيد صنع الكراسي (المخططات الشريطية) ببراعة، ولكنه لم يرَ سلماً (مخططات الصندوق - Box Plots) أو منزلقاً (مدرجات تكرارية - Histograms) من قبل.
النتائج: انتصار "العامّين"
أجرى البحث سباقاً على مسارين مختلفين (يُسميان معايير الاختبار) لمعرفة من يمكنه استخراج الأرقام بدقة أكبر.
- مسار "ChartX" (اختبار التنوع):
كان هذا المسار يحتوي على أنواع عديدة من المخططات، بما في ذلك بعض المخططات التي لم يسبق للمتخصص رؤيتها، مثل مخططات الصندوق.
- المتخصص (DePlot): نجح في استخراج حوالي 71% من الأرقام بشكل صحيح. وقد عانى حقاً مع المخططات التي لم يتدرب عليها (حيث انخفضت دقته إلى 24% فقط في مخططات الصندوق!).
- العامّون (الذكاء الاصطناعي الخاص بـ PlotPick): نجحوا في استخراج ما بين 88% و96% بشكل صحيح. حتى أكثر نماذج الذكاء الاصطناعي "رخصاً" في المجموعة تفوقت على المتخصص بفارق كبير.
- مسار "PlotQA" (اختبار الخبير):
تم تصميم هذا المسار خصيصاً للمتخصص. قد تعتقد أن المتخصص سيفوز هنا.
- المتخصص: حقق نسبة 94%.
- العامّون: للمفاجأة، حققوا ما بين 86% و99%. بل إن أفضلهم تفوق على المتخصص، رغم أن الأخير قد تم تدريبه خصيصاً لهذا الاختبار.
لماذا فاز "العامّون"؟
تشير الورقة البحثية إلى ثلاثة أسباب رئيسية جعلت أجهزة الذكاء الاصطنا_التي تتقن مهام متعددة تتفوق على "خبير المهمة الواحدة":
- لقد رأوا المزيد: لقد تم تدريب النماذج العامة على ملايين الصور أكثر من المتخصص. لديهم "مفردات بصرية" أوسع بكثير.
- يعرفون غير المألوف: تم تعليم المتخصص كيفية قراءة المخططات الشريطية والخطية فقط. وعندما رأى مخطط الصندوق (وهو مخطط شائع في العلوم)، أصيب بالارتباك. أما النماذج العامة فقد رأت مخططات الصندوق في بيانات تدريبها الضخمة، لذا عرفت تماماً ما يجب فعله.
- العلامات هي الأهم: يعمل الذكاء الاصطناعي بشكل أفضل عندما تُكتب الأرقام مباشرة على المخطط (مثل كتابة "50%" فوق العمود مباشرة). إذا كانت الأرقام مخفية وكان عليك تخمين المقياس من جانب الرسم البياني، فحتى أذكى نماذج الذكاء الاصطناعي قد ترتكب أخطاء (مثل قراءة "2.3 مليون" على أنها "2,300").
الخلاية
إن PlotPick هو أداة تتيح للباحثين رفع ملفات PDF مليئة بالأوراق العلمية، ليقوم تلقائياً بالعثور على المخططات، وقراءة الأرقام، وإخراجها في شكل جدول بيانات (Excel، CSV، إلخ) جاهز للتحليل.
تزعم الورقة البحثية أنك لست بحاجة لبناء ذكاء اصطناعي مخصص لكل نوع من المخططات بعد الآن. يمكنك ببساطة استخدام أدوات الذكاء الاصطناعي القوية وعامة الأغراض هذه عبر أمر بسيط، وسوف تؤدي عملاً أفضل من الأدوات المتخصصة المتاحة حالياً. الأداة مجانية، مفتوحة المصدر، ويتم استخدامها بالفعل من قبل مركز أبحاث في كوبنهاغن لتسريع عملهم.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.