Real-World Diagnostic Accuracy of Fully Autonomous, FDA-Approved Artificial Intelligence Systems for Diabetic Retinopathy Screening in the United States: A Systematic Review and Meta-Analysis
تكشف هذه المراجعة المنهجية والتحليل التلوي لخمس دراسات واقعية من الولايات المتحدة شملت أكثر من 108,000 عملية فحص، أنه في حين تحافظ أنظمة الذكاء الاصطناعي ذاتية التشغيل بالكامل والمعتمدة من قِبل هيئة الغذاء والدواء لعلاج اعتلال الشبكية السكري على حساسية عالية (95.8%)، فإن نوعيتها (83.5%) تظهر تباينًا كبيرًا عبر الإعدادات السريرية، مما يشير إلى أن أداء التجارب المحورية قد لا يتعمم بشكل موحد على الممارسة الواقعية.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أن عينيك مثل كاميرا عالية الدقة لا تنام أبداً، تلتقط العالم من حولك باستمرار. ولكن بالنسبة لملايين الأشخاص المصابين بمرض السكري، هناك لص متسلل يسمى "اعتلال الشبكية السكري" يقوم بخدش عدسة تلك الكاميرا ببطء. إذا تُرك هذا اللص دون علاج، يمكنه تشويه الصورة حتى تختفي للأبد. الخبر السار؟ هذا اللص عادة ما يكون بطيئاً ويمكن التنبؤ بحركاته. إذا فحصنا عدسة الكاميرا مرة واحدة في السنة، يمكننا رصد الخدوش مبكراً وإصلاحها قبل أن تصبح دائمة.
ومع ذلك، فإن فحص العدسة ليس بالأمر السهل؛ فهو يتطلب طبيباً متخصصاً، ومعدات باهظة الثمن، ووقتاً طويلاً. الكثير من الناس يفوتون مواعيدهم، وهناك ببساطة عدد غير كافٍ من أطباء العيون للجميع. وهنا يأتي دور "المحقق الرقمي": الذكاء الاصطناعي (AI). هذه برامج حاسوبية مدربة على النظر إلى صور خلفية العين ورصد الخدوش بشكل أسرع من أي إنسان. مؤخراً، أعطت إدارة الغذاء والدواء (الجهة المسؤولة عن وضع القواعد الحكومية) الضوء الأخضر لاثنين من هؤلاء المحققين الرقميين الذين يمكنهم العمل بمفردهم، دون الحاجة إلى مراجعة طبيب بشري لعملهم أولاً. لقد وعدوا بأن يكونوا دقيقين للغاية، تماماً مثل الحصول على درجة مثالية في لعبة فيديو.
لكن هنا تكمن المفاجأة: ألعاب الفيديو تُلعَب في بيئة محكومة بإضاءة مثالية ودون أي مشتتات. أما الحياة الواقعية فهي فوضوية. ماذا يحدث عندما يُرسل هؤلاء المحققون الرقميون إلى العالم الحقيقي، إلى عيادات مزدحمة بإضاءة خافتة، وطاقم عمل مرهق، ومرضى قد لا يجلسون في وضعية مثالية؟ هل سيظلون قادرين على رصد كل خدش، أم سيبدأون في الارتباك؟ هذا هو السؤال الكبير الذي قررت الباحثة الشابة شريا باريمو الإجابة عليه.
المحققون الرقميون في البرية
كان مشروع شريا أشبه بقصة بوليسية، ولكن بدلاً من حل جريمة، كانت تحل لغزاً حول مدى كفاءة نظامين محددين من الذكاء الاصطناعي — يطلق عليهما اسم LumineticsCore (المعروف سابقاً باسم IDx-DR) و EyeArt — في العمل فعلياً في العيادات الأمريكية الحقيقية.
قد تعتقد قائلاً: "إذا وافقت الحكومة عليهما، فلا بد أنهما مثاليان!" لكن شريا أرادت النظر إلى ما وراء الاختبارات المعملية الفاخرة حيث يسير كل شيء على ما يرام. أرادت أن ترى ماذا يحدث عندما تُستخدم هذه الأنظمة في الفوضى الحقيقية المزدحمة داخل عيادة الطبيب. لقد جمعت بيانات من خمس دراسات مختلفة شملت أكثر من 108,000 فحص للعين. هذا عدد هائل من العيون!
النتائج الكبرى: بارعون في الرصد، لكنهم أحياناً "متحفزون" أكثر من اللازم
إليك ما كشفته القصة:
1. قوة "عدم تفويت أي شيء" الخارقة
المحققون من الذكاء الاصطناعي بارعون للغاية في عدم تفويت الأشياء السيئة. في العالم الحقيقي، رصدوا 95.8% من العيون التي كانت تعاني من المرض. فكر في الأمر مثل جهاز كشف المعادن في المطار؛ إذا ضبطت جهاز كشف المعادن ليكون شديد الحساسية، فسيصدر صوتاً بسبب حزام أو مفتاح أو عملة معدنية. قد يصدر صوتاً كثيراً لأشياء ليست أسلحة، لكنه لن يسمح أبداً بمرور سلاح. هذا هو بالضبط ما تفعله أنظمة الذكاء الاصطناعي هذه؛ فهي بارعة جداً في رصد المشاكل لدرجة أنها نادراً ما تفوت حالة ما. إذا قال الذكاء الاصطناعي: "هذه العين تبدو سليمة"، يمكنك أن تكون واثقاً جداً من أنها سليمة حقاً.
2. مشكلة "التحفز الزائد"
ومع ذلك، هناك عقبة. بينما هم بارعون في عدم تفويت المرض، إلا أنهم "متحفزون" قليًلاً عندما يتعلق الأمر بالقول إن "كل شيء على ما يرام". في العالم الحقيقي، قال الذكاء الاصطناعي إن العين سليمة بنسبة 83.5% من الوقت عندما كانت سليمة بالفعل. ولكن في بعض الأماكن، انخفض هذا الرقم ليصل إلى 60.3%.
تخيل إنذار دخان في مطبخك؛ إذا ضبطته ليكون شديد الحساسية، فسيصرخ "حريق!" لمجرد أنك حمّصت قطعة خبز لفترة طويلة جداً. ليس هناك حريق حقيقي، لكن الإنذار حساس للغاية لدرجة أنه يعتقد بوجود حريق. هذا ما حدث مع الذكاء الاصطناعي في بعض العيادات. فقد رأى أشياء بدت وكأنها خدوش وهي ليست كذلك، وصنف عيوناً سليمة على أنها "تحتاج إلى طبيب". وهذا ما يسمى "الإيجابية الكاذبة".
لماذا هذا الاختلاف؟ العالم الحقيقي الفوضوي
وجدت شريا أن الذكاء الاصطناعي لم يغير "دماغه"، بل العالم من حوله هو الذي تغير. في الاختبارات المعملية الفاخرة حيث حصل الذكاء الاصطناعي على درجات "امتياز"، كانت الصور تُؤخذ بواسطة خبراء بإضاءة مثالية وباستخدام قطرات توسيع حدقة العين. أما في العالم الحقيقي، فغالباً ما كان يتم التقاط الصور بواسطة ممرضين أو فنيين عاديين في عيادات عادية، وأحياناً مع حدقات عين أصغر أو عيون ضبابية (مثل النظر من خلال نافذة مغبشة).
ولأن الصور لم تكن دائماً مثالية، ارتبك الذكاء الاصطناعي قليلاً؛ وبدأ يرى الظلال كأنها خدوش. كما أن بعض العيادات استخدمت الذكاء الاصطناعي بطرق مختلفة؛ فقد أخبروا الذكاء الاصطناعي: "كن حذراً للغاية! إذا لم تكن متأكداً، فقم بالتنبيه!". هذا جعل الذكاء الاصطناعي يرصد المزيد من المشاكل، ولكنه جعله أيضاً يصنف المزيد من العيون السليمة على أنها حالات مرضية.
الحكم النهائي: أداة رائعة، ولكن ليست سحراً
إذاً، ما هي النتيجة النهائية؟ خلصت الورقة البحثية إلى أن أنظمة الذكاء الاصطناعي هذه ممتازة في استبعاد المرض. إذا قال الذكاء الاصطناعي إنك بخير، فأنت على الأرجح بخير حقاً. هذا يعد فوزاً كبيراً لأننا نستطيع استخدام هذه الأدوات لتصفية الأشخاص الأصحاء بسرعة حتى يتمكن أطباء العيون من التركيز على الأشخاص الذين يحتاجون للمساعدة حقاً.
ومع ذلك، تحذرنا الورقة أيضاً من توقع المثالية من الذكاء الاصطناعي في كل مكان. فالسلوك "المتحفز" يعني أنه في بعض العيادات، قد يرسل الذكاء الاصطناعي الكثير من الناس إلى طبيب العيون لإجراء فحص ثانٍ، مما قد يؤدي إلى ازدحام المواعيد وجعل الناس ينتظرون لفترة أطول. وجدت الدراسة أن أداء الذكاء الاصطناعي يعتمد بشكل كبير على أين و كيف يتم استخدامه.
الخلا الخلاصة
تخبرنا أبحاث شريا أنه على الرغم من أن هؤلاء المحققين الرقميين المعتمدين من إدارة الغذاء والدواء هم أدوات قوية يمكنها إنقاذ بصرنا، إلا أنهم ليسوا عصياً سحرية تعمل بنفس الطريقة في كل غرفة. إنهم يشبهون إنذار دخان شديد الحساسية: سينقذونك من حريق حقيقي، لكنهم قد يصرخون أيضاً عندما تقوم فقط بتحميص الخبز.
تظهر الدراسة أنه يمكننا الوثوق بهذه الأنظمة للعثور على الأخبار السيئة، لكننا بحاجة إلى توخي الحذر في كيفية التعامل مع "الإنذارات الكاذبة". وقبل نشر هذه التقنيات في كل مكان، تحتاج العيادات إلى اختبارها في بيئاتها الخاصة للتأكد من أنها لن تصبح "متحفزة" أكثر من اللازم. التكنولوجيا جاهزة، لكن الإعدادات في العالم الحقيقي لا تزال بحاجة إلى بعض الضبط لضمان حصول الجميع على الرعاية التي يحتاجونها دون الشعمور بالارتباك من كثرة الإنذارات الكاذبة.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.