A real-world indoor dynamic skeleton dataset of elderly abnormal gait including crutch-assisted walking
تقدم الورقة البحثية ElderlyPipe، وهي مجموعة بيانات داخلية من العالم الحقيقي تم إصدارها للعموم وتتضمن 63,855 إطار هيكل عظمي مضمون الجودة تلتقط سلوكيات كبار السن بما في ذلك المشي بمساعدة العكاز، والتي تثبت أن نماذج الرسم البياني الزماني المكاني تتفوق على نهج الإطار الواحد في تحليل عدم توازن المشية.
تُعد السقوطات سبباً رئيسياً للإصابات والوفيات لدى كبار السن، وغالباً ما تنتج عن تغيرات طفيفة في التوازن لا تُلاحظ إلا بعد فوات الأوان. وللوقاية من هذه المآسي، يحتاج مقدمو الرعاية والمتخصصون الطبيون إلى وسيلة لمراقبة كيفية مشي الناس، بحثاً عن العلامات المبكرة لعدم الاستقرار قبل وقوع السقوط. لعقود من الزمن، حاول الباحثون بناء أنظمة حاسوبية يمكنها مراقبة الشخص وفهم حركته، لكن هذه الأنظمة واجهت مشكلة رئيسية: وهي افتقارها إلى بيانات جيدة. فمعظم السجلات الموجودة للحركة البشرية تأتي من شباب أصحاء في استوديوهات مشرقة ومنضبطة، أو تعتمد على مستشعرات تُرتدى على الجسم غالباً ما ينسى الناس وضعها. وما كان مفقوداً هو سجل واضح ومفصل لكيفية حركة كبار السن في الواقع الفوضوي وغير المتوقع في دار رعاية أو غرفة معيشة، خاصة عندما يعانون في المشي أو يستخدمون عصا للتدعيم. وبدون هذا النوع المحدد من المعلومات، لا يمكن للحواسيب أن تتعلم التمييز بين الخطوة الطبيعية والتعثر الخطير.
لقد نجح فريق من الباحثين من جامعة "جيجيانغ للعلوم والتكنولوجيا" الآن في سد هذه الفجوة عبر إنشاء مجموعة بيانات جديدة تسمى "ElderlyPipe". وبدلاً من تسجيل فيديو لوجوه الأشخاص أو أجسادهم، مما يثير مخاوف تتعلق بالخصوصية، قام البلهثون بتصوير الحركة وتحويلها إلى هياكل عظمية رقمية. هذه الهياكل ليست رسومات، بل هي سلسلة من النقاط الرياضية التي تحدد موقع مفاصل الشخص، مثل الكتفين والمرفقين والركبتين، أثناء تحركهم عبر الزمن. ركز الفريق على تسجيل سكان مسنين حقيقيين في بيئاتهم اليومية، بما في ذلك الممرات والردهات ومناطق تناول الطعام، حيث رصدوا أربعة سلوكيات متميزة: الوقوف، والمشي، والجلوس، والفعل الحرج المتمثل في المشي غير المتزن باستخدام عكاز. ومن خلال جمع 63,855 إطار حركة عالي الجودة من 287 مقطع فيديو مستمر، وفر الباحثون مورداً يسمح للحواسيب بدراسة أنماط المشية المحددة والمهتزة التي تنذر بالخطر لدى كبار السن.
تطلبت عملية تحويل الفيديو الخام إلى هذه الهياكل العظمية الرقمية المفيدة نهجاً دقيقاً متعدد الخطوات للتعامل مع تحديات البيئة الواقعية. ففي دار الرعاية، يمكن للإضاءة أن تتغير فجأة، وغالباً ما يحجب الناس رؤية الكاميرا لبعضهم البعض، مما يتسبب في فقدان أدوات الرؤية الحاسوبية القياسية لتتبع أطراف الشخص. ولحل هذه المشكلة، طور الباحثون نظاماً يحدد المفاصل أولاً باستخدام أداة كشف قياسية، ثم يملأ الأجزاء المفقودة عندما يختفي طرف ما. إذا اختفى مفصل لفترة قصيرة، يخمن النظام موقعه برسم خط مستقيم بين مكان رؤيته سابقاً ومكان ظهوره مجدداً. أما إذا اختفى طرف لفترة أطول، فإن النظام يستخدم الطول المعروف لذراع الشخص أو ساقه لتقدير مكان المفصل المفقود بناءً على موقع المفاصل التي لا تزال مرئية. وبمجرد اكتمال الهيكل العظمي، يقوم النظام بتنعيم الحركات المهتزة والمضطربة التي قد تسببها الحواسيب عادةً، مما يخلق سجلاً انسيابياً ومستمراً لحركة الشخص.
ما يجعل مجموعة البيانات هذه قيمة بشكل خاص هو أنها لا تكتفي بإظهار شخص واقفاً ساكناً؛ بل تلتقط تدفق الحركة عبر الزمن. وقد نظم الباحثون البيانات في نوافذ صغيرة مكونة من أربعة وعشرين إطاراً، مما سمح لهم بدراسة كيفية تحرك جسم الشخص من لحظة إلى أخرى. ووجدوا أن النظر في تسلسل الحركات معاً أكثر فعالية بكثير من النظر في لقطات منفردة. وعندما اختبروا النماذج الحاسوبية على هذه البيانات، وجدوا أن النظام الذي فهم العلاقة بين الحركات الماضية والحاضرة كان أفضل بكثير في تحديد مشية الشخص غير المتزنة والصعبة أثناء استخدام العكاز. لقد حدد هذا النظام هذه الحركات عالية المخاطر بشكل صحيح أكثر من النماذج التي تنظر فقط إلى إطار واحد في كل مرة، مما أثبت أن قصة السقوط تُروى في إيقاع الخطوات، وليس فقط في وضعية قدم واحدة.
تم تصميم البيانات لتكون آمنة وخاصة، فهي لا تحتوي على صور للوجوه أو أسماء، بل تضم فقط الإحداثيات الرقمية للمفاصل. وهذا يسمح لمجتمع البحث ببناء واختبار أدوات سلامة جديدة دون المساس بكرامة كبار السن الذين ساهموا في الدراسة. ولا يشمل الإصدار البيانات فحسب، بل يتضمن أيضاً الكود والطرق المستخدمة لتنظيفها وتنظيمها، مما يضمن قدرة العلماء الآخرين على إعادة إنتاج النتائج. ومن خلال التركيز على التحدي المحدد، والذي غالباً ما يتم تجاهله، وهو المشي بمساعدة العكاز في البيئات الداخلية المغلقة، يوفر هذا العمل أساساً جديداً لتطوير تكنولوجيا يمكنها يوماً ما مراقبة كبارنا، ورصد علامات عدم التوازن والمساعدة في الحفاظ على سلامتهم قبل وقوع السقوط بفترة طويلة.
ملخص تقني: مجموعة بيانات ElderlyPipe
بيان المشكلة تمثل السقطات واختلال توازن المشية تهديداً صحياً حرجاً للبالغين فوق سن 65 عاماً، مما يستدعي المراقبة المستمرة والمبكرة في بيئات الرعاية. ومع ذلك، فإن التقدم في تحليل مشية كبار السن القائم على البيانات يعوقه نقص مجموعات البيانات العامة عالية الجودة. تعاني الموارد الحالية من قيود جوهرية: فالمعايير المرجعية للأغراض العامة (مثل NTU RGB+D وKinetics) تركز على أشخاص شباب في بيئات محكومة؛ والمجموعات السريرية (مثل UR-Fall وUP-Fall) تعتمد على أجهزة الاستشعار القابلة للارتداء بدلاً من البيانات المرئية؛ والجهود الأخيرة في رعاية كبار السن (مثل CarePD) تستهدف حالات معينة مثل مرض باركنسون بدلاً من حالات عدم التوازن في المشية الحرجة سريرياً مثل المشي باستخدام العكازات. هناك نقص واضح في وجود مجموعة بيانات عامة تلبي في آن واحد أربعة شروط: (1) أشخاص حقيقيون من كبار السن (65 عاماً فأكثر)، (2) بيئات رعاية داخلية حقيقية (ليست مختبرات سيناريوهات مكتوبة)، (3) مشية مدعومة بالعكازات مشروحة ومصنفة، (4) تسلسلات هيكلية (Skeleton sequences) على مستوى الإطار مناسبة للتحليل الزماني-المكاني لعدم التوازن.
المنهجية يقدم المؤلفون ElderlyPipe، وهي مجموعة بيانات هيكلية ديناميكية تم إنشاؤها من لقطات مراقبة داخلية من العالم الحقيقي. تشمل المنهجية جمع البيانات، وسلسلة معالجة صارمة لضمان الجودة، وبروتوكول تقييم خالٍ من التسريب.
جمع البيانات: تم تسجيل مقاطع الفيديو بمعدل 30 إطاراً في الثانية (1920×1080) في خمس مناطق فرعية داخلية في دار رعاية (غرف الأنشطة، الممرات، الردهة، منطقة تناول الطعام) تحت ظروف إضاءة وعوائق متغيرة. تلتقط مجموعة البيانات أربعة سلوكيات: الوقوف، المشي، الجلوس، والمشي باستخدام العكازات (وهي الحالة غير المتوازنة الحرجة سريرياً).
سلسلة المعالجة المسبقة:
تقدير الوضع الأساسي (Base Pose Estimation): تتم معالجة الإطارات الخام باستخدام إطار عمل BlazePose/MediaPipe لتوليد هياكل عظمية ثلاثية الأبعاد مكونة من 33 نقطة مفصلية.
تعويض الاحتجاب الهرمي (Hierarchical Occlusion Compensation): لمعالجة النقاط المفصلية المفقودة، يتم استخدام استراتيجية تعويض ثنائية المرحلة:
الاستكمال الخطي (Linear Interpolation): يُستخدم لحالات الاحتجاب القصيرة (أقل من 15 إطاراً) حيث تكون النقطة المفصلية مرئية قبل الفجوة وبعدها.
تقدير القيود الهندسية (Geometric Constraint Estimation): يُستخدم لحالات الاحتجاب الطويلة (15 إطاراً أو أكثر). يتم تقدير الموضع بناءً على نسب طول العظام المتعلمة بالنسبة لنقاط الأصل أو النقاط التابعة المرئية. يتم تحديث أطوال العظام ديناميكياً عبر نافذة منزلقة من العينات الصالحة.
تنعيم كالمان التكيفي الواعي بالرؤية (Visibility-Aware Adaptive Kalman Smoothing): يعمل مرشح كالمان على تقليل الارتجاج عالي التردد وسد الفجوات في الإطارات غير الموثوقة. ومن المهم أن المرشح يتكيف عبر الإنترنت:
يتم تغيير ضوضاء الملاحظة (R) بناءً على ثقة الرؤية (الثقة المنخفضة تؤدي إلى ضوضاء أعلى).
تتكيف ضوضاء العملية (Q) مع حجم الحركة.
يتم تخطي خطوة التحديث للإطارات ذات الثقة المنخفضة، والاعتماد فقط على التنبؤ لسد فجوات الاحتجاب القصيرة.
تمثيل البيانات: يتم تنظيم التسلسلات المنقحة في نوافذ معيارية مكونة من 24 إطاراً (بخطوة حركة 2). ويتم صياغتها كـ رسوم بيانية زمانية-مكانية (Spatiotemporal Graphs) حيث تمثل العقد النقاط المفصلية وتشفر الحواف كلاً من الروابط الهيكلية المكانية والمسارات الزمنية عبر الإطارات.
بروتوكول التقييم: يتم تقييم مجموعة البيانات باستخدام تحقق تبادلي خماسي الطيات (5-fold cross-validation) مقسم حسب الفيديو وخالٍ من التسريب. يضمن ذلك عدم وجود إطارات من فيديو الاختبار في مجموعة التدريب، مما يمنع تسرب الهوية ويضمن أن المقاييس تعكس الصعوبة الحقيقية للبيانات.
المساهمات الرئيسية
مجموعة بيانات ElderlyPipe: إصدار لـ 63,855 إطاراً هيكلياً مضمون الجودة، منظمة في 287 مقطعاً مستمراً و28,735 نافذة معيارية مكونة من 24 إطاراً. وهي أول مجموعة بيانات عامة تجمع بين كبار السن الحقيقيين، وبيئات الرعاية الداخلية الحقيقية، والمشي المدعوم بالعكازات المشروح.
سلسلة ضمان الجودة: سلسلة معالجة مبتكرة تجمع بين التعويض الهرمي للاحتجاب (الاستكمال الخطي والتقدير الهندسي) مع تنعيم كالمان التكيفي الواعي بالرؤية لإنتاج تسلسلات هيكلية موثوقة في ظل الظروف الصعبة في العالم الحقيقي (مثل الإضاءة الخلفية والاحتجاب الشديد).
الإصدار مجهول الهوية: توفر مجموعة البيانات تسلسلات هيكلية مشتقة ومجهولة الهوية (33 نقطة مفصلية مع x,y,z، والرؤية) دون لقطات RGB خام، مما يوازن بين الخصوصية والمنفعة لتطوير الخوارزميات.
ST-GCN: شبكة عصبية تلافيفية زمانية-مكانية تدمج الديناميكيات الزمنية.
النتائج تظهر الاختبارات المرجعية على الإصدار أن الارتباط الزماني أمر بالغ الأهمية لتحليل اختلال التوازن في المشية:
حقق نموذج ST-GCN (النموذج الزماني-المكاني) درجة F1 إجمالية بلغت 0.656، متفوقاً على نموذج Static GCN (النموذج أحادي الإطار) الذي سجل 0.605.
أظهر النموذج الزماني-المكاني قدرة فائقة على الفصل بين المشي باستخدام العكازات (الحالة الممثلة لعدم التوازن) والسلوكيات اليومية مقارنة بنظرائه أحاديات الإطار.
ضغط البيانات كبير جداً: حيث يتم تقليص مقطع فيديو 1080p مكون من 24 إطاراً (حوالي 1.49×108 بكسل) إلى 3,168 رقماً (24 إطاراً × 33 نقطة مفصلية × 4 ميزات)، مما يسمح بتكاليف استدلال منخفضة.
الأهمية تضع الورقة البحثية ElderlyPipe كمورد ضروري لمعالجة عنق الزجاجة في تحليل مشية كبار السن الناتج عن نقص البيانات المستهدفة وعالية الجودة. من خلال التركيز على المشي باستخدام العكازات في بيئات الرعاية الداخلية الحقيقية، تتيح مجموعة البيانات تطوير أنظمة مراقبة قائمة على الرؤية غير جراحية قادرة على اكتشاف حالات عدم التوازن عالية الخطورة. يؤكد المؤلفون أن مجموعة البيانات تكمل الموارد العامة الحالية من خلال ملء فجوة سريرية محددة، مما يسمح بقياس العلامات الميكانيكية الحيوية (مثل سرعة المشية، وعدم تماثل الأطراف) مباشرة من التسلسلات الهيكلية دون أدوات إضافية. يضمن بروتوكول التقييم الخالي من التسريب أن مقاييس الأداء المبلغ عنها قوية وقابلة للتكرار، مما يعزز الثقة في التطورات الخوارزمية المستقبلية لرعاية كبار السن الذكية.