BCMT: Blockwise Causal Memory Transformer
يقدم نموذج BCMT (محول الذاكرة السببية القائم على الكتل) بنية مبتكرة تفصل بين التفاعلات المحلية للرموز ونشر السياق العالمي عبر ذاكرة سببية أسية لملخصات الكتل، محققاً أداءً يضاهي نماذج المحولات الكثيفة في نمذجة السياقات الطويلة مع تحسين إنتاجية التدريب وتقليل استهلاك الذاكرة بشكل كبير.