BicKD: Bilateral Contrastive Knowledge Distillation
تقترح هذه الورقة BicKD، وهو إطار عمل جديد لتقطير المعرفة يستخدم فقدًا تباينيًا ثنائي الجانب لمحاذاة أنماط التنبؤ على مستوى العينات ومستوى الفئات في آن واحد مع فرض التعامد الاحتمالي، مما يجعله يتفوق على الأساليب الرائدة في مختلف المعايير المرجعية.