How Sparsity Allocation Shapes Label-Free Post-Pruning Recoverability
यह शोध पत्र प्रदर्शित करता है कि स्पर्सिटी एलोकेशन (sparsity allocation) का चयन लेबल-मुक्त पोस्ट-प्रूनिंग रिपेयर (label-free post-pruning repair) के माध्यम से अत्यधिक स्पार्स न्यूरल नेटवर्क की रिकवरेबिलिटी (recoverability) को महत्वपूर्ण रूप से प्रभावित करता है, जो यह प्रकट करता है कि इष्टतम एलोकेशन रणनीतियाँ आर्किटेक्चर, डेटासेट और स्पर्सिटी स्तरों के across भिन्न होती हैं क्योंकि एक विशिष्ट ट्रांजिशन रिजीम (transition regime) मौजूद है जहाँ एक्टिवेशन-सांख्यिकी रिपेयर (activation-statistic repair), बैच नॉर्म (BatchNorm) रीकैलिब्रेशन से बेहतर प्रदर्शन करता है।