Are Sparse Autoencoder Benchmarks Reliable?
यह शोध पत्र SAEBench मूल्यांकन सुइट का ऑडिट करता है और पाता है कि उच्च शोर और खराब विभेदन क्षमता के कारण कई प्रमुख मेट्रिक्स अविश्वसनीय हैं, और यह निष्कर्ष निकालता है कि क्षेत्र को स्पार्स ऑटोएनकोडर्स (sparse autoencoders) के लिए अधिक सुदृढ़ बेंचमार्क की तत्काल आवश्यकता है।