How Much Does a Benchmark Weight Move a Leaderboard? An Empirical Analysis of Single-Cell Integration Rankings
Questa analisi empirica del benchmark di integrazione single-cell scIB rivela che, sebbene la classifica pubblicata sia localmente stabile, il metodo vincitore e l'ordinamento complessivo sono sensibili a variazioni difendibili nelle priorità dei pesi e nella composizione dei compiti, suggerendo che i report dei benchmark dovrebbero includere curve di sensibilità e stime di incertezza piuttosto che fare affidamento esclusivamente su una singola tabella di classificazione.