Published benchmark AUROC does not predict generalisation: an independent evaluation of protein solubility predictors on native and heterologous E. coli proteins
Deze studie toont aan dat gepubliceerde benchmark AUROC's slechte voorspellers zijn voor de generalisatieprestaties van een eiwitoplosbaarheidsmodel op onafhankelijke distributies, wat onthult dat state-of-the-art deep learning-modellen ondermaats kunnen presteren ten opzichte van eenvoudige interpreteerbare baselines wanneer ze buiten hun specifieke trainingsdomeinen worden toegepast.