Neuro-JEPA: Building and Evaluating Health-System Scale Neuroimaging Foundation Models with Mixture of Experts
O Neuro-JEPA é um modelo de fundação multimodal e escalável que utiliza uma arquitetura esparsa de Mistura de Especialistas (Mixture-of-Experts) e aprendizado preditivo latente em 1,55 milhão de exames de ressonância magnética clínica para alcançar uma generalização robusta e de estado da arte através de diversas tarefas de imagem neurológica e sistemas de saúde, frequentemente superando modelos maiores com significativamente menos dados de pré-treinamento.