ScienceMeter: Tracking Scientific Knowledge Updates in Language Models
Dit artikel introduceert ScienceMeter, een raamwerk voor het evalueren van wetenschappelijke kennisupdates in Large Language Models via drie metrieken — preservatie, acquisitie en projectie — waarbij wordt onthuld dat huidige update-methoden moeite hebben met het behouden van bestaande kennis terwijl ze effectief nieuwe feiten leren en toekomstige wetenschappelijke ontwikkelingen anticiperen.