Predictable Emergence: An Empirical Analysis of Whether Sharp Capability Jumps Follow from Smooth Per-Token Scaling Laws
Este artículo demuestra que los saltos agudos "emergentes" en la precisión de coincidencia exacta observados en la suma de enteros de múltiples dígitos no son discontinuidades genuinas en la capacidad del modelo, sino que son, en cambio, artefactos totalmente previsibles resultantes de mejoras suaves de ley de potencia en la precisión por token, combinadas con la no linealidad de requerir que todos los dígitos sean correctos.