Jordan-RoPE: Non-Semisimple Relative Positional Encoding via Complex Jordan Blocks
Este artículo presenta Jordan-RoPE, una codificación posicional relativa no semisimple que aprovecha bloques de Jordan complejos para generar características polinómicas oscilatorias destinadas a modelar interacciones de fase moduladas por la distancia, demostrando ventajas estructurales y mejoras específicas de rendimiento frente a las líneas base RoPE y ALiBi en ciertos contextos.