Key Distance Effects in a Controlled Synthetic Rubric-Routing Unit Test for Small Character-Level Transformers
Diese Studie zeigt, dass in kontrollierten synthetischen Umgebungen der Oberflächenabstand zwischen Schlüsselbereichen die Routing-Genauigkeit kleiner zeichenbasierter Transformer signifikant beeinflusst, was die Verwendung solcher Unit-Tests validiert, um zwischen echten Lookup-Mechanismen und der Ausnutzung oberflächlicher Merkmale zu unterscheiden, bevor automatisierte Bildungssysteme eingesetzt werden.