Hochdimensionale Layer-State-Trajektorien enthüllen die internen Dynamiken von Transformer-Inferenzen

arXiv:2610.26866v1 Mechanistische Studien von Large Language Models lokalisieren Funktionen in Parametern, Attention Heads oder Neuronen, aber diese Teile bestimmen nicht, wie sich eine Inferenz entfaltet. Wir behandeln die geordnete Layer-State-Trajektorie als empirischen Prozess und testen, ob