Beyond the Sink Interpretation: Radial Attention in Flow-Based VLA Policies
Noch nicht auf Deutsch verfügbar: Anzeige im englischen Original.
Aus dem Abstract
Prior work calls the high attention on the first and last action tokens of a flow-based VLA policy a radial action sink, and uses these tokens to set the execution horizon. In language models, a sink is a token with high incoming attention, a small value, and little effect on the output.
Aus dem Abstract. Unsere Zusammenfassung folgt.
Der Volltext wird hier nicht wiedergegeben, weil die Lizenz der Studie das nicht erlaubt. Das Original steht auf arXiv.