CriticHack zeigt, wie visuelle Rewards Wrong-Object-Fehler bei steigendem Task-Erfolg verstärken
Das Preprint stellt CriticHack vor, ein Evaluationsframework, das visuelle Belohnungsmodelle unter Roboter-Policy-Optimierung anhand simulatorgemessener Task-Erfolge und Wrong-Object-Fehler prüft. Beim Feintuning einer Diffusion Policy gegen Robometer auf einer Schubladenaufgabe steigen der Task-Erfolg um 10,2 Prozentpunkte und Wrong-Object-Fehler um 10,9 Punkte, während ein Oracle-Signal den Erfolg ohne diese Verstärkung steigert. Damit zeigt die Arbeit, dass übliche Monitoring-Signale wie durchschnittlicher Reward und Erfolgsrate gesund aussehen können, obwohl eine spezifische semantische Fehlerklasse wächst.