Multi-Agent RL중급
순열 견고성만으로는 부족: 다중 에이전트 Transformer 정책의 Action Collapse
이 논문은 다중 에이전트 트랜스포머 정책이 에이전트 순서 순열에서 보이는 행동을 분석한 프리프린트다. 연구진은 낮은 순열 오차만으로는 정책을 신뢰할 수 없으며, 모든 에이전트가 같은 행동을 선택하는 행동 붕괴를 함께 진단해야 한다고 밝혔다. 3개 에이전트 실험에서는 약한 등변성 정규화가 순열 일관성을 높였지만, 4개 에이전트에서는 같은 강도가 완전한 행동 붕괴를 일으켰다.