Vision-Language Navigation中級
GeoScaffoldが訓練時のみの幾何学スーパービジョンでRGBのみのVLNを高速化
GeoScaffoldは、視覚言語ナビゲーション(VLN)向けに、深度、接続性、通行可能性を訓練時のみ再構成させることで、推論時にはRGBと言語だけで空間認識を獲得する手法である。本論文はプレプリントであり、R2R-CEおよびRxR-CEで既存の視覚のみナビゲータを上回り、4BモデルがRTX 4090上で1フレーム81 msと高速である。推論時に深度センサや3Dエンコーダを必要としないため、エッジデバイスへの展開に有用である。