MEKAWIRE
Forschung

Studien

Neue Studien zu Robotik und Physical AI, jeweils mit ihrer Bedeutung für die Branche.

3 Studien
ThemaAlleManipulation 27VLA 22Perception 12Robotics 11Navigation 10Humanoid 9Learning 8Safety 5World Action Models 4Simulation 3Aerial manipulation 2Dexterous manipulation 2Sim-to-Real Manipulation 2Social Navigation 2Vision-Language Navigation 2World models 2World-action model 23D Assembly 13DGS dataset 15G Simulation 1AMR Operations 1Active vision manipulation 1Adaptive MPC 1Adaptive action horizons 1Adaptive intervention 1Aerial 1Aerial Manipulation 1Aerial navigation 1Agricultural Robotics 1Articulation Estimation 1Autonomous Driving 1Autonomous Exploration 1Battery-aware RL 1Belief-space planning 1Bimanual Manipulation 1Byzantine localization 1Canal inspection 1Co-speech Humanoid 1Compositional Manipulation 1Construction navigation 1Contact-Rich Manipulation 1Contact-rich Manipulation 1Continuum sensing 1Curriculum RL 1Dexterous Manipulation 1Distributed Manipulation 1Distribution Shift 1Driving Simulation 1Efficient VIO 1Egocentric data 1Egocentric video 1Embodied Agents 1Embodied policy 1Empowerment MPC 1Endoscopic navigation 1Endovascular robotics 1Event-camera VO 1Exoskeletons 1Failure recovery 1Federated 3D Perception 1Fisheye detection 1Floorplan SLAM 1Geometry-aware manipulation 1Grasping 1Grounding 1Humanoid Control 1Humanoid RL 1Humanoid Tool Use 1Humanoid control 1Humanoid loco-manipulation 1Humanoid safety 1Imitation Learning 1JEPA World Models 1Lab automation 1Laboratory Manipulation 1Latent World Models 1Legged Manipulation 1LiDAR Security 1Lifelong RL 1Locomotion 1MAPF 1MAV guidance 1Manipulation LfD 1Manipulation Safety 1Marine simulation 1Memory-centric VLA 1Miniature Locomotion 1Mining Perception 1Mobile manipulation 1Model-based RL 1Monocular SSC 1Motion Planning 1Multi-Agent RL 1Multi-Robot Exploration 1Multi-Robot Manipulation 1Multi-UAV Exploration 1Multi-UAV State Estimation 1Multi-agent RL 1Multi-agent motion planning 1Multi-camera odometry 1Multi-fidelity RL 1Multi-robot manipulation 1Multi-skill Manipulation 1Multi-view perception 1Multimodal simulation 1Navigation & Mapping 1Object Pose Estimation 1Object Search 1Panoramic 3D Detection 1Panoramic segmentation 1Pedestrian tracking 1PersonNav 1Planning 1Policy 1Policy Optimization 1Preference Learning 1Quadruped locomotion 1Real-time VLA 1Real-to-sim 1Representation alignment 1Robot-Use Agents 1Runtime Verification 1Safe Generative Planning 1Safe RL-MPC 1Safe VLA 1Safety monitoring 1Safety-critical control 1Sim-to-real Navigation 1Sim-to-real manipulation 1Simulation geometry 1Skill Discovery 1Social navigation 1Soft Pneumatic Actuators 1Soft manipulation 1Sonar SLAM 1Streaming 3D reconstruction 1Submovement decomposition 1Surgical robotics 1Tactile 1Tactile Exploration 1Tactile VLA 1Temporal manipulation 1Terrain traversability 1Text-to-3D Policy 1Tool Co-Design 1Trajectory Correction 1Traversability 1UAV Navigation 1UAV Swarms 1UAV traffic monitoring 1Underwater Robotics 1Underwater active mapping 1Underwater perception 1Unified world-action model 1VLA Conditioning 1VLA Defense 1VLA Robustness 1VLA evaluation 1VLA manipulation 1VLA robustness 1Video world models 1Visual Generalization 1Visual Grounding 1Visual Reward Models 1Visuomotor Fusion 1Visuotactile manipulation 1World Models 1World-Action Models 1
NiveauAlleEinstiegFortgeschrittenExperten
arXiv
World Action ModelsExperten

NAVA-WAM: Aktionspolitik direkt aus Beobachtungsvideos vortrainieren

Zhaochong An, Fei Zhang, Menglin Jia, Duncan Frost, Zijian Zhou, Yikai Wang, Xudong Wang, Aditya Patel, Belinda Zeng, Tao Xiang, Serge Belongie, Amir Bar, Sen He

NAVA-WAM ist ein Preprint eines Weltaktionsmodells, das eine Aktionspolitik ohne Aktionslabels direkt aus Beobachtungsvideos vortrainiert. In Simulation erreicht es auf LIBERO 99,0 Prozent und auf LIBERO-Plus 83,5 Prozent Erfolg, auf RoboTwin 2.0 Clean 88,5 und Random 73,6 Prozent; in realen Versuchen kommt es auf 93,3 Prozent gegenüber 66,7 Prozent für DreamZero und 53,3 Prozent für π0.5. Die Arbeit zeigt, dass native Action-Prior-Pretraining Aktionslabel-Kosten senken und die Generalisierung von Weltaktionsmodellen verbessern kann.

Vollständige Studie lesen (PDF)
arXiv
World Action ModelsExperten

XGenAct: Geometrieerweitertes Weltaktionsmodell erzeugt Wahrnehmungsströme und Roboteraktionen gemeinsam

Tingting Du, Ziyao Wang, Guoheng Sun, Ang Li

Der Preprint stellt XGenAct vor, ein Weltaktionsmodell, das RGB, metrische Tiefe, Oberflächennormalen, funktionale Rollensegmentierung und Roboteraktionen als Videos kodiert und mit einem einzigen Diffusion-Transformer trainiert. Auf fünf nicht im Training enthaltenen RLBench-Aufgaben erreicht XGenAct im Durchschnitt 52 % Closed-Loop-Erfolg, während die stärksten evaluierten Baselines 26 % erreichen. Die strukturierte Geometrie- und Semantikgenerierung verbessert die Aktionsvorhersage ohne modalspezifische Köpfe oder Zusatzverluste.

Vollständige Studie lesen (PDF)
arXiv
World Action ModelsExperten

ProWAM: Progressive visuelle Teilziele verbessern Effizienz und Robustheit von Weltaktionsmodellen

Fei Zhang, Zhaochong An, Duncan Frost, Yikai Wang, Pengfei Liu, Ya Zhang, Michal Drozdzal, Amir Bar

ProWAM ist ein als Preprint veröffentlichter World Action Model, das Aktionsblöcke und eine geordnete Folge spärlicher visueller Teilziele gemeinsam vorhersagt. In Simulationen erreicht es neue Spitzenwerte auf LIBERO-Plus mit 85,8 % und auf randomisiertem RoboTwin mit 75,7 %; in realen Zero-Shot-Versuchen auf einem Franka-Roboter erzielt es 70,0 % Erfolg und übertrifft die stärkste Baseline DreamZero um 15,0 Prozentpunkte. Durch das Zwischenspeichern von Teilziel-Merkmalen reduziert ProWAM die Rechenlast des Video-Experten deutlich und zeigt einen günstigen Kompromiss zwischen Effizienz und Generalisierung.

Vollständige Studie lesen (PDF)

Themenseiten

Manipulation 6VLA 4World Action Models 5Aerial manipulation 3Dexterous manipulation 3Sim-to-Real Manipulation 3Social Navigation 3

Die Studien stammen aus den Robotik-Feeds von arXiv. Solange unsere Zusammenfassung fehlt, erscheinen die ersten Zeilen des Abstracts.