MEKAWIRE
研究

论文

机器人与具身智能领域的最新论文,以及每篇对产业的意义。

276 篇论文
主题全部Manipulation 27VLA 22Perception 12Robotics 11Navigation 10Humanoid 9Learning 8Safety 5World Action Models 4Simulation 3Aerial manipulation 2Dexterous manipulation 2Sim-to-Real Manipulation 2Social Navigation 2Vision-Language Navigation 2World models 2World-action model 23D Assembly 13DGS dataset 15G Simulation 1AMR Operations 1Active vision manipulation 1Adaptive MPC 1Adaptive action horizons 1Adaptive intervention 1Aerial 1Aerial Manipulation 1Aerial navigation 1Agricultural Robotics 1Articulation Estimation 1Autonomous Driving 1Autonomous Exploration 1Battery-aware RL 1Belief-space planning 1Bimanual Manipulation 1Byzantine localization 1Canal inspection 1Co-speech Humanoid 1Compositional Manipulation 1Construction navigation 1Contact-Rich Manipulation 1Contact-rich Manipulation 1Continuum sensing 1Curriculum RL 1Dexterous Manipulation 1Distributed Manipulation 1Distribution Shift 1Driving Simulation 1Efficient VIO 1Egocentric data 1Egocentric video 1Embodied Agents 1Embodied policy 1Empowerment MPC 1Endoscopic navigation 1Endovascular robotics 1Event-camera VO 1Exoskeletons 1Failure recovery 1Federated 3D Perception 1Fisheye detection 1Floorplan SLAM 1Geometry-aware manipulation 1Grasping 1Grounding 1Humanoid Control 1Humanoid RL 1Humanoid Tool Use 1Humanoid control 1Humanoid loco-manipulation 1Humanoid safety 1Imitation Learning 1JEPA World Models 1Lab automation 1Laboratory Manipulation 1Latent World Models 1Legged Manipulation 1LiDAR Security 1Lifelong RL 1Locomotion 1MAPF 1MAV guidance 1Manipulation LfD 1Manipulation Safety 1Marine simulation 1Memory-centric VLA 1Miniature Locomotion 1Mining Perception 1Mobile manipulation 1Model-based RL 1Monocular SSC 1Motion Planning 1Multi-Agent RL 1Multi-Robot Exploration 1Multi-Robot Manipulation 1Multi-UAV Exploration 1Multi-UAV State Estimation 1Multi-agent RL 1Multi-agent motion planning 1Multi-camera odometry 1Multi-fidelity RL 1Multi-robot manipulation 1Multi-skill Manipulation 1Multi-view perception 1Multimodal simulation 1Navigation & Mapping 1Object Pose Estimation 1Object Search 1Panoramic 3D Detection 1Panoramic segmentation 1Pedestrian tracking 1PersonNav 1Planning 1Policy 1Policy Optimization 1Preference Learning 1Quadruped locomotion 1Real-time VLA 1Real-to-sim 1Representation alignment 1Robot-Use Agents 1Runtime Verification 1Safe Generative Planning 1Safe RL-MPC 1Safe VLA 1Safety monitoring 1Safety-critical control 1Sim-to-real Navigation 1Sim-to-real manipulation 1Simulation geometry 1Skill Discovery 1Social navigation 1Soft Pneumatic Actuators 1Soft manipulation 1Sonar SLAM 1Streaming 3D reconstruction 1Submovement decomposition 1Surgical robotics 1Tactile 1Tactile Exploration 1Tactile VLA 1Temporal manipulation 1Terrain traversability 1Text-to-3D Policy 1Tool Co-Design 1Trajectory Correction 1Traversability 1UAV Navigation 1UAV Swarms 1UAV traffic monitoring 1Underwater Robotics 1Underwater active mapping 1Underwater perception 1Unified world-action model 1VLA Conditioning 1VLA Defense 1VLA Robustness 1VLA evaluation 1VLA manipulation 1VLA robustness 1Video world models 1Visual Generalization 1Visual Grounding 1Visual Reward Models 1Visuomotor Fusion 1Visuotactile manipulation 1World Models 1World-Action Models 1
arXiv
Object Pose Estimation进阶

RYOPO 把端到端类别级物体姿态估计带入实时:31.8 FPS 处理全帧 RGB-D

Hakjin Lee, Junghoon Seo, Jaehoon Sim

预印本论文提出 RYOPO,一种端到端可训练的查询式 RGB-D 集合预测器,无需外部实例分割或显式 CAD 形状先验,同时完成检测、分割与 9 自由度姿态估计。在 NOCS 基准上大幅超越已发表的 RGB-D 联合检测与姿态估计方法,在 REAL275 与 HouseCat6D 上全物体评估中与两阶段方法相当,并在 RTX A6000 上实现 31.8 FPS 全帧姿态输出。该方法消除了按物体重复编码与额外分割阶段,为实时视觉伺服和机器人操作提供可能。

arXiv
Laboratory Manipulation进阶

RoboChemGym:协议驱动生成式仿真框架,自动合成化学实验长时程演示

Chenxi Li, Haiyuan Wan, Rui Li, Jingyuan Li, Sha Zhang, Bohan Feng, Jianbao Cao, Zhangrui Zhao, Di Hu, Wangmeng Zuo, Shixiang Tang, Minting Pan, Dongzhan Zhou

RoboChemGym是面向化学实验的生成式仿真框架,能将文本协议自动转化为高保真、长时程机器人操作演示。在20个真实化学协议上,生成管线成功率最高为89.2%,在真机Level-1任务上平均提升策略成功率23.3个百分点。本文为arXiv预印本,尚未经过同行评审。

arXiv
VLA进阶

MixVLA以自适应混合非不变信息提升VLA零样本泛化

Pingrui Zhang, Yu Zhang, Pengyuan Wu, Bin Wang, Haoming Song, Xianqiang Gao, ZhaxiZhuoma, Zhigang Wang, Dong Wang, Bin Zhao, Xuelong Li

MixVLA是arXiv预印本提出的模型无关训练框架,通过信息瓶颈提取不变表征,并用权重减法得到非不变分支,再对非不变嵌入做自适应混合后与不变表征融合。在LIBERO-Plus和RoboTwin等基准上,该方法提升了零样本分布外任务成功率,且在真实机器人光照扰动下优于π0.5。该框架无需额外数据或改动模型架构,但尚未经过同行评审。

arXiv
Vision-Language Navigation进阶

GeoScaffold 用训练时几何重建让 VLN 策略摆脱深度传感器

Yixuan Jiang, Wentong Li, An Liu, Zihao Xin, Fulin Tang, Cong Leng, Yang Gao, Jian Cheng

这是预印本,未经同行评审。GeoScaffold 提出一种训练时几何监督框架,让端到端 VLN 策略从 RGB 和文本中学习几何隐表示,推理时不依赖深度传感器或 3D 编码器。在 R2R-CE 和 RxR-CE 上,4B 模型达到 64.8% SR 和 60.5% SPL,超过多个 7B 基线,同时每帧 81 ms。

arXiv
Curriculum RL进阶

BVER:从两端双向扩展的 Voronoi 偏置课程让机器人学习稀疏奖励任务更快

Juri Pfammatter, Kaixian Qu, Clemens Schwarke, Victor Klemm, Marco Hutter

BVER 是一个预印本方法,提出从目标状态和初始分布两端同时扩展中间起点与目标,训练单个目标条件策略。在仿真中,它在点质量迷宫、四足盒攀爬和机械臂套环转移任务上比所有无参考课程学习更快,攀爬 0.4 米盒时达到 95% 成功率的迭代数比最佳无参考基线少约 65%,并且是唯一能学会攀爬 0.7 米盒的无参考方法。该方法无需演示或奖励塑形,对稀疏奖励长程机器人任务训练具有实际价值。

arXiv
Sim-to-real manipulation进阶

SARI相位分割仿真-真实协同训练:灯任务未见位置成功率27.5%,真实数据采集时间减少34.3%

Xingxin He, Yuxuan Jiang, Haonan Zhang, Chuhan Cui, Kaile Li, Zhongxing Zheng, Caihao Xu, Ziqi Wang

SARI是一种相位分割的仿真-真实协同训练框架,利用仿真生成自由空间接近轨迹、真实数据教接触交互,在灯任务上实现未见放置位置27.5%的任务完成率,而所有全任务仿真-真实基线均为0%,同时减少真实数据采集时间34.3%。该论文为预印本,尚未经同行评审。

arXiv
Egocentric video专业

WING 用交互中心频谱潜动作引导,在 LIBERO 平均成功率 99.20%

Zhiming Liu, Yikun Miao, Ying Chen, Hongrui Yin, Fangqi Zhu, Xiaoyi Pang, Quanxin Shou, Zhengyang Yan, Haodong Wang, Song Guo

这是一篇预印本论文,尚未经过同行评审。WING 提出一种从第一视角人类视频中提取可迁移交互知识的方法,通过分离相机运动与手物交互、保留低频时序成分,为机器人动作生成提供引导。在 LIBERO、RoboTwin 2.0 和 RoboCasa–GR1 上分别达到 99.20%、93.80% 和 57.7% 的平均成功率,并在四个真实世界任务中表现强于多个基线。

arXiv
Visual Generalization专业

VIGOR:潜空间一致性驱动模型强化学习零样本视觉泛化

Mingyu Park, Samyeul Noh, Hyun Myung, Donghwan Lee

本文提出VIGOR框架,在TD-MPC2骨干上融入非对称弱到强增强(AW)、动力学一致性(DC)和编码器稳定化(ES),解决基于模型的强化学习(MBRL)在未见视觉干扰下的两层级脆弱性。在DeepMind Control Suite和Robosuite的零样本泛化评测中,VIGOR分别超越次优基线3.4%和43.6%,同时保持TD-MPC2的样本效率。该论文为预印本,尚未经过同行评审。

arXiv
Mobile manipulation专业

MobiAgent 双闭环框架以可组合原子技能实现移动操作自我提升,BEHAVIOR-1K 成功率 65.0% 超 π0.5-TA 22.5 个百分点

Chenzhi Liu, Yue Zhang, Jiehong Lin, Jianan Wang, Bo Wang, Zhongrui Wang, Xiaojuan Qi

MobiAgent 是一项预印本研究,提出双闭环智能体框架,把高层推理与低层控制解耦为可组合原子技能,内环负责部署执行与视觉反思,外环自动筛选部署数据并持续微调技能。在 BEHAVIOR-1K 仿真基准上,MobiAgent 平均成功率达到 65.0%,比任务专用基线 π0.5-TA 高 22.5 个百分点;在真机 Astribot S1 上,三轮自我改进后成功率从 32.5% 提升到 57.5%。

arXiv
Fisheye detection进阶

FUSEye:用重叠视图和零初始化适配器轻量训练鱼眼检测

Wenya Su, Kai Luo, Di Wen, Ruiping Liu, Yufan Chen, Junwei Zheng, Kunyu Peng, Kailun Yang

FUSEye 是 arXiv 预印本,提出训练轻量的鱼眼检测框架,将冻结主干的 COCO 预训练 YOLO26-x 适配到鱼眼图像。在 WoodScape MVR 验证分割上,FUSEye 将 mAP50 从 0.148 提升到 0.266,保留全量微调性能的 84.3%,且仅新增约 227k 参数;使用 25% 标签时保留 97.6% 性能。该框架无需相机标定或去畸变,对标签和算力受限的机器人感知部署有吸引力。

arXiv
Humanoid Control专业

KungfuAthleteBot 从视频学习高动态人形运动,统一策略倒地恢复约0.7秒

Zhongxiang Lei, Lulu Cao, Xuyang Wang, Tianyi Qian, Jinyan Liu, Xuesong Li

这是一篇预印本。研究者提出 KungfuAthleteBot 框架,从专业武术运动员视频构建 KungfuAthlete 数据集,修复重建运动中的物理误差,并以统一策略同时实现高动态动作跟踪与倒地恢复。在 Unitree G1 真机上,该策略从任意倒地状态恢复约需 0.7 秒,论文称这是已报告的统一策略中最快速度。该工作表明,修复和补偿视频数据,而非仅收集更多数据,是解锁高动态人形技能的关键。

arXiv
Object Search进阶

LOCUS:利用空间图实现同类容器实例判别

Taylor Bergeron, Shibani Senthilbabu, Kevin Leahy

本文提出LOCUS,一种基于场景图和GNN的方法,用于更新CLIP嵌入以区分同一类别的多个容器实例,从而找到被遮挡物体。在iTHOR仿真中,LOCUS将ECO/N降至0.257,比TidyBot的0.338降低24%,并在RoboCasa和真机Stretch 3上验证了跨域迁移。该预印本尚未经过同行评审。

arXiv
Multi-view perception专业

用更弱解码器换取更强编码器:SNAP 通过新视角合成学习可迁移几何表征

Keerthi Kaashyap, Dennis Anthony, Akshay Krishnan, Nhi Ngoc Nguyen, Jeremy Collins, James Hays, Shreyas Kousik, Animesh Garg

这是预印本,未经同行评审。论文提出 SNAP,一种自监督编码器-解码器 transformer,通过限制解码器接收野并在 DINOv3 潜在空间中重建目标视图,迫使编码器学习几何结构。在五个任务上,SNAP 与自监督基线相当或更优,并在部分指标上接近或超过需要大规模 3D 标注的 VGGT,证明新视角合成的几何信号可以通过约束解码器表达力被有效利用。

arXiv
Construction navigation进阶

CORNAV:融合2D CAD图纸与施工进度表的在建工地机器人导航框架

Parastoo Ali Pour, Deepak Prakash Kumar, Tommy Zhou, Pramod Khargonekar, Mohammad Abdullah Al Faruque

这是预印本论文。CORNAV提出一种在建工地导航框架,将2D CAD图纸、开放词汇3D场景图、项目进度表和LLM安全校验整合进统一规划流程。在室内办公室和真实施工场地的离线评估中,蓝图接地将任务成功率从仅用语义检索的13.0%提升到72.2%,进度感知消除了所有硬禁区违规,安全模块正确拒绝因进度表错误标注而产生的危险请求。

arXiv
Dexterous manipulation专业

PointWAM以3D点轨迹联合预测场景与手部运动,DexJoCo成功率69.0%

Chunghyun Park, Beomjun Kim, Seungcheol Park, Heeseung Kwon, Yashu Shukla, Seunghoon Sim, Jinwoo Shin, Minsu Cho

PointWAM是一个3D世界动作模型,把场景和手表示为共享时空坐标下的点轨迹,预测未来运动并重定向为机器人动作。该论文为预印本,尚未经同行评审。在DexJoCo十项任务上,PointWAM平均成功率达69.0%,比最强基线GR00T N1.6高11.7个百分点;人类演示预训练带来56.9个百分点的提升。真机实验中,PointWAM也优于GR00T N1.6和π0.5。

arXiv
Dexterous Manipulation进阶

DexJoCo-X基准发布:在七种灵巧手上对比动作表征,Being-H0.5联合训练平均成功率最高47.7%

Xiangwei Jiang, Yao Mu, Lixin Duan, Wen Li

这是一个预印本。研究人员推出DexJoCo-X基准和工具包,统一七种灵巧手、六项任务、2100条演示,以比较跨手动作表征。结果显示,联合训练单个Being-H0.5策略时,Native坐标平均成功率为47.0%,功能对齐动作槽FAAS为47.7%,学习型跨手潜变量DexLatent为33.1%;逐手Ego-Pi策略的单臂和双臂平均成功率仅为31.5%和23.2%。这表明跨本体学习效果取决于动作表征、预训练和架构的整体配合。

arXiv
Simulation geometry专业

I2CD:从单张RGB图像直接预测仿真就绪凸碰撞几何

Qian Wang, Liam Merz Hoffmeister, Brian Scassellati, Daniel Rakita

I2CD是一项发表在arXiv上的预印本研究,尚未经过同行评审。它冻结Hunyuan3D-2的图像条件扩散Transformer和ShapeVAE解码器,仅训练一个3800万参数的凸槽交叉注意力头,从单张RGB图像直接输出K个凸多面体,无需网格修复或分解。在227个留出物体上,I2CD取得8个基线中最高的体素IoU 65.7%,端到端延迟0.51秒,比基线快6到37倍;在真实xArm7的20物体杂乱场景中,几何准备时间从328秒降至11秒,执行成功率为85/100,与最强基线90/100接近。

arXiv
Lab automation进阶

Labware Setup Checker:外部摄像头被动验证Opentrons Flex台面设置

Junqiong Joanne Qiu, Zeckria Kamrany, Ananya Anand, Emma Vidal, Yunjia Johanna Bai, Nathan S Chen, Sean Son, Varada Abhyankar, Taryn Jakub, Eleazar Eskin

这篇预印本介绍了Labware Setup Checker,一个被动视觉系统,利用外部摄像头验证Opentrons Flex液体处理机器人的台面准备。在遮挡、不同摄像头位置和光照条件下,槽位分配100%正确,分类准确率超过95%,本地验证中位数2.10秒,云端4.24秒。系统无需修改机器人硬件或固件,为低成本液体处理平台提供了协议感知的验证层。

arXiv
Bimanual Manipulation进阶

EyeRobot 2.0:用主动注视替代腕部相机实现精细双臂操作

Kush Hari, Justin Kerr, Nidhya Shivakumar, Samarth Mahapatra, Carmelo Sferrazza, Jiahui Lei, Jitendra Malik, C. Karen Liu, Ken Goldberg, Angjoo Kanazawa

这是一篇预印本,尚未经过同行评审。论文提出EyeRobot 2.0,通过主动视觉注视仅使用一个固定立体相机即可完成精细双臂操作,无需腕部相机。在7个真实任务和6个仿真任务中,它比被动立体基线在真实世界成功率提高40个百分点,并在腕部相机被遮挡时比ego+wrist基线成功率高一倍以上(48%对22%)。该框架有望成为腕部相机的替代方案,减轻机械臂设计限制。

arXiv
JEPA World Models专业

AVL-JEPA:防止JEPA世界模型因果动态信息坍缩,提升机器人视觉扰动下控制成功率

Yikang Qiao, Ling Zhang, Ziying Song, Duan Huang

本文是预印本,尚未经过同行评审。作者提出AVL-JEPA方法,通过动作锚定和视觉不变性约束,防止联合嵌入预测架构世界模型丢失与动作相关的物理动态信息。在TwoRoom、PushT等四个仿真机器人控制任务中,AVL-JEPA显著提升视觉扰动下的成功率(如PushT高斯噪声下从15.3%升至81.5%),同时保持清洁环境性能,表明该方法能有效保留因果动态信息。

主题页

论文来自 arXiv 机器人领域。尚未生成摘要的论文,显示摘要开头部分。