Vision-language-action (VLA) models have enabled language-conditioned, long-horizon robot manipulation, but most existing systems are limited to grippers. Scaling VLA policies to bimanual robots with high degree-of-freedom (DoF) dexterous hands remains challenging due to the expanded action space, frequent hand-object occlusions, and the cost of collecting real-robot data. We present GR-Dexter, a holistic hardware-model-data framework for VLA-based generalist manipulation on a bimanual dexterous-hand robot. Our approach combines the design of a compact 21-DoF robotic hand, an intuitive bimanual teleoperation system for real-robot data collection, and a training recipe that leverages teleoperated robot trajectories together with large-scale vision-language and carefully curated cross-embodiment datasets. Across real-world evaluations spanning long-horizon everyday manipulation and generalizable pick-and-place, GR-Dexter achieves strong in-domain performance and improved robustness to unseen objects and unseen instructions. We hope GR-Dexter serves as a practical step toward generalist dexterous-hand robotic manipulation.


翻译:视觉-语言-动作模型已能实现语言条件化的长时程机器人操控,但现有系统大多局限于夹爪。将VLA策略扩展到配备高自由度灵巧手的双臂机器人仍具挑战性,这源于动作空间的扩大、频繁的手-物体遮挡以及真实机器人数据收集的成本。我们提出GR-Dexter,一个面向双臂灵巧手机器人、基于VLA的通用操控整体硬件-模型-数据框架。我们的方法结合了紧凑型21自由度机械手设计、用于真实机器人数据采集的直观双臂遥操作系统,以及一种利用遥操作机器人轨迹、大规模视觉-语言数据和精心策划的跨具身数据集的训练方案。在涵盖长时程日常操作与泛化性拾放任务的真实世界评估中,GR-Dexter在领域内表现出色,并对未见过的物体和指令展现出更强的鲁棒性。我们希望GR-Dexter能成为迈向通用灵巧手机器人操控的实用一步。

0
下载
关闭预览

相关内容

机器人(英语:Robot)包括一切模拟人类行为或思想与模拟其他生物的机械(如机器狗,机器猫等)。狭义上对机器人的定义还有很多分类法及争议,有些电脑程序甚至也被称为机器人。在当代工业中,机器人指能自动运行任务的人造机器设备,用以取代或协助人类工作,一般会是机电设备,由计算机程序或是电子电路控制。

知识荟萃

精品入门和进阶教程、论文和代码整理等

更多

查看相关VIP内容、论文、资讯等
《未来士兵技术进展》报告
专知会员服务
26+阅读 · 2025年12月9日
《机器人弹性物体感知技术研究》227页
专知会员服务
15+阅读 · 2025年11月20日
基础模型驱动的机器人技术:全面综述
专知会员服务
30+阅读 · 2025年7月15日
《机器人语言》美陆军5年项目46页技术总结报告,2023年
专知会员服务
39+阅读 · 2023年5月17日
进一步改进GPT和BERT:使用Transformer的语言模型
机器之心
16+阅读 · 2019年5月1日
美国“忠诚僚机”项目概念与技术现状
无人机
12+阅读 · 2018年11月1日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
0+阅读 · 2月4日
Arxiv
0+阅读 · 1月29日
Arxiv
0+阅读 · 1月27日
Arxiv
0+阅读 · 1月15日
Arxiv
0+阅读 · 1月14日
Arxiv
0+阅读 · 1月5日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员