Embodied intelligence systems, which enhance agent capabilities through continuous environment interactions, have garnered significant attention from both academia and industry. Vision-Language-Action models, inspired by advancements in large foundation models, serve as universal robotic control frameworks that substantially improve agent-environment interaction capabilities in embodied intelligence systems. This expansion has broadened application scenarios for embodied AI robots. This survey comprehensively reviews VLA models for embodied manipulation. Firstly, it chronicles the developmental trajectory of VLA architectures. Subsequently, we conduct a detailed analysis of current research across 5 critical dimensions: VLA model structures, training datasets, pre-training methods, post-training methods, and model evaluation. Finally, we synthesize key challenges in VLA development and real-world deployment, while outlining promising future research directions.


翻译:具身智能系统通过持续的环境交互增强智能体能力,已引起学术界与工业界的广泛关注。受大型基础模型进展的启发,视觉-语言-动作模型作为通用机器人控制框架,显著提升了具身智能系统中智能体与环境的交互能力。这一拓展拓宽了具身AI机器人的应用场景。本文全面综述了面向具身操作的VLA模型。首先,梳理了VLA架构的发展脉络。随后,我们从五个关键维度对当前研究进行了详细分析:VLA模型结构、训练数据集、预训练方法、后训练方法以及模型评估。最后,我们总结了VLA开发与实际部署中的核心挑战,并展望了未来潜在的研究方向。

0
下载
关闭预览

相关内容

面向具身操作的视觉-语言-动作模型综述
专知会员服务
27+阅读 · 2025年8月23日
大型语言模型与智能机器人集成的综述
专知会员服务
70+阅读 · 2024年4月22日
用于识别任务的视觉 Transformer 综述
专知会员服务
75+阅读 · 2023年2月25日
多模态人机交互综述
专知会员服务
150+阅读 · 2022年7月3日
深度多模态表示学习综述论文,22页pdf
专知
33+阅读 · 2020年6月21日
Attention!注意力机制模型最新综述
专知
65+阅读 · 2019年4月8日
深度强化学习简介
专知
30+阅读 · 2018年12月3日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
Arxiv
0+阅读 · 2025年12月31日
Application-Driven Innovation in Machine Learning
Arxiv
0+阅读 · 2025年12月29日
VIP会员
相关VIP内容
面向具身操作的视觉-语言-动作模型综述
专知会员服务
27+阅读 · 2025年8月23日
大型语言模型与智能机器人集成的综述
专知会员服务
70+阅读 · 2024年4月22日
用于识别任务的视觉 Transformer 综述
专知会员服务
75+阅读 · 2023年2月25日
多模态人机交互综述
专知会员服务
150+阅读 · 2022年7月3日
相关资讯
深度多模态表示学习综述论文,22页pdf
专知
33+阅读 · 2020年6月21日
Attention!注意力机制模型最新综述
专知
65+阅读 · 2019年4月8日
深度强化学习简介
专知
30+阅读 · 2018年12月3日
相关基金
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员