Recent advances in embodied intelligence have leveraged massive scaling of data and model parameters to master natural-language command following and multi-task control. In contrast, biological systems demonstrate an innate ability to acquire skills rapidly from sparse experience. Crucially, current robotic policies struggle to replicate the dynamic stability, reflexive responsiveness, and temporal memory inherent in biological motion. Here we present Neuromorphic Vision-Language-Action (NeuroVLA), a framework that mimics the structural organization of the bio-nervous system between the cortex, cerebellum, and spinal cord. We adopt a system-level bio-inspired design: a high-level model plans goals, an adaptive cerebellum module stabilizes motion using high-frequency sensors feedback, and a bio-inspired spinal layer executes lightning-fast actions generation. NeuroVLA represents the first deployment of a neuromorphic VLA on physical robotics, achieving state-of-the-art performance. We observe the emergence of biological motor characteristics without additional data or special guidance: it stops the shaking in robotic arms, saves significant energy(only 0.4w on Neuromorphic Processor), shows temporal memory ability and triggers safety reflexes in less than 20 milliseconds.


翻译:近年来,具身智能领域通过大规模数据和模型参数的扩展,在自然语言指令跟随与多任务控制方面取得了显著进展。相比之下,生物系统展现出从稀疏经验中快速习得技能的先天能力。关键在于,当前机器人策略难以复现生物运动固有的动态稳定性、反射响应性和时序记忆能力。本文提出神经形态视觉-语言-动作框架,该框架模拟了生物神经系统中大脑皮层、小脑与脊髓之间的结构组织。我们采用系统级的仿生设计:高层模型负责规划目标,自适应小脑模块利用高频传感器反馈稳定运动,而仿生脊髓层则执行闪电般的动作生成。该框架首次实现了神经形态视觉-语言-动作在实体机器人上的部署,并取得了最先进的性能表现。我们观察到,在无需额外数据或特殊引导的情况下,系统涌现出生物运动特性:有效抑制机械臂抖动,显著降低能耗,展现出时序记忆能力,并在20毫秒内触发安全反射。

0
下载
关闭预览

相关内容

具有动能的生命体。
AI大模型驱动的具身智能人形机器人技术与展望
专知会员服务
24+阅读 · 2025年5月26日
机器人:具身智能大模型
专知会员服务
51+阅读 · 2025年4月4日
多模态大模型时代的全球首篇《具身智能》综述
专知会员服务
76+阅读 · 2024年7月26日
机器人类脑智能研究综述
专知会员服务
43+阅读 · 2024年7月10日
具身智能:突破人机边界,AI产业的下一站
专知会员服务
88+阅读 · 2024年5月18日
【硬核书】机器人中的大脑和认知智能控制,110页pdf
专知会员服务
66+阅读 · 2022年6月6日
【类脑智能】类脑智能技术初探
产业智能官
15+阅读 · 2020年2月16日
浅谈群体智能——新一代AI的重要方向
中国科学院自动化研究所
44+阅读 · 2019年10月16日
专家报告 | 类脑智能与类脑计算
中国图象图形学报
19+阅读 · 2019年10月9日
【机器人】机器人PID控制
产业智能官
10+阅读 · 2018年11月25日
群体智能:新一代人工智能的重要方向
走向智能论坛
12+阅读 · 2017年8月16日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
11+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2013年12月31日
国家自然科学基金
20+阅读 · 2013年12月31日
国家自然科学基金
48+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2月4日
VIP会员
相关VIP内容
AI大模型驱动的具身智能人形机器人技术与展望
专知会员服务
24+阅读 · 2025年5月26日
机器人:具身智能大模型
专知会员服务
51+阅读 · 2025年4月4日
多模态大模型时代的全球首篇《具身智能》综述
专知会员服务
76+阅读 · 2024年7月26日
机器人类脑智能研究综述
专知会员服务
43+阅读 · 2024年7月10日
具身智能:突破人机边界,AI产业的下一站
专知会员服务
88+阅读 · 2024年5月18日
【硬核书】机器人中的大脑和认知智能控制,110页pdf
专知会员服务
66+阅读 · 2022年6月6日
相关资讯
【类脑智能】类脑智能技术初探
产业智能官
15+阅读 · 2020年2月16日
浅谈群体智能——新一代AI的重要方向
中国科学院自动化研究所
44+阅读 · 2019年10月16日
专家报告 | 类脑智能与类脑计算
中国图象图形学报
19+阅读 · 2019年10月9日
【机器人】机器人PID控制
产业智能官
10+阅读 · 2018年11月25日
群体智能:新一代人工智能的重要方向
走向智能论坛
12+阅读 · 2017年8月16日
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
11+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2013年12月31日
国家自然科学基金
20+阅读 · 2013年12月31日
国家自然科学基金
48+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员