To operate reliably under changing conditions, complex systems require feedback on how effectively they use resources, not just whether objectives are met. Current AI systems process vast information to produce sophisticated predictions, yet predictions can appear successful while the underlying interaction with the environment degrades. What is missing is a principled measure of how much of the total information a system deploys is actually shared between its observations, actions, and outcomes. We prove this shared fraction, which we term bipredictability, P, is intrinsic to any interaction, derivable from first principles, and strictly bounded: P can reach unity in quantum systems, P equal to, or smaller than 0.5 in classical systems, and lower once agency (action selection) is introduced. We confirm these bounds in a physical system (double pendulum), reinforcement learning agents, and multi turn LLM conversations. These results distinguish agency from intelligence: agency is the capacity to act on predictions, whereas intelligence additionally requires learning from interaction, self-monitoring of its learning effectiveness, and adapting the scope of observations, actions, and outcomes to restore effective learning. By this definition, current AI systems achieve agency but not intelligence. Inspired by thalamocortical regulation in biological systems, we demonstrate a feedback architecture that monitors P in real time, establishing a prerequisite for adaptive, resilient AI.


翻译:为了在变化条件下可靠运行,复杂系统需要关于其资源使用效率的反馈,而不仅仅是目标是否达成。当前的人工智能系统处理海量信息以产生复杂的预测,然而预测可能看似成功,而其与环境的底层交互却在退化。缺失的是一个原则性的度量,用于衡量系统部署的总信息中,究竟有多少实际共享于其观测、行动与结果之间。我们证明这一共享比例(我们称之为双可预测性P)内在于任何交互,可从第一性原理推导,且具有严格界限:在量子系统中P可达1,在经典系统中P等于或小于0.5,而一旦引入代理(行动选择)则进一步降低。我们在物理系统(双摆)、强化学习智能体及多轮LLM对话中验证了这些界限。这些结果区分了代理与智能:代理是基于预测行动的能力,而智能则额外要求从交互中学习、自我监控其学习效率,并调整观测、行动与结果的范围以恢复有效学习。根据此定义,当前人工智能系统实现了代理但尚未达到智能。受生物系统中丘脑皮质调节机制的启发,我们展示了一种实时监测P的反馈架构,为构建自适应、强韧的人工智能奠定了先决条件。

0
下载
关闭预览

相关内容

专知会员服务
45+阅读 · 2021年4月13日
最新《可解释人工智能》概述,50页ppt
专知
12+阅读 · 2021年3月17日
清华大学《高级机器学习》课程
专知
40+阅读 · 2020年7月21日
类脑计算的前沿论文,看我们推荐的这7篇
人工智能前沿讲习班
21+阅读 · 2019年1月7日
【理论+代码】公开课全免费,手把手带你进入人工智能领域
量化投资与机器学习
10+阅读 · 2018年4月7日
不对称多代理博弈中的博弈理论解读
AI前线
14+阅读 · 2018年3月8日
基于信息理论的机器学习
专知
22+阅读 · 2017年11月23日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
21+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
Arxiv
0+阅读 · 3月7日
Arxiv
0+阅读 · 2月23日
VIP会员
最新内容
最新“指挥控制”领域出版物合集(简介)
专知会员服务
1+阅读 · 今天15:19
面向军事作战需求开发的人工智能(RAIMOND)
专知会员服务
3+阅读 · 今天15:13
软件定义多域战术网络:基础与未来方向(综述)
水下战战术决策中的气象与海洋预报(50页报告)
远程空中优势:新一代超视距导弹的兴起
专知会员服务
1+阅读 · 今天14:45
大语言模型溯因推理的统一分类学与综述
专知会员服务
0+阅读 · 今天12:07
相关VIP内容
专知会员服务
45+阅读 · 2021年4月13日
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
21+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员