We analyze the performance of heterogeneous learning agents in asset markets with stochastic payoffs. Our main focus is on comparing Bayesian learners and no-regret learners who compete in markets and identifying the conditions under which each approach is more effective. We formally relate the notions of survival and market dominance studied in economics and the framework of regret minimization, thereby bridging these theories. A central finding is that regret plays a key role in market selection, but low regret alone does not guarantee survival: surprisingly, an agent may achieve even logarithmic regret and yet be driven out of the market when competing against a Bayesian learner with a finite prior that assigns positive probability to the correct model. At the same time, we show that Bayesian learning is highly fragile, while no-regret learning requires less knowledge of the environment and is therefore more robust. Motivated by this contrast, we propose two simple hybrid strategies that incorporate Bayesian updates while improving robustness and adaptability to distribution shifts, taking a step toward a best-of-both-worlds learning approach. More broadly, our work contributes to the understanding of dynamics of heterogeneous learning agents and their impact on markets.


翻译:我们分析了具有随机收益的资产市场中异质学习代理的表现。主要关注点是比较在市场中竞争的贝叶斯学习者与无遗憾学习者,并确定每种方法更为有效的条件。我们正式建立了经济学中研究的生存与市场主导概念与遗憾最小化框架之间的联系,从而桥接了这些理论。一个核心发现是,遗憾在市场选择中扮演关键角色,但低遗憾本身并不能保证生存:令人惊讶的是,即使代理实现了对数级遗憾,当与具有有限先验且该先验对正确模型赋予正概率的贝叶斯学习者竞争时,该代理仍可能被逐出市场。同时,我们表明贝叶斯学习高度脆弱,而无遗憾学习对环境知识的需求较少,因此更为稳健。受这一对比的启发,我们提出了两种简单的混合策略,这些策略结合了贝叶斯更新,同时提高了对分布变化的稳健性和适应性,朝着“两全其美”的学习方法迈进了一步。更广泛地说,我们的工作有助于理解异质学习代理的动态及其对市场的影响。

0
下载
关闭预览

相关内容

【经典书】贝叶斯强化学习概述,147页pdf
专知会员服务
116+阅读 · 2021年11月21日
专知会员服务
38+阅读 · 2021年8月2日
【经典书】机器学习:贝叶斯和优化方法,1075页pdf
专知会员服务
416+阅读 · 2020年6月8日
【干货书】贝叶斯推断随机过程,449页pdf
专知
31+阅读 · 2020年8月27日
贝叶斯机器学习前沿进展
机器学习研究会
21+阅读 · 2018年1月21日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
VIP会员
相关主题
最新内容
《美空军2026条令文件:对海压制作战》
专知会员服务
13+阅读 · 11月9日
人工智能与战争的未来
专知会员服务
5+阅读 · 11月8日
《Agent Mosaic:识别智能体LLM系统中的机密泄露》
人工智能在军事教育中的应用:若干视角与经验
“星链”减速与不断适应的乌克兰
专知会员服务
7+阅读 · 11月6日
美国中期选举之后:帕兰提尔面临不确定性?
专知会员服务
4+阅读 · 11月6日
相关VIP内容
【经典书】贝叶斯强化学习概述,147页pdf
专知会员服务
116+阅读 · 2021年11月21日
专知会员服务
38+阅读 · 2021年8月2日
【经典书】机器学习:贝叶斯和优化方法,1075页pdf
专知会员服务
416+阅读 · 2020年6月8日
相关基金
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员