We analyze the performance of heterogeneous learning agents in asset markets with stochastic payoffs. Our main focus is on comparing Bayesian learners and no-regret learners who compete in markets and identifying the conditions under which each approach is more effective. We formally relate the notions of survival and market dominance studied in economics and the framework of regret minimization, thereby bridging these theories. A central finding is that regret plays a key role in market selection, but low regret alone does not guarantee survival: surprisingly, an agent may achieve even logarithmic regret and yet be driven out of the market when competing against a Bayesian learner with a finite prior that assigns positive probability to the correct model. At the same time, we show that Bayesian learning is highly fragile, while no-regret learning requires less knowledge of the environment and is therefore more robust. Motivated by this contrast, we propose two simple hybrid strategies that incorporate Bayesian updates while improving robustness and adaptability to distribution shifts, taking a step toward a best-of-both-worlds learning approach. More broadly, our work contributes to the understanding of dynamics of heterogeneous learning agents and their impact on markets.


翻译:我们分析了具有随机收益的资产市场中异质学习代理的表现。主要关注点是比较在市场中竞争的贝叶斯学习者与无遗憾学习者,并确定每种方法更为有效的条件。我们正式建立了经济学中研究的生存与市场主导概念与遗憾最小化框架之间的联系,从而桥接了这些理论。一个核心发现是,遗憾在市场选择中扮演关键角色,但低遗憾本身并不能保证生存:令人惊讶的是,即使代理实现了对数级遗憾,当与具有有限先验且该先验对正确模型赋予正概率的贝叶斯学习者竞争时,该代理仍可能被逐出市场。同时,我们表明贝叶斯学习高度脆弱,而无遗憾学习对环境知识的需求较少,因此更为稳健。受这一对比的启发,我们提出了两种简单的混合策略,这些策略结合了贝叶斯更新,同时提高了对分布变化的稳健性和适应性,朝着“两全其美”的学习方法迈进了一步。更广泛地说,我们的工作有助于理解异质学习代理的动态及其对市场的影响。

0
下载
关闭预览

相关内容

【经典书】贝叶斯强化学习概述,147页pdf
专知会员服务
116+阅读 · 2021年11月21日
专知会员服务
38+阅读 · 2021年8月2日
【经典书】机器学习:贝叶斯和优化方法,1075页pdf
专知会员服务
416+阅读 · 2020年6月8日
【干货书】贝叶斯推断随机过程,449页pdf
专知
31+阅读 · 2020年8月27日
贝叶斯机器学习前沿进展
机器学习研究会
21+阅读 · 2018年1月21日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
VIP会员
相关主题
最新内容
非对称防御中的自组织临界性:俄乌战争
专知会员服务
1+阅读 · 今天14:36
《战争中的大语言模型监管》
专知会员服务
2+阅读 · 今天14:26
边缘计算的军事应用
专知会员服务
8+阅读 · 8月9日
一种考虑资源机动性的武器目标分配混合算法
专知会员服务
9+阅读 · 8月8日
相关VIP内容
【经典书】贝叶斯强化学习概述,147页pdf
专知会员服务
116+阅读 · 2021年11月21日
专知会员服务
38+阅读 · 2021年8月2日
【经典书】机器学习:贝叶斯和优化方法,1075页pdf
专知会员服务
416+阅读 · 2020年6月8日
相关基金
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员