The industrial recommender systems always pursue more than one business goals. The inherent intensions between objectives pose significant challenges for ranking stage. A popular solution is to build a multi-objective ensemble (ME) model to integrate multi-objective predictions into a unified score. Although there have been some exploratory efforts, few work has yet been able to systematically delineate the core requirements of ME problem. We rethink ME problem from two perspectives. From the perspective of each individual objective, to achieve its maximum value the scores should be as consistent as possible with the ranks of its labels. From the perspective of entire set of objectives, an overall optimum can be achieved only when the scores align with the commonality shared by the majority of objectives. However, none of existing methods can meet these two requirements. To fill this gap, we propose a novel multi-objective ensemble framework HarmonRank to fulfill both requirements. For rank consistency, we formulate rank consistency (AUC) metric as a rank-sum problem and make the model optimized towards rank consistency in an end-to-end differentiable manner. For commonality modeling, we change the original relation-agnostic ensemble paradigm to a relation-aware one. Extensive offline experimental results on two industrial datasets and online experiments demonstrate that our approach significantly outperforms existing state-of-the-art methods. Besides, our method exhibits superior robustness to label skew situations which is common in industrial scenarios. The proposed method has been fully deployed in Kuaishou's live-streaming e-commerce recommendation platform with 400 million DAUs, contributing 2.6% purchase gain.


翻译:工业推荐系统通常追求多个业务目标。目标间的内在冲突为排序阶段带来了重大挑战。一种流行的解决方案是构建多目标集成模型,将多目标预测整合为统一分数。尽管已有一些探索性工作,但鲜有研究能系统性地阐述多目标集成问题的核心需求。我们从两个维度重新审视多目标集成问题:从单个目标视角出发,为实现其价值最大化,预测分数应尽可能与其标签排序保持一致;从整体目标集视角出发,只有当分数与多数目标共享的共性特征对齐时,才能实现全局最优。然而,现有方法均无法同时满足这两项要求。为填补这一空白,我们提出新型多目标集成框架HarmonRank以同时满足双重需求。针对排序一致性,我们将排序一致性指标(AUC)建模为秩和问题,使模型能以端到端可微分方式向排序一致性优化。针对共性建模,我们将原始关系无关的集成范式转变为关系感知范式。在两个工业数据集上的大量离线实验及在线实验表明,我们的方法显著优于现有最先进方法。此外,该方法对工业场景中常见的标签偏斜情况展现出卓越的鲁棒性。所提方法已在快手直播电商推荐平台(日活用户4亿)全面部署,带来2.6%的购买转化率提升。

0
下载
关闭预览

相关内容

排序是计算机内经常进行的一种操作,其目的是将一组“无序”的记录序列调整为“有序”的记录序列。分内部排序和外部排序。若整个排序过程不需要访问外存便能完成,则称此类排序问题为内部排序。反之,若参加排序的记录数量很大,整个序列的排序过程不可能在内存中完成,则称此类排序问题为外部排序。内部排序的过程是一个逐步扩大记录的有序序列长度的过程。
《序列推荐》最新综述
专知会员服务
22+阅读 · 2024年12月27日
推荐系统融合排序的多目标寻优技术
专知会员服务
18+阅读 · 2024年8月17日
推荐系统技术综述
专知会员服务
55+阅读 · 2023年5月13日
【ICDM2022教程】多目标优化与推荐,173页ppt
专知会员服务
46+阅读 · 2022年12月24日
【RecSys22教程】多阶段推荐系统的神经重排序,90页ppt
专知会员服务
27+阅读 · 2022年9月30日
专知会员服务
48+阅读 · 2020年10月20日
推荐系统产品与算法概述 | 深度
AI100
11+阅读 · 2019年6月13日
新书推荐《推荐系统进展:方法与技术》
LibRec智能推荐
13+阅读 · 2019年3月18日
推荐算法:Match与Rank模型的交织配合
从0到1
15+阅读 · 2017年12月18日
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
VIP会员
相关VIP内容
相关基金
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员