Wikipedia is a critical source of information for millions of users across the Web. It serves as a key resource for large language models, search engines, question-answering systems, and other Web-based applications. In Wikipedia, content needs to be verifiable, meaning that readers can check that claims are backed by references to reliable sources. This depends on manual verification by editors, an effective but labor-intensive process, especially given the high volume of daily edits. To address this challenge, we introduce a multilingual machine learning system to assist editors in identifying claims requiring citations. Our approach is tested in 10 language editions of Wikipedia, outperforming existing benchmarks for reference need assessment. We not only consider machine learning evaluation metrics but also system requirements, allowing us to explore the trade-offs between model accuracy and computational efficiency under real-world infrastructure constraints. We deploy our system in production and release data and code to support further research.


翻译:维基百科是网络上数百万用户的关键信息来源,也是大型语言模型、搜索引擎、问答系统及其他网络应用的重要资源。在维基百科中,内容需具备可验证性,即读者能够核实条目中的论断是否由可靠来源支撑。这一过程依赖于编辑的人工验证,虽然有效但劳动强度大,尤其是在每日大量编辑的情况下。为解决这一挑战,我们提出了一种多语言机器学习系统,以辅助编辑识别需要引用的论断。该系统在10种语言的维基百科版本中进行了测试,在引用需求评估方面超越了现有基准。我们不仅考虑了机器学习评估指标,还结合了系统需求,从而探索了在实际基础设施限制下模型准确性与计算效率之间的权衡。该系统已投入生产环境,并发布了相关数据与代码以支持后续研究。

0
下载
关闭预览

相关内容

【AAAI2021】维基百科检索跳转来回答复杂的问题
专知会员服务
15+阅读 · 2021年1月5日
最全中文自然语言处理数据集、平台和工具整理
深度学习与NLP
34+阅读 · 2019年6月22日
如何独立实现一个基于知识图谱的问答系统
PaperWeekly
11+阅读 · 2019年6月13日
推荐系统资源(文献、工具、框架)整理
专知
18+阅读 · 2019年2月4日
最新人机对话系统简略综述
专知
26+阅读 · 2018年3月10日
关于数据挖掘,有几本书推荐给你......
图灵教育
16+阅读 · 2017年10月11日
推荐系统杂谈
架构文摘
28+阅读 · 2017年9月15日
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
18+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
25+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
国家自然科学基金
34+阅读 · 2012年12月31日
VIP会员
相关主题
最新内容
面向2027年及未来的海军情报改革
专知会员服务
1+阅读 · 8月5日
《无人机蜂群:释放人类-蜂群编队的潜能》
专知会员服务
4+阅读 · 8月5日
《战略战术化:一项综合性述评》
专知会员服务
2+阅读 · 8月5日
相关VIP内容
【AAAI2021】维基百科检索跳转来回答复杂的问题
专知会员服务
15+阅读 · 2021年1月5日
相关基金
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
18+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
25+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
国家自然科学基金
34+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员