Providing timely and accurate learning support in large-scale online coding courses is challenging, particularly in resource-constrained contexts. We present Kwame 2.0, a bilingual (English-French) generative AI teaching assistant built using retrieval-augmented generation and deployed in a human-in-the-loop forum within SuaCode, an introductory mobile-based coding course for learners across Africa. Kwame 2.0 retrieves relevant course materials and generates context-aware responses while encouraging human oversight and community participation. We deployed the system in a 15-month longitudinal study spanning 15 cohorts with 3,717 enrollments across 35 African countries. Evaluation using community feedback and expert ratings shows that Kwame 2.0 provided high-quality and timely support, achieving high accuracy on curriculum-related questions, while human facilitators and peers effectively mitigated errors, particularly for administrative queries. Our findings demonstrate that human-in-the-loop generative AI systems can combine the scalability and speed of AI with the reliability of human support, offering an effective approach to learning assistance for underrepresented populations in resource-constrained settings at scale.


翻译:为大规模在线编程课程提供及时准确的学习支持具有挑战性,尤其在资源受限的环境中尤为突出。我们提出Kwame 2.0——一种基于检索增强生成的双语(英语-法语)生成式AI助教系统,并将其部署在面向非洲学习者的入门级移动编程课程SuaCode的人机协同论坛中。Kwame 2.0能检索相关课程资料并生成上下文感知的回复,同时鼓励人工监督和社区参与。我们通过一项为期15个月的纵向研究部署该系统,该研究覆盖35个非洲国家的15个教学批次共3717人次选课。基于社区反馈和专家评分的评估表明,Kwame 2.0提供了高质量及时的支持,在课程相关问题解答上达到高准确率,同时人类助教和同伴有效纠正了错误(尤其涉及行政类查询)。我们的研究证明,人机协同生成式AI系统能够将AI的可扩展性与速度同人类支持的可靠性相结合,为资源受限环境中弱势群体的大规模学习支持提供有效方案。

0
下载
关闭预览

相关内容

人工智能杂志AI(Artificial Intelligence)是目前公认的发表该领域最新研究成果的主要国际论坛。该期刊欢迎有关AI广泛方面的论文,这些论文构成了整个领域的进步,也欢迎介绍人工智能应用的论文,但重点应该放在新的和新颖的人工智能方法如何提高应用领域的性能,而不是介绍传统人工智能方法的另一个应用。关于应用的论文应该描述一个原则性的解决方案,强调其新颖性,并对正在开发的人工智能技术进行深入的评估。 官网地址:http://dblp.uni-trier.de/db/journals/ai/
CMU《生成式人工智能》最新课程
专知会员服务
29+阅读 · 2025年10月3日
【新书】《学习AI辅助的Python编程(第2版)》
专知会员服务
67+阅读 · 2024年10月22日
CMU最新《生成式人工智能》课程,涵盖大模型最新技术
专知会员服务
101+阅读 · 2024年4月4日
【EMNLP2019教程】端到端学习对话人工智能,附237页PPT下载
专知会员服务
71+阅读 · 2019年11月25日
这4门AI课程,堪称本年度最佳
人工智能头条
11+阅读 · 2018年7月6日
国家自然科学基金
18+阅读 · 2017年12月31日
国家自然科学基金
6+阅读 · 2017年6月30日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2013年12月31日
VIP会员
最新内容
美国军方使用的10种反无人机武器(2026年更新)
专知会员服务
2+阅读 · 今天4:07
认知战与交战性质的改变:神经战略视角
专知会员服务
5+阅读 · 5月8日
相关基金
国家自然科学基金
18+阅读 · 2017年12月31日
国家自然科学基金
6+阅读 · 2017年6月30日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2013年12月31日
Top
微信扫码咨询专知VIP会员