Current stance detection research typically relies on predicting stance based on given targets and text. However, in real-world social media scenarios, targets are neither predefined nor static but rather complex and dynamic. To address this challenge, we propose a novel task: zero-shot stance detection in the wild with Dynamic Target Generation and Multi-Target Adaptation (DGTA), which aims to automatically identify multiple target-stance pairs from text without prior target knowledge. We construct a Chinese social media stance detection dataset and design multi-dimensional evaluation metrics. We explore both integrated and two-stage fine-tuning strategies for large language models (LLMs) and evaluate various baseline models. Experimental results demonstrate that fine-tuned LLMs achieve superior performance on this task: the two-stage fine-tuned Qwen2.5-7B attains the highest comprehensive target recognition score of 66.99%, while the integrated fine-tuned DeepSeek-R1-Distill-Qwen-7B achieves a stance detection F1 score of 79.26%.


翻译:当前立场检测研究通常依赖于给定目标和文本来预测立场。然而,在现实社交媒体场景中,目标既非预先定义也非静态,而是复杂且动态的。为应对这一挑战,我们提出一项新颖任务:基于动态目标生成与多目标适应(DGTA)的开放场景零样本立场检测,其目标是在无先验目标知识的情况下,从文本中自动识别多个目标-立场对。我们构建了一个中文社交媒体立场检测数据集,并设计了多维评估指标。针对大语言模型(LLMs),我们探索了集成式与两阶段微调策略,并评估了多种基线模型。实验结果表明,经过微调的LLMs在此任务上取得了优越性能:两阶段微调的Qwen2.5-7B获得了最高的综合目标识别分数66.99%,而集成微调的DeepSeek-R1-Distill-Qwen-7B则实现了79.26%的立场检测F1分数。

0
下载
关闭预览

相关内容

开放环境目标检测:挑战、解决方案与展望
专知会员服务
44+阅读 · 2024年3月28日
【CVPR2023】DynamicDet:目标检测的统一动态架构
专知会员服务
26+阅读 · 2023年4月15日
小样本目标检测研究综述
专知会员服务
57+阅读 · 2023年1月15日
文本立场检测综述
专知会员服务
34+阅读 · 2021年11月2日
专知会员服务
49+阅读 · 2021年9月9日
专知会员服务
22+阅读 · 2021年4月15日
专知会员服务
27+阅读 · 2021年3月5日
干货 | 基于深度学习的目标检测算法综述
AI科技评论
18+阅读 · 2018年9月1日
干货 | 基于深度学习的目标检测算法综述(二)
AI科技评论
21+阅读 · 2018年8月20日
基于深度学习的目标检测算法综述
AI研习社
15+阅读 · 2018年4月25日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
VIP会员
相关VIP内容
开放环境目标检测:挑战、解决方案与展望
专知会员服务
44+阅读 · 2024年3月28日
【CVPR2023】DynamicDet:目标检测的统一动态架构
专知会员服务
26+阅读 · 2023年4月15日
小样本目标检测研究综述
专知会员服务
57+阅读 · 2023年1月15日
文本立场检测综述
专知会员服务
34+阅读 · 2021年11月2日
专知会员服务
49+阅读 · 2021年9月9日
专知会员服务
22+阅读 · 2021年4月15日
专知会员服务
27+阅读 · 2021年3月5日
相关基金
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
Top
微信扫码咨询专知VIP会员