Aspect-Based Sentiment Analysis (ABSA) provides a fine-grained understanding of opinions by linking sentiment to specific aspects in text. While transformer-based models excel at this task, their black-box nature limits their interpretability, posing risks in real-world applications without labeled data. This paper introduces a statistical, model-agnostic framework to assess the behavioral transparency and trustworthiness of ABSA models. Our framework relies on several metrics, such as the entropy of polarity distributions, soft-count-based dominance scores, and sentiment divergence between sources, whose robustness is validated through bootstrap resampling and sensitivity analysis. A case study on environmentally focused Reddit communities illustrates how the proposed indicators provide interpretable diagnostics of model certainty, decisiveness, and cross-source variability. The results show that statistical indicators computed on soft outputs can complement traditional approaches, offering a computationally efficient methodology for validating, monitoring, and interpreting ABSA models in contexts where labeled data are unavailable.


翻译:方面级情感分析(ABSA)通过将情感与文本中的特定方面关联,提供细粒度的观点理解。尽管基于Transformer的模型在此任务中表现优异,但其黑盒特性限制了可解释性,在缺乏标注数据的实际应用中带来风险。本文提出一种与模型无关的统计框架,用于评估ABSA模型的行为透明度和可信度。该框架依赖多项度量指标,如极性分布的熵、基于软计数的支配分数以及源间情感分歧度,其鲁棒性通过自助重采样和敏感性分析进行验证。通过对环保主题Reddit社区的案例研究,展示了所提指标如何为模型确定性、决策力和跨源变异性提供可解释的诊断。结果表明,基于软输出计算的统计指标能够补充传统方法,为标注数据缺失场景下的ABSA模型验证、监控与解释提供计算高效的方法论。

0
下载
关闭预览

相关内容

情感推荐系统综述:面向个性化的态度、情绪与情境建模
专知会员服务
16+阅读 · 2021年9月25日
专知会员服务
56+阅读 · 2021年4月20日
多模态情绪识别研究综述
专知
25+阅读 · 2020年12月21日
【论文分享】ACL 2020 细粒度情感分析方法
深度学习自然语言处理
10+阅读 · 2020年8月20日
【资源推荐】情感分析资源列表
专知
31+阅读 · 2019年3月20日
现代情感分析方法
算法与数学之美
14+阅读 · 2018年1月12日
深度学习在情感分析中的应用
CSDN大数据
14+阅读 · 2017年8月22日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2017年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
10+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
0+阅读 · 3月17日
VIP会员
最新内容
世界模型入门:从序贯决策到通用智能体
专知会员服务
0+阅读 · 今天15:30
军事域更好使用人工智能的实用指南
专知会员服务
8+阅读 · 10月22日
《衡量语言模型中的作战规划能力》
专知会员服务
13+阅读 · 10月20日
Maven智能系统:帕兰提尔军事人工智能平台详解
专知会员服务
15+阅读 · 10月20日
《测试自动化框架在敏捷软件开发中的角色》
专知会员服务
8+阅读 · 10月20日
俄罗斯如何拦截乌克兰无人机与巡航导弹
专知会员服务
12+阅读 · 10月15日
《武器-目标分配问题:精确与近似求解算法》
专知会员服务
16+阅读 · 10月15日
相关VIP内容
情感推荐系统综述:面向个性化的态度、情绪与情境建模
专知会员服务
16+阅读 · 2021年9月25日
专知会员服务
56+阅读 · 2021年4月20日
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2017年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
10+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员