Manga is a culturally distinctive multimodal medium and one of the most influential forms of Japanese popular culture. As AI systems increasingly target manga understanding, OCR, and translation, Manga109 has become a foundational dataset for manga-related AI research. However, the current Manga109 dataset contains inaccurate transcriptions and coarse annotations, which do not align well with modern OCR and multimodal manga understanding tasks. In this work, we revisit the dialogue text annotations of Manga109 and identify five categories of annotation issues, including inaccurate transcriptions, missing text regions, overlapping dialogue and onomatopoeia, and under-segmented speech balloons. To address these issues, we combine OCR-based issue detection and manual revision to construct Manga109-v2026, revising approximately 29,000 dialogue annotations. Our revisions better align Manga109 with modern OCR and multimodal manga understanding systems while preserving expressive structures characteristic of manga.


翻译:漫画是一种具有文化特色的多模态媒介,也是日本流行文化中最具影响力的形式之一。随着人工智能系统日益聚焦于漫画理解、OCR(光学字符识别)与翻译任务,Manga109已成为漫画相关AI研究的基础数据集。然而,当前的Manga109数据集存在转录不准确与标注粗糙的问题,难以与现代OCR及多模态漫画理解任务良好适配。本文重新审视了Manga109中的对话文本标注,识别出五类标注问题,包括转录不准确、文本区域缺失、对话与拟声词重叠,以及语音气泡分割不足。为解决这些问题,我们结合基于OCR的缺陷检测与人工修正,构建了Manga109-v2026,修订了约29,000条对话标注。我们的修订使Manga109与现代OCR及多模态漫画理解系统更好地对齐,同时保留了漫画特有的表达结构。

0
下载
关闭预览

相关内容

文本到图像合成:十年回顾
专知会员服务
31+阅读 · 2024年11月26日
人工智能的下一站:文生3D
专知会员服务
42+阅读 · 2024年3月4日
GANs最新进展,30页ppt,GANs: the story so far
专知会员服务
44+阅读 · 2020年8月2日
数据标注研究综述,软件学报,19页pdf
专知会员服务
96+阅读 · 2020年2月20日
虚拟数字人发展白皮书,37页pdf
专知
10+阅读 · 2022年2月16日
学习一个宫崎骏画风的图像风格转换GAN
AI科技评论
18+阅读 · 2020年3月13日
AmpliGraph:知识图谱表示学习工具包
专知
40+阅读 · 2019年4月6日
Image Captioning 36页最新综述, 161篇参考文献
专知
90+阅读 · 2018年10月23日
【学界】实景照片秒变新海诚风格漫画:清华大学提出CartoonGAN
GAN生成式对抗网络
14+阅读 · 2018年6月20日
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
Arxiv
0+阅读 · 6月22日
VIP会员
最新内容
对抗环境下超视距目标打击的情报支援
专知会员服务
3+阅读 · 今天14:49
《无人机对海面作战影响评估》
专知会员服务
11+阅读 · 7月21日
印度精确打击与指挥架构的断层
专知会员服务
6+阅读 · 7月20日
美空军AI完成F-16战斗机自主空战历史性试飞
专知会员服务
6+阅读 · 7月20日
相关基金
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员