2 个月前

YASO:一个面向开放领域评论的目标情感分析评估数据集

Matan Orbach; Orith Toledo-Ronen; Artem Spector; Ranit Aharonov; Yoav Katz; Noam Slonim
YASO:一个面向开放领域评论的目标情感分析评估数据集
摘要

当前跨域设置下的目标情感分析(TSA)评估仅限于现有数据集中可用的一小部分评论领域。这种评估具有局限性,可能无法真实反映在如亚马逊或 Yelp 等网站上的表现,这些网站包含来自多个领域的多样化评论。为了解决这一差距,我们推出了 YASO——一个全新的开放域用户评论 TSA 评估数据集。YASO 包含了来自数十个评论领域的 2,215 条英文句子,并标注了目标术语及其情感。我们的分析验证了这些标注的可靠性,并探讨了所收集数据的特征。使用五种现代 TSA 系统进行的基准测试结果显示,在这个具有挑战性的新数据集上仍有很大的改进空间。YASO 可在 https://github.com/IBM/yaso-tsa 获取。

YASO:一个面向开放领域评论的目标情感分析评估数据集 | 最新论文 | HyperAI超神经