HyperAIHyperAI

Command Palette

Search for a command to run...

SKEP: 情感知识增强的预训练模型用于情感分析

Hao Tian; Can Gao; Xinyan Xiao; Hao Liu; Bolei He; Hua Wu; Haifeng Wang; Feng Wu

摘要

近年来,借助预训练方法,情感分析取得了显著进展。然而,在预训练过程中,诸如情感词汇和方面-情感对等情感知识却被忽视了,尽管这些知识在传统的情感分析方法中被广泛使用。本文介绍了情感知识增强预训练(Sentiment Knowledge Enhanced Pre-training, SKEP),旨在为多种情感分析任务学习统一的情感表示。通过自动挖掘的知识,SKEP执行情感掩码并构建了三个情感知识预测目标,从而将词级、极性级和方面级的情感信息嵌入到预训练的情感表示中。特别是,方面-情感对的预测被转化为多标签分类问题,旨在捕捉一对词语之间的依赖关系。在三种不同类型的情感任务上的实验表明,SKEP显著优于强大的预训练基线模型,并在大多数测试数据集上实现了新的最先进结果。我们的代码已发布在 https://github.com/baidu/Senta


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供