应用BERT和BiGRU-AT的电力营销客服工单分类模型

摘要：

针对传统词向量无法表示多义词,以及传统深度学习模型特征提取能力弱等问题,提出结合BERT和BiGRU-AT的电力营销客服工单分类模型.利用BERT进行工单文本特征表示,参考具体上下文语境,知道动态词向量表示;用BiGRU模型进行二次语义特征学习,全面提取句子的高维特征;通过软注意力机制为每个词分配不同权重,提升模型聚焦关键词的能力;在真实电力客服工单数据集上进行实验,结果表明,BERT-BiGRU-AT模型在客服工单分类上具有较高的准确率.

关键词：电力客服工单、文本分类、BiGRU、BERT、软注意力

所属期刊栏目：39

分类号：TP391(计算技术、计算机技术)

资助基金：国家自然科学基金61872055

在线出版日期：2023-06-12（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：6-9