计算机工程与科学

北大核心,INSPEC,JST,CSCD扩展版,WJCI

国内刊号:43-1258/TP

国际刊号:1007-130X

计算机工程与科学杂志2023年第8期:基于RoBERTa-wwm-BiLSTM-CRF的扶持政策文本实体识别研究

发布日期:

作者:喻金平, 朱伟锋, 廖列法

单位:(1.江西理工大学信息工程学院,江西 赣州 314000;2.江西理工大学软件工程学院,江西 南昌 330000)

关键词:扶持政策文本,预训练语言模型,命名实体识别,动态词向量,企业扶持,

基金:国家自然科学基金(71462018,71761018)

扶持政策能够帮助企业获得政府在资金补助、税务减免等方面的支持,帮助企业更好地发展。针对扶持政策文本存在实体边界难以划分且传统词向量无法解决一词多义的问题,提出基于RoBERTa-wwm-BiLSTM-CRF的扶持政策文本实体识别模型。该模型使用预训练语言模型RoBERTa-wwm训练得到动态词向量,能够表征词的多义性;利用BiLSTM网络进一步抽取扶持政策文本的上下文信息和语义特征;最后通过条件随机场得到最佳的预测序列。提出的模型在自建的5 512条语料组成的扶持政策数据集上的F1值达到91.7%,结果表明,该模型能够有效识别扶持政策文本的命名实体,从而提高企业筛选政策的效率。

来源:2023年第8期

《计算机工程与科学》期刊编辑部

查看计算机工程与科学杂志2023年第8期

联系我们

  • 地址:湖南省长沙市开福区德雅路109号
  • 电话:86-0731-87002567
  • E-mail:jsjgcykx@vip.163.com

咨询工作人员