基于高层语义注意力机制的中文实体关系抽取

作者：武文雅; 陈钰枫^*; 徐金安; 张玉洁

来源：广西师范大学学报(自然科学版), 2019, 37(01): 32-41.

DOI：10.16088/j.issn.1001-6600.2019.01.004

• 关系抽取
• 卷积神经网络
• 注意力机制
• 数据增广
• 依存句法约束

实体关系抽取在挖掘结构化事实的信息抽取系统中扮演着重要的角色。近年来,深度学习在关系抽取任务中取得了显著的成果,同时,注意力机制也逐步地融入到神经网络中,进一步提高了关系抽取的性能。但是,目前的注意力机制主要关注一些低层次的特征,比如词汇等。本文提出一种基于高层语义注意力机制的分段卷积神经网络模型(PCNNHSATT,high-level semantic attention-based piecewise convolutional neural networks),该模型将注意力机制设置在分段最大池化层后,动态地关注了高层次的语义信息。除此之外,由于中文实体关系语料稀疏性较大,本文利用同义词词林对COAE2016语料进行增强以扩大数据规模。最后在COAE2016和ACE2005的中文语料上进行实验,F1值分别达到了78.41%和73.94%,与效果最好的SVM方法相比分别提高了10.45%和0.67%,这充分证明了PCNNHSATT模型在中文关系抽取上的有效性。

• 单位
  北京交通大学