基于混合深度学习的中文医学实体抽取研究

作者：韩普; 顾亮

来源：图书情报工作, 2022, 66(14): 119-127.

DOI：10.13266/j.issn.0252-3116.2022.14.012

• 混合深度学习
• 医学实体抽取
• BERT
• 注意力
• Highway

[目的/意义]医学实体抽取是医疗健康领域信息组织和知识挖掘的关键环节。针对中文医学实体专业性强、命名规则复杂和抽取难度大的现状，探究如何利用多种深度学习方法混合协作以提升中文医学实体抽取的准确性。[方法/过程]首先在深度学习模型BiLSTM-CRF基础上，引入语言模型BERT和迭代膨胀卷积神经网络IDCNN,增强文本语义表征能力和局部特征捕获能力；接着利用BERT预训练进行外部医学语料资源的知识迁移，实现多语义特征融合；然后引入自注意力机制捕获全局上下文重要信息，并加入Highway优化深层网络训练，解决网络加深导致的精度下降问题，最终提出MF-HDL(Multi Feature-Hybrid Deep Learning)模型。[结果/结论] MF-HDL模型在中文糖尿病数据集上效果显著，其F1值较基准模型IDCNN-CRF和BiLSTM-CRF分别提升18.42%和17.18%,此方法在中文医学实体抽取任务上表现优异。

• 单位
  南京邮电大学