科研之友
微信
新浪微博
Facebook
分享链接
摘要
为了高效提取高度集中、覆盖范围广和差异性明显的慕课网用户评论关键词，文中提出一种融合BERT和LDA-TextRank的关键词提取方法。实现关键词提取的第一步是获取候选关键词，在获得候选关键词之前需对爬取的课程评语进行预处理，再通过BERT模型训练得到慕课网在线评语的词向量；然后利用LDA主题模型得到候选关键词的主题分布；最后结合TextRank算法计算各主题的关系词及生成评论文本的词主题挖掘。基于此，文中利用BERT文本表示方法，能够更好地联系不同词语之间的相关性；在传统的LDA主题抽取模型的基础上结合TextRank方法，并在节点运算中通过迭代算法计算各词的得分，将权值的转移概率作为词语之间的相似度，使得关键词提取性能得到了提升。实验结果表明，与传统方法相比，所提方法的困惑程度值明显降低，证实了该方法的有效性。
- 单位
