基于Word2Vec的微博文本分类研究

作者：牛雪莹^*; 赵恩莹

来源：计算机系统应用, 2019, 28(08): 256-261.

DOI：10.15888/j.cnki.csa.007030

• Word2Vec
• 短文本分类
• TF-IDF

以微博为代表的社交平台是信息时代人们必不可少的交流工具.挖掘微博文本数据中的信息对自动问答、舆情分析等应用研究都具有重要意义.短文本数据的分类研究是短文本数据挖掘的基础.基于神经网络的Word2vec模型能很好的解决传统的文本分类方法无法解决的高维稀疏和语义鸿沟的问题.本文首先基于Word2vec模型得到词向量,然后将类别因素引入传统权重计算方法 TF-IDF (Term Frequency-Inverse Document Frequency)设计词向量权重,进而用加权求和的方法得到短文本向量,最后用SVM分类器对短文本做分类训练并且通过微博数据实验验证了该方法的有效性.

• 单位
  太原科技大学