中文分词和词向量

作者：王乔乐

来源：中国新通信, 2018, 20(23): 192-193.

• 中文分词
• 词向量
• 统计语言模型
• NNLM

本文主要介绍了一种用神经网络模型训练词向量的方法。本文第一部分介绍了中文分词和词向量的概念;第二部分介绍了当前研究现状和研究热点难点;第三部分接好了基于统计的中文分词的思想;第四部分介绍了用NNLM模型训练词向量的过程。本文完整展示了中文文本到数学表示的过程,为后续自然语言处理任务打下了基础。