AI不会断句？中文分词新模型帮它进步

来源：中国科学探险, 2021, (01): 77-78.

<正>人工智能经常"看不懂"中文句子,让人哭笑不得。在2020年7月举行的自然语言处理领域(NLP)顶级学术会议ACL 2020上,来自创新工场大湾区人工智能研究院的两篇论文入选。这两篇论文均聚焦自然语言处理中文分词领域。据研究人员介绍,分词及词性标注是中文自然语言处理的基本任务,但当前没有比较好的一体化解决方案,而且中文分词普遍存在歧义和未登录词的难题。