隐马尔可夫模型在中文文本分词中应用研究 |
| |
作者单位: | ;1.辽宁行政学院 |
| |
摘 要: | 文本分词是各个互联网领域中的基础性工作。通过对平台涉及的文本串进行切词处理,对切词之后的短文本串更能够聚合用户。隐马尔可夫模型作为机器学习领域中重要算法,它能够进行各个状态之间的转换,对于文本中词语之间上下文语义关系、词语与词语之间前后向位置关系非常匹配,众多的开源分词工具都基于隐马尔可夫模型。
|
关 键 词: | 文本分词 上下文语义 隐马尔可夫模型 |
Research on chinese word segmentation based on hidden Markov model |
| |
Abstract: | |
| |
Keywords: | |
|
|