未登录词识别算法的改进

未登录词识别是中文分词系统的两大难题之一。它时提高中文分词最终的正确率和召回率起着重要的作用。本文提出一种改进的未登录词识别算法，通过统计分析大规模语料库及未登录词词表，对前人的成词规则进行改进．并结合限制性成分时所识别的未登录词进行纠正，得出较准确的未登录词识别结果。该算法是规则和统计相结合并且侧重于规则的识别算法，是中文分词中比较有效的未登录词识别算法之一。