藏文自动分词系统中虚词识别算法研究 |
| |
作者单位: | ;1.西藏大学藏文信息技术研究中心;2.西藏民族大学 |
| |
摘 要: | 在分析现有藏文自动分词方法的基础上,针对藏文分词系统中虚词识别的难点进行深入研究。根据传统藏文文法,描述了藏文虚词在文本中不同的表现形式,用规则和统计相结合的方法,建立了较为全面的虚词知识库和规则库,并给出切分用虚词分块算法,该方法在不同领域的3 200个较典型的藏文句子进行了测试,结果表明,该方法的虚词识别率高达98%以上。
|
关 键 词: | 藏文自动分词 藏文信息处理 虚词识别 藏文虚词 |
RESEARCH ON FUNCTION WORD RECOGNITION ALGORITHM IN TIBETAN AUTO-SEGMENTATION SYSTEM |
| |
Abstract: | |
| |
Keywords: | |
|
|