一种维吾尔语句子相似度算法的研究

基于实例的机器翻译是一种重要的机器翻译技术,句子相似度的衡量是基于实例机器翻译研究中最重要的一个内容。对于基于实例的维吾尔语机器翻译研究,维吾尔语句子相似度衡量的准确性,直接影响到最后翻译结果的输出。提出了一种维吾尔语句子相似度的计算方法,采用的基于词形特征的粗选算法、散列单词倒排索引能够有效提高算法的查找速度,快速从语料库中筛选出候选句子集合;多策略精选算法中采用基于维吾尔语词频的单词区分度算法、连续单词序列抽取算法,可以有效衡量两个维吾尔语句子的相似程度,实验结果证明算法是有效的。

Similarity measure algorithm of Uyhur sentence

Example-Based Machine Translation(EBMT) is an important branch of machine translation.Sentence similarity measure certainly is one of the most important problems addressed in EBMT,the performance of similarity measure of Uyhur sentences affects directly final translation result of an input sentence.This paper proposes a similarity measure algorithm of Uyhur sentence. The retrieval approach of candidate translation examples based on word surface features and word inverted index can get candidate sentence set...