| 基于语义信息的中文短信文本相似度研究 |
| |
| 引用本文： | 刘金岭,宋连友,范玉虹.基于语义信息的中文短信文本相似度研究[J].计算机工程,2012,38(13):58-60,70. |
| |
| 作者姓名： | 刘金岭 宋连友 范玉虹 |
| |
| 作者单位： | 1. 淮阴工学院计算机工程学院,江苏淮安,223003
2. 沧州师范学院计算机系,河北沧州,061001 |
| |
| 基金项目： | 河北省科技支撑计划基金资助项目，淮安科技计划基金资助项目 |
| |
| 摘 要： | 在传统TF-IDF模型基础上分析中文短信文本中特征词的语义信息，提出一种中文短信文本相似度度量方法。对短信文本进行预处理，计算各词语的TF-IDF值，并选择TF-IDF值较高的词作为特征词，借助向量空间模型的词语向量相似度，结合词语相似度加权，给出2篇短信文本相似度的计算方法。实验结果表明，该方法在F-度量值上优于TF-IDF算法及词语语义相似度算法。
|
| 关 键 词： | 短信文本 相似度 TF-IDF模型 特征词 向量空间模型 |
| 收稿时间： | 2011-09-09 |
Study of Chinese SMS Text Similarity Based on Semantic Information |
| |
| LIU Jin-ling
,
SONG Lian-you
,
FAN Yu-hong.Study of Chinese SMS Text Similarity Based on Semantic Information[J].Computer Engineering,2012,38(13):58-60,70. |
| |
| Authors: | LIU Jin-ling SONG Lian-you FAN Yu-hong |
| |
| Affiliation: | 1.Computer Engineering Faculty,Huaiyin Institute of Technology,Huai’an 223003,China;2.Department of Computer,Cangzhou Normal University,Cangzhou 061001,China) |
| |
| Abstract: | This paper analyzes the semantic information of characteristic words in Chinese SMS text based on the traditional model TF-ID,and proposes a Chinese SMS text similarity measurement method.It preprocesses the SMS text,calculates TF-IDF values of each word,and selects high TF-IDF value of words as Key words.With word vector similarity of the Vector Space Model(VSM),combined with the word similarity weighted,it gives two SMS text similarity computing method.Experimental results show that the F-measure of this method is better than TF-IDF and word semantic similarity algorithm. |
| |
| Keywords: | SMS text similarity TF-IDF model characteristic word Vector Space Model(VSM) |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
| 点击此处可从《计算机工程》浏览原始摘要信息 |
|
点击此处可从《计算机工程》下载全文 |
|
