首页 | 本学科首页   官方微博 | 高级检索  
     

结合词性的短文本相似度算法及其在文本分类中的应用
引用本文:黄贤英,李沁东,刘英涛. 结合词性的短文本相似度算法及其在文本分类中的应用[J]. 电讯技术, 2017, 57(1). DOI: 10.3969/j.issn.1001-893x.2017.01.013
作者姓名:黄贤英  李沁东  刘英涛
作者单位:重庆理工大学 计算机科学与工程学院,重庆,400054
基金项目:国家自然科学基金资助项目,重庆市教委科技计划项目,重庆市社会科学规划博士项目
摘    要:针对基于语义的短文本相似度计算方法在短文本分类中准确率较低这一问题,提出了结合词性的短文本相似度算法( GCSSA)。该方法在基于hownet(“知网”)语义的短文本相似度计算方法的基础上,结合类别特征词并添加关键词词性分析,对类别特征词和其他关键词的词性信息给定不同关键词以不同的权值系数,以此区别各种贡献度词项在短文本相似度计算中的重要程度。实验表明,该算法进行文本相似度计算后应用于短文本分类中较基于hownet的短文本分类算法在准确率宏平均和微平均上提升4%左右,有效提高了短文本分类的准确性。

关 键 词:短文本分类  短文本相似度  词性  hownet语义  分类准确率

A grammatical category-combined short-text similarity algorithm and its application in text categorization
HUANG Xianying,LI Qindong and LIU Yingtao. A grammatical category-combined short-text similarity algorithm and its application in text categorization[J]. Telecommunication Engineering, 2017, 57(1). DOI: 10.3969/j.issn.1001-893x.2017.01.013
Authors:HUANG Xianying  LI Qindong  LIU Yingtao
Abstract:To address the problem that the categorization accuracy of hownet-based short-text similarity calculation method in short-text is low,a grammatical category-combined short-text similarity algorithm ( GCSSA) is proposed. Based on short-text hownet semantic similarity calculation method and combing with categorized features words,this method adds keywords grammatical category analysis,targets at catego-rized features words and the grammatical category information of keywords,gives different weights for differ-ent keywords,so as to differentiate the importance of various items' contribution in the text similarity calcu-lation of short-texts. Experiments show that compared with hownet-based short-text categorization algo-rithm,the proposed method improves the macro-average and micro-average accuracy by 4% in short-text categorization,and improves the short-text categorization accuracy effectively.
Keywords:short text categorization  short-text similarity  grammatical category  hownet semantic  categori-zation accuracy
本文献已被 万方数据 等数据库收录!
点击此处可从《电讯技术》浏览原始摘要信息
点击此处可从《电讯技术》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号