|
|||||
|
|
| 高性能中文垃圾邮件过滤器 | |
| 引用本文： | 齐浩亮,程晓龙,杨沐昀,何晓宁,李生,雷国华.高性能中文垃圾邮件过滤器[J].中文信息学报,2010,24(2):76-84. |
| 作者姓名： | 齐浩亮 程晓龙 杨沐昀 何晓宁 李生 雷国华 |
| 作者单位： | 1. 黑龙江工程学院 计算机科学与技术系,黑龙江 哈尔滨 150050; 2. 哈尔滨工业大学 计算机科学与技术学院,黑龙江 哈尔滨 150001; 3. 哈尔滨理工大学 计算机科学与技术学院,黑龙江 哈尔滨 150080 |
| 基金项目： | 国家自然科学基金重点资助项目(60736044);;国家自然科学基金资助项目(60873105);;黑龙江省科技攻关计划资助项目(GZ07A108) |
| 摘 要： | 设计并实现了基于在线过滤模式高性能中文垃圾邮件过滤器,能够较好地识别不断变化的垃圾邮件。以逻辑回归模型为基础,该文提出了字节级n元文法提取邮件特征,并采用TONE(Train On or Near Error)方法训练过滤器。在多个大规模中文垃圾邮件过滤公开评测数据上的实验结果表明,该文过滤器的性能在TREC 06C数据上优于当年评测的最好成绩,在SEWM 07立即反馈上1-ROCA值达到了0.000 0%,并明显优于SEWM 08评测在线过滤任务中的所有其他方法。 |
| 关 键 词： | 计算机应用 中文信息处理 中文垃圾邮件过滤 在线学习 逻辑回归模型 字节级n元文法 TONE |
High Performance Chinese Spam Filter |
|
| QI Haoliang,CHENG Xiaolong,YANG Muyun,HE Xiaoning,LI Sheng,LEI Guohua.High Performance Chinese Spam Filter[J].Journal of Chinese Information Processing,2010,24(2):76-84. | |
| Authors: | QI Haoliang CHENG Xiaolong YANG Muyun HE Xiaoning LI Sheng LEI Guohua |
| Affiliation: | 1. Computer Science and Technology Department, Heilongjiang Institute of Technology, Harbin, Heilongjiang 150050, China; 2. School of Computer Science and Technology, Harbin Institute of Technology,Harbin, Heilongjiang 150001, China; 3. School of Computer Science and Technology, Harbin University of Science and Technology, Harbin, Heilongjiang 150080, China |
| Abstract: | We designed and implemented a high performance Chinese spam filter.Online filtering mode is adopted in order to defense the evolution of spam emails.Logistic regression model is used as its filtering model;byte level N-gram is put forward to extract email's features;and the filter is trained with TONE(Train On or Near Error) method.The performance of our filter is evaluated on Chinese spam corpora.It outperforms the best system in TREC 06 spam filtering track,gets 0.0000% of 1-ROCA on SEWM07 immediate feedb... |
| Keywords: | computer application Chinese information processing Chinese spam filtering online learning logistic regression model byte N-gram TONE |
| 本文献已被 CNKI 万方数据 等数据库收录！ | |
| 点击此处可从《中文信息学报》浏览原始摘要信息 | |
| 点击此处可从《中文信息学报》下载全文 | |