文本分类综述及手机垃圾短信过滤方法的研究

主要介绍了文本分类问题,讨论了文本分类所涉及的关键技术,包括中文分词,文本表示,特征选取方法,以及Rocchio、朴素贝叶斯、K近邻、决策树、神经网络和支持向量机等文本分类算法的原理和方法.最后,给出了基于文本分类技术的中文垃圾短信过滤方法的实验和结果.     

数据挖掘在垃圾短信过滤中的应用

针对手机垃圾短信泛滥、治理效果不佳的问题,基于运营商现有业务平台,借助统计分析和数据挖掘技术设计了垃圾短信过滤系统,提出了垃圾短信过滤闭环流程图;系统根据动态荻取的垃圾短信数据自动生成过滤规则,在信息转发阶段对垃圾短信进行过滤.结合某省运营商短信运营数据对垃圾短信过滤进行了实证研究,在分析样本短信数据的基础上确定了建模特征属性集,采用决策树推进算法获取了垃圾短信的过滤规则,并设计了垃圾短信过滤方案,从准确率和覆盖率两方面进行了验证,取得了较好的效果.     

基于Symbian OS短信智能过滤设计与实现

分析了目前短信过滤2种方式的局限性,论述了对已知号码运用黑白名单过滤和对未知号码运用有害信息特征库扫描短信内容的方法,采用面向对象和组件化的思想,设计和实现了一种在基于Symbian OS手机的短信智能过滤系统.论文从系统设计目标出发描述了系统总体结构,介绍了用户界面和过滤引擎组件.对过滤引擎的关键类进行了详细描述.     

基于朴素贝叶斯和支持向量机的短信智能分析系统设计

为了解决垃圾短信的骚扰问题,提出了一种基于朴素贝叶斯和支持向量机的短信智能分析系统架构。考虑朴素贝叶斯的快速统计分类及支持向量机的增量训练等特点,将其应用于垃圾短信过滤中,并对关键词库进行及时更新,使得系统具有更好的自适应性。对某移动通信运营商提供的12万条短信进行反复实验,结果表明:该方法可有效地解决当前垃圾短信过滤系统中存在的问题。     

基于内容的手机端垃圾短信过滤策略研究

针对目前垃圾短信日益猖獗的现象,研究了一种基于内容的垃圾短信过滤策略。对训练语料进行分词和统计,计算信息增益并通过选取信息增益较大的若干特征项实现特征降维。在短信分类器的设计上,依据朴素贝叶斯算法,进行改进,减小了个别特征项对判断结果的直接影响,使得分类策略更能综合所有特征项的影响因素。实验结果表明,该方法对于手机用户能取得较好的垃圾短信过滤效果。     

基于支持向量机技术的垃圾邮件过滤系统

使用基于统计学习理论的支持向量机(Support Vector Machine,SVM)技术来构造垃圾邮件过滤系统.利用2个公开的邮件语料PU1和PU2来训练和测试过滤系统的性能.实验首先测试了语料的6种数据子集对过滤系统的分类错误率的影响情况,随后考察了采用不同类型核函数的SVMs准确率性能,最后考察了采用不同特征规模的数据集对过滤系统的影响.实验结果表明SVM技术是解决垃圾邮件过滤问题的一种很有效的方法.     

变电站消防与安防综合监控系统的设计与实现

本文描述了一款变电站消防与安防综合监控系统设计的背景、网络架构和主要技术,总结了系统开发中涉及到通信、数据库、远程控制、语音、视频以及短信等技术应用的实现方法。     

基于Android手机智能防火墙的研究与设计

针对Android手机平台遇到的相关安全问题进行解析,提出并设计了Android智能防御策略,实现了通讯防骚扰、应用权限管理和程序联网监控等智能防御方法。即利用Android系统广播机制的公开性和全局有效性,提出相关的通讯监听器对来电和关键字及其语义的短信进行智能过滤;利用系统Framework层日志加载的实时性和准确性,设计出软件启动日志信息的扫描器对第三方应用启动进行监控;利用Android系统是基于Linux 2.6.x内核开发并自带IP包过滤系统的特性,设计了应用联网限制的易用脚本的前台系统。通过全面的功能性测试,验证了该智能防火墙能为Android智能手机用户提供安全和隐私的实时保护。     

一种动态调整训练集的中文文本分类系统

对文本特征表示模型和文本特征提取方法进行了探讨,分析了分类效果的影响因素,设计了一种动态调整训练集的文本分类算法,并结合支持向量机验证了该分类系统的类别特征信息和分类适应性.     

中文文本理解技术在法律案情文本分类中的应用

阐述了中文文本自动分类技术在法制领域中对描述案情的法律文本自动分类的改进及应用,并初步构建了一个中文法律案情文本分类系统.该系统在Visual C 环境上编程实现,通过对测试集中文本实验结果的分析,表明该方法具有一定的分类功能.     

指纹向量在垃圾邮件检测中的应用

大量重复发送的邮件是垃圾邮件的主要生成方式,为检测这种类型的垃圾邮件,作者提出了一种基于指纹向量的自适应垃圾邮件过滤方法.该方法中,每封邮件通过q元取样后映射成指纹向量,如果两个邮件的指纹向量的距离较小,则认为其属于同一个类别.该方法具有计算速度快、占用计算资源小的优点,与传统的贝叶斯算法相比具有较优的性能,在TREC2007数据集的实验结果验证了所提出方法的有效性.     

基于逻辑回归模型的中文垃圾短信过滤

设计并实现中文垃圾短信过滤器,能够较好识别不断变化的垃圾短信。以逻辑回归模型为基础,提出字节级n元文法提取短信特征,并采用TONE（Train On or Near Error）方法训练过滤器。通过实验测试,证明应用该方法实现的垃圾短信过滤效果很好。     

基于组播访问管理协议的安全组播访问控制方案设计

提出了一个基于Internet组管理协议的安全组播接入控制方案。边缘路由器拦截用户申请加入互联网组管理协议组播组的请求数据包,将组播传送到管理中心;组播管理中心处理该请求并返回相关信息;边缘路由器的组播管理中心根据决策信息处理的相应要求,决定是否允许用户加入组播组,以实现多播的访问控制。该方案克服了传统的多播路由器不具有的访问控制功能的缺点,该组播管理中心可以减少对路由器的负担,减少计算开销,存储开销和通信成本,提高性能和安全性。     

铣削过程中切削功率的数据采集和预处理

介绍了一种具有人工参与的铣削加工离线控制系统；讨论了由主轴电机变频器获取切削功率信号的方法，以及该信号的特点；设计了相应的检测电路和滤波电路，得到控制过程所需的缓变信号，并利用PCL 812PG数据采集卡对信号进行采集和数字信号预处理，大大减少了数据处理的时间，提高了实时性，为控制系统提供了有效的状态信息.     

工业以太网非周期数据通信实时性分析

为了找到评估和改进EPA工业以太网通信实时性的方法,对EPA非周期报文的通信实时性能进行了研究. 通过分析EPA网络的通信调度机制和延迟产生机理,根据报文进队时机的不同,建立了4种非周期报文进队模式,并且分别对各个模式的调度特征、通信延迟和相互影响规律进行了分析,提出了非周期报文通信实时性理论模型. 通过理论分析和实例验证,发现3个制约非周期报文通信实时性的主要因素：①非周期报文传输的优先级反转;②通信调度机制的开销;③放弃发送权竞争后进队报文的处理方式.     

改进的两步卡尔曼滤波器在惯导平台误差模型辨识中的应用

根据系统特性,将原两步卡尔曼滤波算法进行了简化,并引入自适应滤波方法以防止滤波发散,得到了改进的新算法。理论分析及仿真结果表明,该新算法计算量较扩维卡尔曼滤波算法小,而且可有效克服滤波发散现象。     

Electronic stabilization of catadioptric panoramic image

An effective algorithm of electronic image stabilization (EIS) of catadioptric panoramic imaging system for track robots is presented. The key techniques of this algorithm are as follows:① A model of electronic image stabilization is built by analyzing the imaging theory and the principle of EIS, and the image shift function of unwrapped panoramic image is deduced;② The relationship equation between motion estimation parameters of annular panoramic image and motion estimation parameters of unwrapped panoramic image is developed according to the constrained aspect ratio of real objects, motion parameters of annular panoramic image are firstly estimated, and then motion parameters among the image shift function are carried out according to the relationship equation;③ An excessive stabilization threshold is presented to prevent the phenomena of excessive stabilization, and the Kalman filtering is adopted to smooth the image sequences. Numerical experimental results show that this algorithm can effectively smooth out the unwanted motion and follow the intentional camera movement under certain resolutions.     

基于决策倾向度的样本过滤与主动选择

该文提出了基于过滤函数的粗糙集样本决策倾向度动态调节与主动选择方法。首先定义样本过滤函数,从而确定样本选择或丢弃的依据;然后依次添加新增样本,根据过滤函数决定样本的去留,同时根据阈值指标调节已有样本的决策倾向度;最终建立有效的决策样本库,并在此基础上进行属性约简。本方法克服了传统变精度方法实现过程复杂、计算量大的问题,可有效地去除噪声数据,提高系统的鲁棒性。数据实验结果表明,该方法可以有效地压缩数据,提高样本分析质量。