基于VSM不良文本过滤系统的硬件实现

互联网的迅速普及,给社会生活带来巨大进步,也带来了一系列的安全问题,诸如反动、色情等不良信息得以广泛传播,极大地危害了人们正常的学习和生活。论文围绕不良文本过滤这个主题,分析了现有的文本过滤系统的优点和不足,并通过研究VSM,设计了一个网络不良文本过滤系统,同时在硬件上予以实现。     

基于文本分类技术的信息过滤方法的研究

针对目前网络上不良信息变换不同方式逃脱过滤以及中文分词器分词后存在的问题，提出了基于文本分类技术的信息过滤方法，通过在原有的文本自动分类系统中添加三个过滤模块，以过滤掉无用信息、单个独立字、敏感信息等不良内容，从而保障分类安全高效。     

计算机应用

0634240基于小波变换和支持矢量机的调制信号识别[刊,中]／赵福才／／电子信息对抗技术．-2006,21(5)．-11-14, 39(G) 0634241基于VSM不良文本过滤系统的硬件实现[刊,中]／吴长瀛／／信息安全与通信保密．-2006,(9)．-113-115 (L)互联网的迅速普及,给社会生活带来巨大进步,也带来了一系列的安全问题,诸如反动、色情等不良信息得以广泛传播,极大地危害了人们正常的学习和生活。论文围绕不良文本过滤这个主题,分析了现有的文本过滤系统的优点和不足,并通过研究VSM,设计了一个网络不良文本过滤系统,同时在硬件上予以实现。参5 0634242空间信息系统COTS技术下的抗辐射设计[刊,中]／李毅／／单片机与嵌入式系统应用．-2006,(10)．-8-11 (C)     

基于χ~2统计量的不良文本过滤特征选择方法

针对现有以χ~2统计量为基础的特征选择方法在不良文本过滤过程中效果欠佳的问题,利用双层分类对特征选择方法进行改良,提出一种不良文本过滤特征选择方法。首先通过改良逆文档频率来区分特征项在所属类别类内与其他类别之间的分布差别;其次,引入逆类别频率弥补抑制强度;最后,加入逆上层类别频率,清晰划分具有较高相似度的某两类二层类别。所改良的特征选择方法能够弥补现有χ~2统计量在类内/类间特征项分布情况判别能力的缺陷,将其应用于不良文本过滤过程,能够充分贴合不良文本过滤过程的特征选择需求。通过对比评估指标的结果,表明所提方法在不良文本过滤领域具有更好的效果。     

一种针对不良主题的文本过滤方法

针对不良文本的过滤问题,文章提出了一种基于SVM分类器改进的文本过滤方法。该方法将传统的基于词语的分类方法改为基于词语元组的分类,增强了特征项的分辨率,实验表明该方法同传统的过滤方法相比具有较高的准确率和召回率。     

Web内容过滤中的数据预处理模块设计

Web内容过滤是将模式识别和文本分类的方法应用于通过服务器或个人终端的数据流上，实现不良或无关信息过滤的行为模式。之后介绍了典型的数据预处理技术，指出大量无关或冗余数据以及中文字符集的多样性影响了过滤的效果。提出了改良的数据预处理模块，其中引入了主体文本提取和中文字符集自动识别转换等技术。结合实验和实际系统应用说明了改良模块的作用，并给出了进一步的努力方向。     

面向网络不良文本过滤的概念网技术研究

随着网络的普及,网络上的各种不良文本信息也日益增多,如何对这些不良信息进行监控和过滤成为新的研究课题。文章在相关研究基础上,提出了一种基于语义分析的概念网络构建方式,并介绍了基于此概念网络的文本过滤分析算法。     

基于知网的概念特征抽取方法

文本特征抽取是文本过滤的一项重要基础,但通常采取的用字、词作为特征项的显著缺点是无法表达文本的语义信息,所以本文在向量空间模型的基础上提出了一种以知网为语义知识库、基于语义信息的文本特征项抽取方法。该方法比单纯的词汇信息更能体现文本的概念特征,提高过滤系统的性能;同时还能降低文本向量的维数,减少计算量,提高过滤效率。我们在引入了该方法的中文文本过滤系统上进行的实验结果也充分证实了其有效性。     

模式匹配在条件接收系统中的应用

条件接收系统(CAS,Conditional Access System)是付费数字电视的核心技术。本文首先介绍文本过滤在条件接收系统中的重要性,接着阐述了如何使用模式匹配算法来对CAS中的信息内容建立过滤机制,并介绍文本过滤在工作中的重要作用。     

基于汉字部件组合的关键词过滤技术

关键词过滤是基于文本内容过滤中最为常用的一种方法,有着广泛的应用.汉字由部件组成,将汉字拆成部件给关键词过滤造成了困难.提出了基于汉字部件组合的关键词过滤技术,依托于汉字结构标注库,运用改进的多模式匹配算法处理海量文本内容.实验结果证明,该方法能够找出被故意拆分的关键词.     

基于特征向量的文本信息过滤算法研究

随着信息技术的迅速发展,网络已经逐步成为人们生活当中不可或缺的信息传播工具。由于网络资源的大量使用和信息的大量传输,导致信息过载及安全等问题日益突出。为了解决信息过滤的过滤精度和效率瓶颈等问题,这里详细地对文本信息过滤的主要过程、文本表示方法、特征向量获取、相似度计算等技术进行研究,提出一个基于特征向量的文本信息过滤算法。该过滤算法有效地平衡了计算负载,具有较高的信息过滤性能。     

一种改进的KMP算法在不良网站信息过滤中的应用

针对网络信息过滤的特点和现实中人们对网络信息纯净度的要求,提出了一种基于KMP字符串匹配算法,对不良网站信息进行过滤和相应的性能测试。在测试环境下,对100组非法网站进行过滤,得出对不良信息过滤查准率达到95%,查全率达到98%,通过对测试数据的分析和网络吞吐量的测试结果表明,该方案所设计的系统性能基本能够满足实际需要。     

基于语义的文本信息安全过滤平台

信息安全是人们关注的焦点,从传统的基于行为的安全向基于内容本身的安全不断发展,信息安全的外延在不断扩大。Internet提供的海量、庞杂的信息中,不良信息以不同的表现形式,从不同的角度对不同人群造成毒害或干扰。因此,对网络访问进行必要的、有效的内容过滤是营造健康安全网络环境的重要环节。但是,传统的文本信息过滤算法仅能实现结构对应层次上的判断,无法体现文本的语义,过滤效果难以满足智能化的要求。文中结合计算机语言学知识,提出并实现了一种语义分析的过滤方法,对于那些冗长文本中因为分散存在的关键字而造成的假匹配,通过语义分析,可以很好地甄别处理,从而提高系统的召回率。     

基于姿态模型的图像内容过滤防火墙的研究

文章提出了一种新的图像内容过滤防火墙,针对姿态模型进行图像内容分析,综合应用多种算法对图像的姿态特征进行描述,通过计算截获图像与基准特征库中图像特征的相似度决定是否过滤网页,以此来监控不良网页信息,保护健康文明的网络环境。     

上海世博TD-LTE演示网安全解决方案

本文基于上海世博TD-LTE演示网,简要介绍核心网SAE的建设情况及系统架构,并进一步探讨,核心网SAE的网络级安全保障机制,特别地,针对不同厂商核心网设备覆盖不同世博场馆的应用场景,本文介绍了一种在不同厂商核心网设备间保证数据卡入网鉴权兼容性的技术方案。最后,从业务安全性层面,提出了基于现网不良信息监控系统,部署TD-LTE演示网公网业务的安全性保障方案及建议。     

基于胜任力模型的社交网络意见领袖识别方法

提出了社交网络意见领袖的胜任力模型,模型中包括社交网络意见领袖所应具有的信息生产、信息传播以及信息影响3大能力要素及各个显性和隐性行为指标。根据胜任力模型,将社交网络用户划分为普通大众、活跃分子、主题意见领袖和网络意见领袖等4类,设计了意见领袖的层次筛选流程和筛选实验系统框架。以采集到的新浪微博数据为例,通过整合主题分类工具MALLET及多种社交网络分析工具,再采用Python语言针对特定功能编程,实现了意见领袖的识别。实验验证了识别模型的有效性和层次筛选方法的可行性。     

基于凝聚子群分析的MSN监控系统

论文将社会网络的派系分析思想引入到MSN通信系统的内容过滤和分析中,从社会网络分析中凝聚子群的角度对以MSN构成的网络进行详细的分析,通过对凝聚子群和关键节点的分析,提取派系划分,派系首领和重要参与者等有效信息,以实现对MSN通信网络中不良内容的有效监控和阻断。     

一种面向运营商CDN业务的不良信息检测方案 设计与实现

本文主要描述一种面向运营商CDN业务的不良信息监测方案与实现方法,此方案补全了通信运营商网络不良信息监测治理方案在CDN业务方面的缺失,实现对CDN业务中不良信息的监测和处置,完善了电信运营商不良信息治理能力。