基于Hadoop的网络日志分析系统研究

查看网络日志是调查系统故障,监控系统运行状况的重要手段。管理员可以查看在某段时间内所发生的事件,也可以通过对各个日志文件进行分析获取知识。由于日志具有数据量大,不易读懂的特点,如果仅凭借管理员查看日志记录的手段,其中所蕴含的有用信息也难以发现。分布式计算技术正好可以用来解决这一难题。阐述了syslog日志收集流程,详细介绍了Hadoop分布式计算框架,设计并实现了一套基于Hadoop的网络日志分析系统。实验证明该系统是有效而实用的。     

浅谈国产操作系统的推广

操作系统是计算机系统的核心,他的安全是计算机软件安全的基础。在当今的互联网时代,计算机安全关系着一个国家的国防、经济安全。因此拥有自主可控、安全可信的国产操作系统对于国家安全意义重大。     

基于国产安全操作系统的集中存储管控系统

主要介绍以国产安全操作系统为运行环境的集中存储管控系统的研究与设计,系统通过运用“沙箱”、多因素增强身份认证、数据集中加密存储、负载均衡等核心技术,实现对用户文档的安全加密、数据集中存储、终端安全管理、外设封控管理及日志全面审计功能,以达到针对特殊目标用户数据灵活、安全、高效的集中存储管控策略控制.     

网络日志管理分析系统构建技术研究

日志对于系统的日常运维、审计及入侵检测等具有重要作用,如何对日志进行有效的管理和分析是日志系统的重要课题.当前,对日志进行远程集中化管理和分析是普遍认同的有效手段.完整的日志系统包括日志源、日志服务器、日志存储和日志分析四个环节,其中日志服务器具有核心地位.首先介绍了常见的日志服务器系统、客户端软件及前端分析系统,详细说明了功能特性.最后分析了日志系统的部署架构和基本处理流程.     

基于国产操作系统应用软件部署对策的探讨

自美国棱镜计划曝光以来,各国深感在信息领域的安全受到威胁,纷纷提出了相应的解决对策。2014年4月国务院牵头成立信息安全小组,重点讨论将自主可控操作系统以及与之相配套的软件产业作为优先发展的目标。目前我国已经有许多基于Linux内核的国产操作系统版本,但由于缺乏外围配套软件而受到质疑,并未在全国范围内成功推广普及。为此,结合使用国内外诸多已经成熟稳定的Linux开源或者是闭源软件,从技术实现的层面上提出了基于国产操作系统的应用软件部署策略。该方案的研究为国产操作系统的推广和应用提供了可行的现实依据,从而有助于加快国产操作系统的普及速度。     

基于国产操作系统独立GUI应用研究

国产Linux操作系统运行第三方GUI应用软件需要解决软件依赖库问题,官方提供的依赖软件无法满足依赖库环境配置,导致大量第三方GUI应用软件无法在国产操作系统中安装使用.现提出一种利用容器技术把第三方GUI应用软件及其运行环境打包成独立应用软件的方案,使第三方GUI应用软件能够在国产操作系统上运行.以开源的分布式渲染系...     

期待国产操作系统

中国需不需要自己的操作系统？在我看来，这个问题根本就不成为一个问题。在“中国人没有这个技术能力”“搞出来的东西有没有市场”这些方面当然有很多可以讨论的地方，但是“需不需要有自己的操作系统”这个问题上，毫无争议的余地。有无数无可辩驳的理由，需要我们拥有自己的操作系统。当然，当有“需要”是远远不够的。在现有条件的限制下，能不能搞出实用的、被市场接受的操作系统来？下面是笔者对国产操作系统的可行性进行的一些试探性分析，在写作过程中，本人发现其实许多观点自己也没有多大把握（尤其是第一部分，因为本人对有关GUN的东西并不十分熟悉），如有谬误之处，请大家多多指教。为了简便起见，我把这个设想中的操作系统叫做China-OS。     

国产操作系统服务的部署与实现

随着国家对信息安全的重视,国产操作系统也不断发展,逐渐占领了部分市场,已深入到部分行业的核心领域.作为国产操作系统的领导者,中标麒麟操作系统立足于自身优势,不断创新,为国产操作系统的发展添加助力.通过对DNS、DHCP和Samba服务的介绍以及在中标麒麟操作系统上成功部署,验证了国产操作系统服务的可用性,对国产操作系统的发展具有一定的推动作用.     

依托国产操作系统的专业课程思政内容

结合教育部《高等学校课程思政建设指导纲要》精神,从LINUX系统管理专业课程入手,分析课程思政的现状和问题,提出从理论知识学习、课程内涵把握、社会热点互动、逆向案例设计和思政目标反馈5个维度的专业课程思政内容研究方法,具体阐述如何依托国产银河麒麟LINUX操作系统,把思政元素融入到专业课程的教学实践环节及学习考核中,在专业课程教学中引导和培养学生坚定信念,提升专业课程思政的吸引力和实效性。     

大规模软件系统日志研究综述

规范和充分的日志是良好代码质量的必要因素,也是软件故障诊断的重要手段.然而,代码的质量管理受限于大规模软件代码的高复杂程度,目前,利用日志信息进行软件故障重现和诊断的难度大、效率低.从日志特征分析、基于日志的故障诊断、日志的增强这3个方面综述了日志研究的现状.通过对几种常用的大规模开源软件的日志进行调研,发现了一些日志相关的特征和规律以及现有工具难以解决的问题.最后,对未来的研究工作进行了展望,并分析了可能面对的挑战.     

基于系统日志文件的计算机系统脆弱性分析

随着信息社会的发展,计算机系统的安全是信息社会中信息安全保障的重要部分之一。文章根据Windows系统、数据库系统、防火墙系统的日志文件形式、结构、内容的组成,分析了在计算机操作系统、网络系统中日志文件的安全性及其安全作用,并阐述了实现计算机系统脆弱性分析的根源。     

操作系统日志的行为挖掘与模式识别

文章提出了对操作系统日志进行用户行为挖掘和系统状态模式识别的设计策略,该设计能够准确细腻的分析Audit二进制日志,对用户的行为包括用户的登录登出,用户身份切换,命令操作等进行高精度挖掘,以及对系统的服务启动与关闭,关键文件状态变化等系统状态进行识别。从而为操作系统的安全、补救、恢复提供有效的支持保障。该系统基于面向对象设计,有良好的扩展性和易部署性,具有广阔的市场应用前景。     

系统日志模板提取方法研究

提取日志模板是处理海量系统日志十分有效的方法.本文以Web系统日志为切入点,采用基于标签识别树的模板提取方法提取日志模板,并在其基础上,研究并完善了其日志预处理和模板表达式生成方法.针对于系统日志普遍存在的结构复杂问题,具体采用了基于文本相似度的预处理方法,实现了日志消息分类;采用模板最大匹配的方法,解决了由于日志格式不统一和切词导致的模板匹配度低的问题.最后,对本次日志模板提取方法的实验进行了评估,结果证明该方法的准确率达到96.4%,且模板匹配度大幅上升.     

基于日志挖掘的装备健康管理系统设计与实现

随着装备的复杂度和信息化程度不断提高,在装备使用过程中产生的日志信息量正以指数级增长。针对目前日志信息处理应用中存在的问题,设计并实现了一个装备健康管理系统,通过对某型装备大量日志文件的分析,制定了设备通用的日志文件预处理规则和重要信息提取适配器,并结合数据挖掘算法构建装备健康管理系统,结合云重心评估法实现了对设备健康状态的评估。该系统从大量日志文件中提取出有价值的信息,帮助设备人员快速定位装备异常,提高解决问题的效率,通过设置系统的关键指标和监测点阀值,实现装备的健康预警。     

基于web日志挖掘的网络教学系统的设计与实现

现有的网络教学系统,虽然自身信息量极其丰富,但教师对学生的学习情况缺乏了解,无法满足学生个性化的学习需求。Web日志全面记录学生网上学习的行为,是解决问题的有效方法,文章设计并实现了Web日志挖掘系统,从中发现相似的学生群体,以及浏览兴趣路径,帮助教师及时调整站点结构提供宝贵的建议参考。     

基于OSGi的分布式系统集中日志管理方案

目前分布式业务应用的日志多存储在各分布式服务器节点本地日志文件中,没有集中存储和管理,导致业务系统问题定位速度慢,解决问题效率低.本文提供一种基于OSGi的分布式日志收集与分析技术方案.该方案单独设计了集中的日志存储服务器用于存储日志,并提供一套通用日志模型,业务应用分布式节点向该设备发送基于该模型的日志数据,日志存储服务器接收到各节点的日志数据后进行统一存储和界面化分析展示,帮助开发人员快速定位和分析问题.该方案以OSGi插件形式部署到应用系统,应用卸载该插件后则以原有方式存储日志.应用结果表明,采用该日志管理方案对1000并发下记录日志的业务应用访问性能平均提升2秒,并且没有日志数据丢失.开发人员反馈,错误日志更加一目了然,定位问题的时间明显短于普通的日志存储方式.     

面向多平台的日志远程采集系统研究

日志对于系统的日常运维、审计及入侵检测等具有重要作用,对日志进行远程集中化管理是日志管理的有效手段。由于不同操作系统平台上支持的日志格式不统一,传统上很难将大型网络中不同系统的日志远程采集到集中的日志服务器上。nxlog是一种支持多平台的功能强大的日志采集工具,部署方便,可以在目标系统上持续稳定地收集系统日志,并支持以多种日志格式和传输模式将日志发送到远程日志服务器。同时,Syslog作为一种工业协议,也得到了越来越多的支持。基于nxlog并配合成熟的日志服务器可以构建灵活可靠的系统日志远程采集系统。实际运行结果表明该方案可有效解决大型网络中系统日志远程采集的问题。     

EAST PCS日志管理系统的设计与实现

EAST等离子体控制系统日志文件大且繁,不便于系统对错误类型的统计分析,也不能快速找到错误原因,给实验带来了极大的不便.基于这样的背景,有必要挖掘日志信息,建立等离子体控制系统的日志数据库,并开发基于B/S模式的管理系统.日志数据库的建立是通过正则表达式提取出日志文件中的特征信息,信息经过抽取整合后存入关系型数据库;系统前端采用Apache、PHP、MySQL进行开发,为不同角色的用户提供良好的交互平台,实现了日志信息查询、评论管理和用户管理功能.