基于Flume的分布式日志采集分析系统设计与实现

互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;同时针对互联网安全的攻击活动也层出不穷,如何在海量的日志中及时提取有效的信息以为企业安全提供信息支撑,也给现有的分析系统提出了新的需求。本文结合使用Flume、Elasticsearch以及Kibana等技术手段提出了一种分布式的日志采集分析系统,从系统设计和架构等方面提出了新的解决思路,并针对Nginx的访问日志进行了实时采集和分析及展示,完成了原型系统的实现,实验证明,基于Flume的分布式的日志采集分析系统方案具有可行性。     

工业用楼宇可视化运维系统研究与实现

现代工业楼宇运维工作中,设备的运维保障水平是衡量楼宇智能化的重要指标之一。在当前工业领域内,楼宇普遍存在信息化水平不高、管理效率低下等问题,这些问题在设备的运维管理过程中尤为突出。该文将自动化集成技术、可视化技术等应用于楼宇设备运维管理体系中,设计并开发了一种智能化、可视化的楼宇运维管理系统。通过简洁、直观的方式协助运维人员完成设备监控、巡检维护等任务,提升了运维人员对楼宇设备的综合管理能力。     

基于大数据的高校智慧校园数据中心运维研究

随着大数据、云计算、物联网等信息技术的应用,高校信息化建设正向着智慧校园时代迈进。由多系统、多业务、多厂商以及多架构组成的数据中心越发复杂,这就对运维管理提出了更高的要求。利用大数据技术实现智慧运维是高校新的发展方向。笔者针对自动化、智能化、可视化运维提出了自己的思路。     

基于WebGIS网络拓扑可视化的研究与实现

网络拓扑结构是整个网络管理系统的基础,将复杂的网络拓扑结构进行置于地理位置的可视化是直观准确地掌握其结构的有效方法.针对这一问题提出了一个适合中等规模网络拓扑、基于WebGIS的可视化方法,该方法的特点是在反映实际地理位置的地图上以分层的方式来显示网络拓扑结构,背景、结点、链路和子网属于不同的显示层次,整个拓扑清晰、明了.详细阐述了该方法的主要思想以及实现过程中用到的关键技术.     

基于Web的可视化研究与实现

本文研究了基于Web可视化的参考模型，设计、实现了两种可视化Web服务器（VWS）原型架构：VRML可视化服务器和基于CORBA的可视化服务器。     

数据中心三维可视化管理软件的设计与实现

在现代数据中心信息化建设中,海量的数据给管理人员带来了大量繁重复杂的工作,使得管理人员效率低下。使用数据中心三维可视化技术,将数据以图形的方式展现给管理者,大幅度加快了管理者处理数据的能力。本文基于J2EE设计了一个B/S架构的三维可视化管理系统,实现了2D展示,3D展示等功能,为数据管理提供了极大的方便。2D、3D化的图形展示使得用户对数据有更直观地认识,便于高效管理。     

可视化虚拟机的研究与实现

基于当前科学计算可视化,特别是程序设计可视化的应用和研究,提出一种可视化的虚拟机,并以BASIC语言作为实现的对象.它不仅可以编译执行BASIC程序,其最大的特点是在程序的执行过程中,动态地同步地演示了程序和数据的视图,为理解算法、学习编程和调试程序提供了便利.     

基于MVC的高校教学大数据可视化设计与实现

高校中分散在各个教学信息系统如招生系统、教务系统、在线学习平台、图书馆系统中的各类教学数据共同构成了高校的教学大数据,利用数据可视化技术将教学大数据以直观、高效的可视化信息呈现可以有效地服务高校领导决策.本文中笔者提出了基于MVC的大数据可视化架构,并以浙江开放大学浙江学习网可视化大屏设计和实现为例,利用德尔菲法和...     

基于Linux防火墙的可视化管理系统的研究与实现

针对Iptables命令配置防火墙规则的复杂性,本系统研究和实现了基于linux防火墙的可视化管理系统。     

基于网格的Web可视化系统设计与实现

面向网格的数据可视化共享地理分布的数据源、分析设备、可视化设备等，提供透明访问能力。基于网格开发了一个Web可视化系统，分为3层：Web页面，Web服务器，可视化服务器。通过JSP为可视化用户提供Web访问界面，内嵌的VisPortal提供网格访问门户；Web服务器通过Portal服务器管理、调度、使用网格资源，协调用户与网格资源之间的交互；基于Vis5D构建的可视化服务器作为网格资源，实现对数值天气模型产生的5-D网格数据集的可视化。     

数据中心IDC资源可视化方案研究与设计

笔者分析了当前市场环境下运营商在资源管理和经营上面临的挑战,基于现实问题设计了一个数据中心资源整合数据结构,在实现基础IDC资源管理的同时,构建了相应的可视化系统,并创新性地加入了历史资源副本机制,从而实现对资源使用情况的趋势分析。     

基于Web的信息可视化系统的设计与实现

可视化技术的发展能够帮助我们加深对大规模复杂数据和信息间相互关系的理解,因此人们针对不同领域开发出各种功能的可视化系统。以高等级生物安全实验室协同工作平台CBL项目为背景,根据生物安全实验室环境监控和生物安全知识库的可视化需求,设计并开发了CBL信息可视化系统。该系统采用基于Web的B/S三层架构,利用MVC设计模式,根据需求分别采用合适的可视化模型开发可视化组件,并根据可视化界面与用户交互的不同方式采用相应的Web客户端技术,方便用户更加高效地获取和理解信息。     

云计算中心运维数据可视化研究

针对云计算中心运维数据分散、可视化程度低等问题,提出了建设基于InfluxDB和Grafana的云计算中心运维指标可视化平台。该平台从多个维度对运维数据进行展示,使用户能够全面了解云计算中心运行情况,提高运维管理工作的效率。     

基于高校数据中心的数据分析

随着信息化技术的快速发展,高校的信息系统日趋完善,各种信息系统如学习平台、教学和办公应用系统都运行在数据中心,数据中心存储了大量的业务信息.对高校数据中心存储的各类应用数据进行抽取、转化和处理,建立面向主题的数据仓库.对系统数据进行挖掘和探索式分析,以可视化驾驶舱的方式直观地展现学校的实际数据状态,通过对数据的可视化分...     

微服务环境下容器编排可视化实践研究

伴随着云计算的快速发展,海量数据等业务需求的处理无法只依赖单体应用程序。微服务软件架构模式以其模块化、可扩展、高可用的应用优势为应用程序的开发带来了新的设计思路。容器是基于共享Linux内核、面向应用的一种新兴的轻量级虚拟化技术,以Docker为代表的容器技术为微服务提供了理想的载体。同时,以Kubernetes为代表的容器编排工具则极大地简化了容器化微服务创建、集成、部署、运维的整个流程。在开发和运维向“面向容器”的转变中,会带来数量庞大且关系复杂的服务组合,此时微服务的创建与部署则变得尤为重要。从易用性角度出发,提供了一种容器编排的可视化方法,实践分析显示,利用此方法进行的微服务部署不仅为研发人员提供了友好型服务创建界面,而且还便利了服务创建过程,提高了开发效率。     

基于分割的肝癌三维可视化研究与实现

提出一种基于分割的肝癌三维可视化方法.利用动态自适应区域生长算法分别把肝脏、肿瘤以及肝内血管从图像中提取出来;通过调用VTK开发包中的MC面绘制三维蕈建算法,对这些器官和组织进行三维绘制.这种方法分割准确.重建的三维器官模型立体感强,形态逼真,便于观察肿瘤与其它器官组织的空间位置关系.     

基于三维GIS的地形可视化研究及实现

给出了一个适用于水利领域的三维可视化系统的组成，介绍了解决超大数据量数字高程模型（DEM）快速显示的算法，将地物在地形中进行显示，研究了基于三维场景空间分析的理论，最后对系统的实现作了简要介绍。实践表明该系统能在PC机上流畅地运行，图形的生成速度和质量令人满意。