分布式数据收集流程的改进及分析

对Platform公司分布式数据收集系统PERF进行研究,针对传统分布式数据收集流程中存在的容易导致数据收集过程中信息丢失、带宽浪费等问题,提出缩减中转环节等一系列方法,对数据的收集流程进行改进。通过分析客户应用该系统后的反馈信息,证明改进措施的有效性。     

大数据时代计算机信息处理技术

随着信息时代的迅速发展和人们要求的不断增加,计算机信息的处理越来越不尽如人意,大数据的出现是电脑处理信息的革新机会.大数据时代计算机信息收集技术是通过各种平台的数据建设,实现大量数据信息的高效收集,建立高效的数据存储系统,让用户可以随时随地收集数据.     

基于XML和正则表达式的气象数据处理系统

随着气象综合观测网建设的不断推进,气象实时数据信息传输种类和数据量急剧增加。同时,气象实时数据信息的传输处理呈现某一特定时段需并行处理多类实时数据信息的特点。为实现气象数据信息高效、可靠、完整、及时的收集、存储和共享,采用XML标记语言对各类实时数据信息的报文内容进行标识和说明的方法,形成各数据业务类型定义,结合基于正则表达式的数据处理应用,使系统具备适应气象观测数据业务变化的能力。实现了对实时气象数据信息在省级中心的收集、处理、分发,改善了原有业务系统繁杂、功能单一、扩展性差、效率低等缺陷。     

WSN中一种基于多sink的快速数据收集算法

数据收集问题是无线传感器网络中的研究热点之一。数据收集方式会影响数据到达sink的准确度、延迟以及网络的能量消耗。针对时间响应和数据准确度要求高的应用,提出了一种基于多sink的快速数据收集算法（QDGA）。sink利用已知的全局信息和计算能力构建出基于最小度的数据收集森林进行任务分发,得到网格粒度最优的数据收集策略,网格内的普通节点通过时隙分配来进行数据收集,并可以根据自身的局部信息动态调整数据收集路径。仿真实验表明,相对于已有的方法,QDGA在保证网络生命周期的前提下,能够有效降低延迟以及提高数据收集的准确率。     

WSN中一种基于网格的并行数据收集方案

数据收集问题是无线传感器网络中的研究热点之一。数据收集方式会影响数据到达sink的准确度、延迟以及网络的能量消耗。针对时间响应和数据准确度要求高的应用,提出一种基于网格的并行数据收集方案(DGSG)。首先,sink利用已知的全局信息和计算能力构建出基于最小度的数据收集森林进行任务分发,得到网格粒度最优的数据收集策略,然后网格内的普通节点通过时隙分配来进行数据收集,并可以根据自身的局部信息动态调整数据收集路径。仿真实验表明,相对于已有的方法,DGSG在保证网络生命周期的前提下,能够有效降低延迟以及提高数据收集的准确率。     

网络安全管理 先从入侵信息收集开始

从总体上来说,网络入侵检测需要分为两个部分:一是入侵信息的收集;二是在收集信息的基础之上,对相关数据进行分析.然后我们网络管理员再根据相关的结果采取对应的措施.可见,数据收集是入侵检测、提高企业网络安全的基础;是一个必须要经历的阶段.     

面向网络爬虫的网站优化策略探讨

作为网络技术发展的产物,网络爬虫能够根据自身逻辑借助网页链接来对网页中所存在的数据信息加以分类收集,并将收集到的信息以数据的形式存储在本地的存储介质中,利用这些爬取到的数据,就能够进行信息的收集与分类等用途,是如今网络信息的主要处理方式之一,也是当前网络搜索的一项核心技术。在网页搜索引擎的建设初期,引擎设计人员就要对网页的信息形式进行优化,提高网页的易用程度,并对网络爬虫进行一定程度的优化。     

"宁夏气象基础数据综合监控系统"初步设计

宁夏气象信息中心负责各类气象资料的收集、处理、传输及共享服务,需要对每一个业务系统的运行情况、每一份资料的处理情况做到心中有数.通过分析本单位对气象数据,从收集到共享全流程进行监控的实际业务需求,提出了"宁夏气象基础数据综合监控系统"架构.该架构以现有业务系统日志为基础,将日志信息收集到宁夏气象基础数据综合监控系统中,在Web界面将各类日志进行集中展示,并通过文字、图形、声音、短信、电话等多种手段为监控人员提供异常信息告警.     

基于校园网的高校教师主动信息服务平台的设计

为改进高校教师传统的信息收集方式,分析了高校教师在教学和科研活动中对信息的需求,在研究主动信息服务和多源数据收集技术的基础上设计出一种基于三层体系结构的组件式教师主动信息服务平台。实际应用表明,该平台不仅能自动收集、整理、分析校园网内的各类动态信息,还能根据教师预先定制的信息需求规则提供及时、可靠的主动信息服务。     

Web环境下生物信息二级数据库的构建

提出一种生物信息二级数据库的构建模式：B／S模式下，首先依据约束规则对各类异质数据进行有效收集，然后对收集的数据尤其是半结构化数据进行解读，进而利用关系数据库管理系统对数据进行存储、管理和维护，通过JSP与JDBC技术提供对数据库的公共访问。据此构建了硒蛋白相关生物信息二级数据库，提供经过加工、分类和整理的硒蛋白相关生物信息。验证了本构建模式的有效性，为探索生物信息二级数据库的构建积累了经验。     

面向海量网络数据的收集方法研究与分析

网络爬虫是当前应用最普遍的针对海量网络数据的收集方法,其通过一定规则和URL自动抓取互联网信息及数据,主要是由程序来实现的.研究和分析了海量网络数据收集方法的理论基础,针对微博用户信息数据收集,提出了一种基于Scrapy框架的爬虫方法.     

安全日志统一收集平台的数据架构设计与实现

1 数据架构 安全日志统一收集平台采集的业务系统信息数据和安全日志数据信息在一定轮询周期（时间较短）内需要进行一次存储,数据特征为数据量大、插入操作频繁、查询操作范围小。因此对采集上来的数据存储逻辑进行优化,     

自由式信息收集平台的设计

随着互联网大数据时代进程的迈进,各行各业也逐渐地认识到了信息收集的重要性。然而以往的信息收集方式较为零散且耗时费力,文章构建了一个帮助众多企业及个人用户进行信息收集的自由式信息收集的网站平台,为信息的提供者及收集者提供方便。     

典型雷达装备质量与可靠性数据库系统设计

典型雷达装备质量与可靠性数据库系统包括雷达质量与可靠性评价系统和质量信息数据收集系统。质量信息数据收集系统提供了有关雷达产品质量与可靠性的信息;雷达质量与可靠性评价系统通过对专家评价意见的收集,利用D-S模糊综合评判算法,计算得到雷达综合评分,从而为质量管理人员提供雷达产品的改进依据。系统提供友好且易操作的用户界面,提高了雷达装备质量与可靠性评价的工作效率和评价的准确度。     

典型雷达装备质量与可靠性数据库系统设计

典型雷达装备质量与可靠性数据库系统包括雷达质量与可靠性评价系统和质量信息数据收集系统。质量信息数据收集系统提供了有关雷达产品质量与可靠性的信息;雷达质量与可靠性评价系统通过对专家评价意见的收集,利用D-S模糊综合评判算法,计算得到雷达综合评分,从而为质量管理人员提供雷达产品的改进依据。系统提供友好且易操作的用户界面,提高了雷达装备质量与可靠性评价的工作效率和评价的准确度。     

上网流量监测管理软件设计与实现

网络监控是为了收集网络行为与状态信息的操作,是网络管理的主要组成部分,其主要功能是为了收集网络的相关信息,包括了动态信息与静态信息,并具有收集网络事件的统计信息的功能。网络流量监测是一个从网络设备上采集数据、解码数据、分析数据的过程。它从网络中采集一些具体的指标性数据,并反馈给监测者。这些数据对网络的资源分配、容量规划、服务质量分析、错误监测与隔离、安全管理都十分重要。这些数据可以用来作为分析网络性能、了解网络运行动态、诊断可能存在的问题,甚至预测可能出现的问题。本文从计算机网络监测的背景和意义出发,首先对计算机网络流量的相关课题背景进行研究,分析了网络流量监控的研究现状,提出了论文主要内容和研究目标;接着介绍了网络流量监控系统业务的概念与发展,描述了系统实现的开发环境。其次,研究了网络流量监控系统的功能需求与性能需求。     

会计信息的系统收集方法

文章介绍了会计信息收集的意义及流程;论述了会计信息技术的概念;提出了会计信息收集方法及分类;定义了业务方法与系统方法、内部信息收集和外部信息收集;离会计信息的系统收集法;利用局域网的内部信息惧重点阐述了会计信息的系统收集法;利用局域网的内部信息收集、利用固特网的外部信息收集、利用数据技术进行信息筛选;通过说明如何在会计收集中使用信息技术,体现了会计信息技术在会计工作中的重要性。     

一个基于XML的WEB数据收集模型的研究

目前研究的热门领域Web数据挖掘是从WWW资源上抽取信息(或知识)的过程,是对Web资源中蕴含的、未知的、有潜在应用价值模式的提取。其一般的过程可表示为:信息的发现、信息的选择和预处理、分析过程、产生结果犤1犦。WEB上的数据收集是对WEB数据挖掘的一种支持技术,是WEB数据挖掘的第一步。该文提出了一种基于XML技术的WEB数据收集模型,并实现了其中的一些主要功能。同时针对模型系统的不足做了一些有意义的改进探索。     

基于活动的数据空间数据关系发现

基于分析用户日常活动间存在的相关性,利用活动与数据间的紧密联系,提出了一种基于活动的数据空间数据关系发现方法.通过分析用户活动发现数据间的隐含关联.利用日志系统收集用户活动窗口信息,从语义、切换、时间等方面计算活动相关度信息,并从中提取生成数据关系信息.系统还可随用户递增的活动信息及用户对数据关系的反馈,更新数据关系信息,提高系统的服务能力.     

数据库设计规范及设计技巧研究

近几年来,我国的经济发展愈发快速,且随着我国现代化进程的不断加快,我国信息化产业的发展已经得到了极为充分的发展空间了。尤其就企业信息收集工作来说,企业信息收集工作是信息化产业链里一个极为重要的组成部分,其是企业满足现今社会信息化要求的基础工作,企业信息收集工作的成功与否,直接决定着企业收集数据的质量以及数据搜索的效率,如何让企业信息收集工作质量满足企业的需求,已经成为企业发展历程里一个重要的课题。同时由于我国市场发展的进程愈发快速,数据库设计的发展也迎来了一个崭新的时期,如数据收集的复杂化、智能化,都可以说是这一时期的最好体现。本文将从数据库设计工作在企业信息收集工作中的意义开始进行分析,就如何更好地使数据库设计工作规范化、智能化进行进一步的探讨、研究。