云计算分布式缓存技术在海量数据处理平台中的应用

随着云计算和大数据时代的到来,在满足用户对系统访问量、访问速度、访问安全的要求的同时,系统必须实时准确地处理迅猛增长的海量数据,而传统的缓存技术无法满足海量数据处理和用户高并发访问的需求.分布式缓存技术是最好的高性能缓存解决方案.本文研究如何利用云计算下分布式缓存技术在海量数据处理平台中解决该问题,分析研究了分布式缓存的关键技术、分布式缓存的一致性和分布式内存数据管理.在此基础上,分析并设计了分布式缓存系统的部署和整体架构.并将该分布式缓存系统的设计模式应用在某团购网上,进行了POC测试.测试结果证明分布式缓存技术可以缓解服务器的压力,解决海量数据和超高并发数据访问所带来的问题,提升了系统的性能、访问速度、可靠性以及降低响应延迟.     

基于接口的性能测试数据自动化处理

软件系统在满足用户复杂的功能需求的同时,架构和实现上也变得复杂,系统在运行过程中就可能出现各种问题,特别是在高用户并发和大数据规模的情况下,系统的运行性能问题就慢慢暴露出来了,系统资源占用高,系统运行不稳定甚至出现系统崩溃,业务操作响应慢甚至无法响应,最终导致系统的用户使用体验越来越差。一般情况下,需要对应用系统开展软件性能测试和调优测试,通过性能测试验证和掌握应用系统的整体性能状况,定位应用系统的性能瓶颈,更进一步地进行应用系统的性能诊断分析和性能调优。性能测试通常会产生大量的测试结果数据,如何高效地整理、采集、分析这些测试结果数据,提高性能测试工作效率,文章将基于这个问题对基于接口的性能测试数据自动处理展开讨论。     

CRM的自动化测试研究

业务支撑系统是一个非常庞大的计算机软件系统,进行全系统地毯式全覆盖测试需要引入自动化测试的方法,包括数据准备、测试执行、结果校验等环节。     

RAID5小写更新的冗余管理机制

为改进传统RAID5机制小写性能低下问题,提出了一种高性能的冗余数据读写机制RMB(RedundancyManagement for RAID5).RMB采用异步冗余校验方法APC(Asynchronous Parity Calculating),对现有RAID5更新算法的关键步骤进行了优化,将统一计算校验块的同步操作拆分成同步镜像写更新和异步冗余计算更新.该操作分解了数据与其校验数据更新的紧耦合现状,提升了写操作并发度;通过合并多个版本镜像块写操作减少异或计算操作的次数.通过实验验证表,RMB机制,可将小写性能大幅提高,峰值可达4倍以上.     

自动拨测在集团客户短信业务网络监控中的应用研究

从集团客户短信业务网络特点出发,总结其网络监控的难点,提出利用自动拨测原理进行短信业务的端到端网络性能监控.通过搭建短信业务自动拨测系统,对短信业务网络进行轮询测试,获取端到端网络性能质量数据,能够在主动监控、故障预处理、故障定位、业务入网及网络调整后业务测试等方面发挥较好的作用,从而更好的监测网络的运行状况,提升客户服务感知.     

航空电子系统的云存储技术研究

传统单服务器的分布式存储系统很难满足航空电子系统对实时性的要求,使用云存储技术可以有效提高数据的访问速度.设计了一种适合航空电子系统数据访问特征的云存储方案,用于提高数据访问的实时性.将数据分散地存储在多个服务器上,将任务依据数据存储的特征分解成多个子任务,由子任务并发访问多个服务器,从而提高数据访问的实时性.测试结果...     

用微处理机控制的2.5MHz雷达信号发生器自动校验系统

本文描述的是一个自动测试系统,该系统是在微处理机控制下,使用内存修正数据来对雷达信号发生器输出电平性能进行自动校验。特性形成校验技术,用户可以用常规功率计直接测量输出电平性能的自动校验。特别要强调的是给出一个电平校验系统,其测量输出功率的范围可以从+20dBm到小于-140dBm;频率范围则是100KHz到2.5GHz(1dB以下测不准),并提供了误差因数和实际性能数据的分析。     

自动化校验系统合算吗?

由于资金紧张、综合仪器的发展、实验费用的增加以及校验量的变化,校验室面临危机。采用计算机控制的自动化仪器校验可提供一个有效的解决办法,不过仍然有必要仔细地分析一下是否合算。自动化校验系统可无需人工操作自动地提供程序测试指令。此种系统能自动给出有关测试联线和步进测试程序的信息,可迅速和精确地完成所需的测试,将测试结果与事先贮存的     

城域以太网设备测试方法的研究

研究城域以太网设备的功能及性能的测试方法,可以更好地评估各厂家的城域以太网设备,以及评估以太网设备组建城域网的优点和不足,对于运营商技术设备选型具有指导和借鉴作用。本文首先简要介绍了城域以太网技术、业务及组网形式;并结合城域以太网特点分析了确定测试目标及设计测试用例的主要原则;重点研究了城域以太网设备技术性能测试、路由测试、多播协议测试、MPLS测试、业务测试、对于协议一致性和自动化测试的要求等测试方法。     

优化的AMPLA生产绩效分析系统

随着公司实际生产数据量地不断增加，导致Ampla生产绩效分析系统执行效率明显降低，本文提出优化现有的绩效分析系统数据库性能，新建历史备份数据库，定期删除生产数据库中的历史数据，从而极大地提高系统响应速度。系统性能测试结果证明，数据查询、分析及报表访问速度均从分钟级降至秒级，为生产管理决策提供最为及时、完备的数据分析平台。     

学习一种通过数据应用实施数据库质量控制的方法

没有经过质量控制的数据通常是不完整的、不容易被采纳利用。本文描述了一种结合信息技术和勘探开发业务知识开展数据质量控制的方法,包含从原始数据自动采集、校验、业务工作环境应用,以及业务研究知识的回存等环节,以达到质量控制的目的。     

城域以太网设备测试方法的研究

研究城域以太网设备的功能及性能的测试方法，可以更好地评估各厂家的城域以太网设备，以及评估以太网设备组建城域网的优点和不足，对于运营商技术设备选型具有指导和借鉴作用。本首先简要介绍了城域以太网技术、业务及组网形式；并结合城域以太网特点分析了确定测试目标及设计测试用例的主要原则；重点研究了城域以太网设备技术性能测试、路由测试、多播协议测试、MPLS测试、业务测试、对于协议一致性和自动化测试的要求等测试方法。     

基于流程挖掘视角下的数据要素利用研究

流程挖掘作为跨数据挖掘与过程建模的关键技术,有助于发挥数据要素价值,但当前业内对流程挖掘技术、数据要素利用程度不足。基于要素特征及DIKW模型等分析,发现数据要素应用于流程挖掘具有直接性、动态性和外部性等特征,可通过业务牵引、要素整合、技术融合机制发挥要素价值。因而企业需要进一步强化流程挖掘技术应用积累、注重数字化治理体系建设、探索建立数据安全与共享的共存机制等措施促进数据要素价值最大化。     

天气预报电视会商系统运维管理软件设计与实现

中国气象局全国天气预报电视会商会议系统正式投入业务运行后,服务范围和类型越来越广,原来比较粗放的运行管理和松散记录日益暴露出不足.针对这种情况,本着业务自动、规范、高效的原则,对数据流程、信息特点、关键字段、术语规范性等进行了分析,搭建了优化可复用的程序框架,并对时间、人员、内容、会场状况等实现相关的录入、查询、统计、输出、校验等功能,可进行检索统计考核,对现有业务的开展起到预期的促进作用.     

基于神经网络的电力营销基础数据校验研究

本文通过介绍神经网络技术与算法,提出了利用神经网络进行电力营销基础数据准确性校验的框架模式,经实验数据验证,有效提高了营销基础数据校验的自动化程度。＂大数据＂时代的今天,数据挖掘技术层出不穷,为海量电力营销基础数据的自动分析和校验提供了一条解决之路。本文选择神经网络算法,通过SPSS软件对电力营销基础数据进行建模、分类、自动得出校验规则,实现偏差数据的筛选,为基础数据的更正提供校验依据和异常清单。     

基于MSP430单片机和CH376USB接口的信号采集存储系统

给出了一种基于CH376实现MSP430单片机对实验室小型天线信号采集存储的系统.由于工程测试的需要设计开发了天线方向图自动测试系统.该系统以MSP430单片机为核心,由自动控制模块、信号采集和数据显示模块和USB主机方式数据存储模块三部分组成.从实验结果来看,该系统能够实现转台的自动控制、信号的自动采集、天线方向图的自动绘制和数据实时存储到U盘.测试平台搭建方便,具有测试速度快、精度高、性能稳定的特点.     

多级生成的自动化测试框架的中心技术研究与实现

本文通过研究各种自动化测试框架,并经过实际自动化测试项目的实践检验,提出一个更为先进的自动化测试框架概念,这个框架的中心思想是多级生成机制.采用该机制,解决了测试工作中业务分析难的问题,把这个主观因素很强的部分变得客观化,变得有依据,变得可以自动化.框架后半部分整合了前人的成熟经验,使用数据驱动的测试框架原理做了数据自动生成与添加工作,直到测试用例的自动生成,将测试的一套过程全部自动化,并且这一过程也有很好的可回归性.     

SQLite在飞艇监控中的应用与优化

为了提高飞艇测控中监视数据的管理水平,简化数据库操作的复杂度,提高数据存储和访问的速率,提出了在飞艇监控中使用轻量级数据库系统SQLite的方案。并针对监视系统中实时性要求高的特点,提出了四点SQLite性能优化策略,有效提高了SQLite数据库的访问速度。通过测试与连续试验表明,SQLite能够满足飞艇监控对数据实时存储及数据持久保存与管理的需求。该方案已经成功应用于某型号飞艇集成演示验证系统中。     

液晶电视色度自动测试及校正系统

针对目前液晶电视色度性能上的不足,介绍了一种利用CA-210测试仪和PC对液晶电视进行自动色度校正的系统,给出了其系统及软件结构.实验数据表明,其校正时间短,校正精度高,取得了良好的效果.     

两种并发性能测试实用方法

并发性能测试是众多软件产品中通常会涉及到的内容。根据实际被测系统的特点,快速、高效地建立了测试环境,进行了相关测试实践,得到了利于指导产品的开发和改进的性能数据,并归纳和总结了两种处理并发访问相关的性能测试方法。