海量数据离线存储相关实施标准探讨(续前)

随着数字信息化的普及,大数据时代,大存储时代的到来,也带来数据存储的问题。海量的离线数据如何进行有效的存储、管理,什么样的存储设备才符合现今的、乃至未来的存储需求,目前在市场乃至国家并没有一个明确的,可行的,完善的标准。大量的离线存储数据,占用着大量的在线存储空间,近线存储空间,或无序进行简单的堆积式的管理和存储。产生了能源,空间,人力的成本浪费和数据不规范造成数据遗失,数据资源浪费等。     

海量数据离线存储相关实施标准探讨

随着数字信息化的普及,大数据时代,大存储时代的到来,也带来数据存储的问题。海量的离线数据如何进行有效的存储、管理,什么样的存储设备才符合现今的、乃至未来的存储需求,目前在市场乃至国家并没有一个明确的,可行的,完善的标准。大量的离线存储数据,占用着大量的在线存储空间,近线存储空间,或无序进行简单的堆积式的管理和存储。产生了能源、空间、人力的成本浪费和数据不规范造成数据遗失。数据资源浪费等。     

大数据时代:Hadoop解决数据处理三瓶颈

<正>越来越多的大企业的数据集以及创建需要的一切技术,包括存储、网络、分析、归档和检索等,这些被认为是海量数据。这些大量信息直接推动了存储、服务器以及安全的发展。同时也是给IT部门带来了一系列必须解决的问题。     

一种数据网格存储模型与并行下载调度算法

针对在数据网格中创建多副本虽可有效提升下载速度、降低网络流量,但多副本创建会带来大量存储开销和网络流量开销,以及基于GridFTP协议的各种并行下载算法虽可进一步提升下载速度,但仍不能解决多副本对存储空间和网络流量的影响的问题,提出了一个能保证数据的完整性、存储的可靠性和降低存储空间的数据网格存储模型,并基于该存储模型和GridFTP协议,提出了一个并行下载调度算法。实验表明,该算法只需要较少的冗余便可达到现有的针对全副本的并行下载算法可达到的理想下载速度,取得较好的效果,实现并行快速传输、节约存储空间和降低网络流量的目标。     

动态Huffman算法在GPS数据压缩中的应用

GPS现在越来越多的应用于车载定位系统,车载定位的存储空间有限不能大量的存储原始数据,为解决GPS数据量大的问题,提出用动态Huffman算法对GPS信号进行压缩的方法。通过实验证明该方法也确实能大大的压缩原始数据,缩短GSM信道占用时间长的问题。     

RFID标签天线的技术现状

RFID技术是一项革命性的技术,它通过射频信号自动识别对象和获取数据,无需人工干预,可在恶劣环境中工作,能同时对多个标签进行批量处理,可大量存储数据,应用领域广泛。标签天线是RFID标签的重要组成部分,本文阐述了制作标签天线的传统工艺、印刷工艺及模切工艺的技术现状。     

存储虚拟化技术的研究

存储虚拟化技术是基于网络的存储管理技术,它屏蔽大量异构设备的差异性,向用户提供简单的逻辑存储访问接口;它简化了存储管理,优化了系统性能,提高了存储设备的利用率。本文从存储虚拟化的概念入手,详细分析了存储虚拟化的使用优点、实现方式、关键技术等方面的问题。     

无人船测试多源数据HDFS存储优化

针对无人船测试过程中数据量大、数据源多、数据记录分散等问题,提出一种面向无人船测试的多源数据HDFS存储优化方法。首先设计基于Hadoop的无人船测试云平台架构,分析无人船测试云平台的信息流;接着提出无人船测试多源数据容错机制及重复数据删除策略,优化无人船测试多源数据HDFS存储;最后对无人船测试多源数据进行HDFS存储实验。结果表明,Hadoop集群优化后比默认系统存储效率提升约20%,可满足无人船测试多源数据的存储需求。     

基于负载均衡技术的公共自行车数据分流与存储系统

为了缓解公共自行车系统在数据存储方面面临的大数据流量以及区域性、时段性的流量不均衡问题,提高数据存储的效率和可靠性,提出了一种数据分流与存储系统.通过负载均衡技术,对公共自行车站点终端上传的数据进行分区转发,实现数据的动态存储.完成了对存储服务器短时间内大量连接请求的处理能力以及长期规律性连接请求的处理能力的测试实验.实验结果表明,该存储系统能够快速、高效地响应高并发的数据连接请求,具有较高的工程应用价值.     

LZW算法在存储测试系统中的硬件实现

数据量不断增加与有限存储能力的矛盾的激化,使如何在保持系统微体积前提下实现大量数据的完整记录,成为存储测试系统设计的关键问题。针对这一问题,采用了LZW实时压缩技术,在DSP处理器上进行实时数据压缩,有效消减了部分数据冗余。通过将高8位和低8位数据分别压缩,及利用数字滤波减少干扰,提高了压缩的效果。此方案还具有可将多个系统模块在DSP单芯片实现的优点,满足了系统微型化要求。经实验和试验,该方法可有效减少数据存储量,提高系统存储空间利用率。     

浅谈某医院手术室示教系统及手术室监控系统

随着科学技术的不断发展，尤其是计算机技术、控制技术，视讯技术等的发展，越来越多的医院通过利用视讯技术，计算机控制技术实现了对手术过程全程影像进行同步传输并存储，使之用于研究、教学和病例存档，同时给经验不足的医生提供了大量观摩专家手术过程的机会，为医院培养后备人才提供了有力的保障，即为手术示教系统。     

气体吸附与储存的新材料:COFs的发展及应用

共价有机框架材料(COFs)由于其良好的结晶性、多孔性、低密度、大比表面积以及易于设计和修饰的结构特点,在多个领域都有广泛的开发潜力和应用前景,特别是其气体吸附和存储性能更是引起了研究者们的广泛兴趣,已有大量文献报道。对二氧化碳、氢气、甲烷等气体分子具有特殊吸附功能的共价有机框架材料进行了归纳和总结,对其发展趋势和应用前景进行了展望。     

云存储技术及应用

云计算是近年来互联网行业迅速发展的一个方向,云存储作为云计算技术的一部分,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。本文分析了主流云存储的实现技术及其应用。     

电子档案管理及其在实验室的应用

计算机和网络大量应用带来的是电子文件的大量存储。作为对实验室的要求,既要符合ISO/IEC17025的要求,又要根据电子档案本身的特点来进行管理。本文分析了电子档案的特点和在实验室管理中的实际情况,理论联系实际,提出了有一定借鉴意义的实验室电子档案管理方法。     

车载式汽车碰撞多参量测试系统的研制

本文介绍了一种自行研制的用于汽车碰撞多参量测试的32通道车载测试系统,该仪器选用12位高速A/D芯片,选用复杂可编程逻辑器件CPLD作为控制电路,缩小了系统体积,提高了系统可靠性,实现了多通道的同步、高速采集的控制,采用特殊的灌封工艺实现了高冲击条件下的大量数据的可靠存储.该测试系统已在长春一汽国家汽车质量监督检验中心进行检测试验,并成功获取了测试数据.     

缩微品计算机管理之设想

缩微技术出现以来，缩微胶片一直是文档（Ｄｏｃｕｍｅｎｔｓ）高容量存储的主要媒体之一。缩微胶片在存储寿命、法律效能、低成本等方面的长处，为图书馆、档案馆等文档管理部门广泛应用于手稿、图纸、珍善本、图书、资料等特殊文档的长期存储和保管，积累了大量存储在缩...     

国产RSPRO-I型超高清缩微胶片影像数字阅读机的开发和应用

随着信息技术的快速发展,各行业产生大量的电子文件,缩微作为异质备份的重要存储方式,具有高效、安全、存储寿命长等优势,因此被广泛应用于图书、档案保存等领域。缩微胶片阅读机是阅读和检查胶片信息的专用设备。对自主研发的国产超高清缩微胶片阅读机的主要技术特点、原理、使用操作流程及技术应用领域进行了详细的论述。     

珍贵数码照片的储存

当我们外出旅行归来时,最关心的莫过于相机中存储的大量照片,而当电脑中的照片越来越多影响到电脑的速度时,珍贵数码照片的存储问题就摆在我们面前。储存数码照片有两种方式:移动硬盘存储和光盘刻录存储,我们既要考虑到可靠性、又要兼顾经济性。移动硬盘分为使用笔记本电脑硬盘的移动硬盘和使用台式机硬盘的移动硬盘。使用笔记本电脑硬盘的移动硬盘优点是:体积较小、便于携带、不需要单独供电,外出时它和笔记本电脑是完美搭配。缺点是价格较贵,目前市面有售的大容量笔记本电脑硬盘为160GB,价格高达1400元左右。性价比较好的80GB也将近600元,对于     

广播用数字音频编码格式

随着计算机多媒体和网络技术的发展,广播音频工作站系统中数字音频已逐步替代传统的模拟音频。数字音频具有存储方便,存储成本低廉,存储和传输的过程中没有声音的失真,编辑和处理非常方便等特点。广播音频编码格式不同的数字音频设备一般都对应着不同的音频文件格式。在广播专业领域,大量的数字音频设备投入使用,大量的节目素材需要通过数字音频工作站进行数字化并以文件形式存放,然而实现不同音频工作站之间音频素材节目的交换和兼容,却面临着不同计算机平台原始文件格式差异的问题。因此,只有制定数字音频文件格式规范标准,才能真正解决以…     

数据库安全威胁及数据备份恢复技术研究

现有的计算机信息系统多采用数据库存储和管理大量的关键数据,因此数据库的安全问题也是系统安全的关键环节之一。攻击者最终的目标还是系统中关键的数据信息,如何有效保证数据的完整性、保密性,防止数据不被破坏、不被窃取,这也是系统安全研究的重点内容。对数据库中数据的安全威胁与备份恢复技术进行研究。