Web多媒体数据存储技术应用研究

讨论了Web多媒体数据的存储方式,重点研究了图片文件在SQL Server 2005中的存储方法,并实现了利用asp.net对二进制数据文件的读取及显示方法,最后讨论了其他多媒体文件存储方式所需要考虑的多方面问题,为Web应用中多媒体数据存储提供了参考。     

基于ASP.NET与Oralce的通用多媒体数据处理

在开发数据库应用程序中,为了实现多媒体数据上传和读取,通常有两种方法来存储这类数据文件,该文讨论了其各自的优缺点,在此基础上介绍了基于ASP.NET和ORACLE数据库平台下将多媒体数据直接存储在数据库中的处理,并给出了Word文档和图片的上传和读取的实现代码。     

地震数据的无损压缩存储

为解决地震数据的无损压缩存储问题,研究了多种地震数据标准以及整型和浮点型数据的无损压缩算法.在此基础上,提出了地震数据的无损压缩存储方法.该方法通过分析多种地震标准的内部结构特点,有针对性地对整型和浮点型数据分别进行无损压缩.在保证了地震数据文件中各参数、标识等信息不被破坏的条件下,最大限度地减小了地震数据文件的大小.试验证明,本方法不仅对整型数据而且对于浮点型数据都可以做到无损的数据压缩与还原.     

基于MapReduce模型的非结构化数据分布式存储方法

为了解决传统数据存储方法存在的内存消耗过大、读取效率低等多种问题,提出了基于MapReduce模型的非结构化数据分布式存储方法。设计了非结构化数据垂直分片与水平分片方案,并采用聚类算法对分片处理后的非结构化数据进行聚簇处理,在此基础上构建用于数据分布式存储的MapReduce模型,得到非结构化数据分布式存储结果。实验测试结果表明,与传统非结构化数据存储方法相比,研究方法的内存消耗更小、写入量更大、读取效率更高、访问频率动态调节性能好,由此证明该方法的存储性能更优越,实际应用效果更好。     

VC++环境下的电机状态监测软件设计

为了实现对电机状态的监测,特别是状态参数曲线的实时绘制,设计了一个电机状态监测软件。详细介绍了该上位机软件的实现原理、结构、功能和特点,讨论了VC++环境下串口设置与数据的接收、实时数据的显示与曲线图的绘制、数据文件的存储与读取等关键技术。实现了通过串口与DSP2812进行通信以接收电机状态数据,实际应用表明该软件实用、可靠、操作性好、界面友好。     

基于Hadoop的气象信息数据仓库建立与测试

气象相关的数据随着气象事业现代化水平的不断提高而与日俱增,使得气象部门对于气象数据存储、管理和读取的要求越来越高;通过分析开源云平台Hadoop的分布式文件系统HDFS、数据仓库工具Hive等架构,研究了Hadoop气象云平台的构建过程,最终实现了气象信息数据仓库的建立与测试;该气象信息数据仓库实现了海量气象数据文件的分布式存储、元数据管理以及气象数据的查询;应用表明,使用气象数据仓库进行大型气象数据文件存储和操作时,可以大大提升数据吞吐率和数据读写操作效率。     

基于HBase的瓦片索引和读取方法设计

地理信息瓦片数据规模庞大，传统的关系型数据库不足以满足对瓦片数据容量、速度的支持。针对这种情况，选取HBase存储瓦片数据，在以四叉树编码作为索引进行数据存储的基础上，提出一种多层级瓦片数据索引设计方法，该算法通过“异层级再编码”的方式，使在地图中空间相邻的瓦片数据在物理存储中也尽可能相邻，以达到瓦片数据的空间连续性在物理存储中得以保持的目的；提出一种邻域预读取方法，该方法配合索引设计，以批量读取的方式预先将邻域瓦片读取至缓存。实验表明，在用户连续读取相关联的地图数据的情况下，该方法比传统的缓存算法具有更高的命中率，且比传统的数据索引设计响应更快。     

多维数据立方体的存储设计

多维数组进行存储通常是将其线性化为一维数组的方式进行存放,这种方法不利于数据的多维分析。首先,采用分块存储方法,将数据立方体划分为小的立方体为基本单位进行存储,然后,为每一个多维数据立方体创建一个数据文件,将划分后得到的有效数据块依次存放在数据文件的数据域中,在文件结束部分创建数据块的索引,即数据块在文件中的起始位置。     

面向装备试验数据的融合存储技术研究与应用

针对海量装备试验数据结构复杂、分散存储及检索访问等问题,开展装备试验数据融合存储技术研究。提出了数据源插件技术、分布式采集处理技术、海量数据文件索引技术,实现多源异构试验数据的采集整理、校核验证、入库和多维信息查询,以及图像、视频、文档类数据文件的检入、检出等功能,并保证系统稳定、高效运行,确保数据应用业务可扩展、可发展。该装备试验数据融合存储技术已应用到某装备系统中,为系统试验数据的稳定存储和应用提供了基础支撑,也为多源异构试验数据的融合存储和管理提供了一种解决方案。     

HLA联邦数据收集的研究与实现

数据收集是仿真过程中必不可少的一环 ,是分析仿真数据、得出仿真结果的前提。本文分别对HLA联邦的集中式和分布式数据收集方法进行了研究 ,并给出了相应的实现策略 ,且对数据文件格式和存储方法提出了一定见解     

核电站数字化反应堆保护系统中央处理器负荷率分析与测试

核电站对数字化反应堆保护系统的一书央处理器的负荷率有严格要求。本文首先对核电站数字化反应堆保护系统中央处理器的负荷率进行了理论分析,得出了负荷率计算公式;然后设计了相应的负荷率测试方法0j测试装置,完成了实际的测试工作;对测试所得实验数据进行处理,得出测试结果,结果表明数字化反应堆保护系统的中央处理器负衍率符合技术嘤求,且主控CPU的负荷率比备用CPU负荷率要高。     

Oralce数据库系统文件恢复与检验软件的开发研究

侦查部门打击利用网络进行的诈骗犯罪需要有法可依,这是我们依法治国方略的应有之义。然而,利用网络进行诈骗犯罪是一个近年来随着网络发展才开始泛滥,并受到广泛关注的问题,因此惩治利用网络进行诈骗犯罪的相关法律法规还不够完备,情报信息应用还不够充分,相关网络诈骗防范机制还未建立,这些都直接影响着案件的侦破。因此,有必要借鉴国外经验,结合我国国情,完善利用网络进行诈骗犯罪的防控对策。     

基于EXT3文件系统的数据库文件恢复与检验软件的开发

文章介绍了一种通过日志恢复EXT3文件系统下被删除Oracle数据文件的方法,研究了通过数据页存储特征恢复与检验Oracle数据文件的方法,介绍了基于EXT3的Oralce数据文件恢复与检验软件的总体执行流程图。该软件可以根据日志文件中保存的地址指针定位被删除文件散布在硬盘分区中的具体数据,进而将它们恢复成一个完整的数据库文件,该软件还可以根据Oracle数据页的存储特征最大限度地提取分布在硬盘分区上的数据页碎片,将这些数据页组合成一个文件,再利用自行开发的检验软件从中检验出有效的数据记录。     

核电厂设备知识图谱辅助应用技术研究

为利用智能化技术辅助核电厂现场维修和故障分析工作,作为企业开展精细化管理和高质量发展的重要依托,对已有数据进行分析利用已成为核电行业的共识。文章对知识图谱技术进行研究,分析设备故障知识图谱的应用模式,研究图谱的构建过程和应用场景。文章对知识获取、实体识别、关系抽取、知识融合、知识存储、知识服务等关键环节进行研究,分析提出设备故障知识图谱的潜在应用场景和具体实施路径,评估开展图谱构建与应用的工作难点,最后对知识图谱在核电厂设备管理上的应用方向和内容进行了探讨。     

USB存储设备MTU值配置优化技术研究

传统优化技术在随机读、混合读和数据一致性方面性能差,为解决这一问题,提出USB存储设备MTU值配置优化技术研究。先采集USB存储设备行为数据,再利用纠删码技术,设置MTU值配置存储总容量。考虑到数据数量过大,设计层次式文件管理架构记录文件属性。在此基础上,为优化存储数据,采用扁平式存储结构,实现USB存储设备MTU值配置优化。由此,完成USB存储设备MTU值配置优化技术的研究。实验在release 5.5操作系统下完成,分别测试两种优化技术随机读、混合读和数据一致性的性能。实验结果表明,使用所提技术能够达到近似最优的性能,数据访问开销比例更少。     

面向费用优化的云存储缓存策略

为提高云存储的访问速率并降低费用,提出了一种面向费用优化的云存储缓存策略。利用几乎免费的局域网环境下的多台桌面计算机,在本地建立一个分布式文件系统,并将其作为远端云存储的缓存。进行文件读取时,首先查找其是否在缓存中,若存在则直接从缓存读取;若不存在则从远端云存储读取。采用了最近最少使用(LRU)算法进行缓存替换,将冷门数据从缓存中替换掉。以亚马逊简单存储服务(S3)作为远端的云存储服务,对原型系统进行了简单的性能测试。测试结果表明,使用了所提出的缓存策略后,在降低费用的同时能够显著提高文件读取的速度。     

核电站重要仪表测量通道的不确定度计算方法

对核电厂重要仪表测量通道的不确定度计算的相关国内核安全法规要求、最新国际标准进行了研究,提出一套测量通道不确定度计算的方法。总结完善了计算方法中不确定度通道的类型、国产化仪表设备的不确定度项区分、环境条件区分以及整定值的确定等内容,演示了采用该方法进行仪表测量不确定度计算的过程,并给出了计算结果。通过相关计算,验证了该方法对维护核电厂原有安全基准的有效性。相比较于同类计算方法获得的结果,新计算方法具有明显的优越性。     

基于Hadoop的智能电网状态监测数据存储研究

智能电网需要收集海量设备状态监测数据,这对数据存储与查询提出了更高的要求。为处理这些海量数据,设计并实现了基于Hadoop技术的数据存储系统,包括Hadoop集群、存储客户端和查询客户端。通过基准测试、存储结果验证和查询性能分析,验证了该系统具有分布式海量存储及高效查询的优势,适合智能电网环境下设备状态监测数据的存储。     

一种嵌入式视频存储的专用文件系统设计

基于嵌入式视频存储的特点,分析目前已有的文件系统在视频应用上的不足,提出了适合硬盘录像机的专用文件系统设计方案,并从数据存储、检索、读取和恢复等方面阐述了设计思想及具体实现。经过在相关产品上的应用,表明该文件系统可以实现高效、安全的视频存储。     

面向大数据存储的主动与被动相结合的性能评测方法体系结构与实现

随着数据量的日益增加,大数据存储在整个大数据应用框架体系中居于重要地位。对大数据存储系统进行性能评测可以指导大数据应用开发人员分析性能瓶颈,进行大数据系统的性能优化。在以往的工作中,通常使用基准测试的方式来对不同大数据框架进行性能评测,或者采用插桩并分析轨迹文件的方式对分布式文件系统进行性能分析。这2种方法采用的分析角度不同,并没有形成合理的评测体系来评价大数据分布式存储系统。本文提出主动与被动相结合的大数据存储系统性能评测方法体系结构及其具体实现。在主动性能评测方法方面,提供了6个领域,超过20个应用的基准测试程序,对大数据存储系统主动发起性能测试,分析大数据存储系统的基准性能指标;在被动性能评测方法方面,提供了对低效任务、低效算子、低效函数的分析及定位方法,通过分析运行在大数据存储系统之上的大数据应用,分析大数据应用程序低效的原因。通过实验表明,该大数据性能评测方法体系结构能够全面地对大数据存储系统进行性能评测。