GIS中栅格数据存储管理的研究与实现

围绕G IS中栅格数据存储管理的方法进行了分析与探讨;在对国内外栅格数据存储方案进行研究的基础之上,对栅格数据的物理存储方式进行了深入的研究,并分别针对本地文件方式和商用数据库方式提出了各自有效的存储实现方案,为海量栅格数据的存储管理提供了一条新的解决思路.     

基于MongoDB的海量遥感影像大数据存储

随着科技的发展,遥感影像照片在质量及数量上急剧增加,如何安全并高效地将其存储已成为当前研究的一个热点问题.应用NoSQl非关系型数据库,提出一种基于MongoDB的遥感影像大数据的存储方法.用基于GridFS的大文件存储方式存储影像,再将其有关的属性信息以一条文档的形式插入MongoDB数据库,两者之间用相同的ID编号连接.通过与关系型数据库PostgreSQL在大文件以及传统海量文档存储方面进行性能测试比较,结果表明基于MongoDB的海量遥感影像大数据存储方法在各方面性能均明显优于基于关系型数据库的存储方法.     

基于数据邮递的并行传输技术研究

针对目前在大型、分布式网络系统中数据存储节点数目巨大,需要多用户间数据交换时,经常发生传输等待、网路阻塞和系统死锁现象.本文提出基于数据邮递的并行传输中间件技术,在节点间建立数据邮递链路,实现分布式、多级网络中任意两个节点都可以实现数据交换.     

面向海量无线电监测数据的分布式存储系统研究

提出了一种针对海量无线电监测数据的分布式存储系统的体系结构。结合Hadoop云计算平台和HBase分布式数据库的存储特点,在Linux平台下设计了针对海量无线电监测数据的分布式存储系统。该系统旨在对海量分布式无线电监测数据进行快速、高效、可靠地处理,用以满足无线电监测管理部门对监测数据的存储、检索和分析的需求。     

一种海量大数据云存储系统框架设计

随着数据爆炸性增长,传统的存储方式已经不再满足海量数据的存储需求,云存储技术的飞速发展,使得云存储成为了一种新型的数据存储解决方案。文章在分析Hadoop分布式文件系统HDFS的基础上,提出了一种新的基于云计算环境的海量大数据存储设计方法,主要给出了文件存储方案设计以及副本方案设计等,为云计算海量数据存储与管理提供了一种可行的关键技术方案。     

一种面向实时显示的海量空间数据存取技术

总结海量数据存取技术相关成果;建立海量空间数据的全球四叉树层次细节模型．以一致的逻辑模型和编码方式管理各类空间数据;基于IP网络分布式存储海量数据,设计客户一服务器模型下的数据读取算法;分析磁盘工作原理以确定效率瓶颈,并据此设计了高效的空间数据存储结构。该系统经实践证明,完全满足海量空间数据实时可视化的需要。     

基于 PDE 与小波的图像放大研究

提出了一种基于PDE（Partial Differential Equations）和小波插值的遥感图像放大方法。首先采用双三次插值方法,进行遥感图像的初始放大,再进行小波分解,将低频分量替换为原图像,小波合成,获得小波放大结果,并采用PDE方法中的自蛇模型做后处理。同经典的图像放大方法进行对比实验表明,文章方法能够有效地解决遥感图像放大后边缘模糊的问题,能够更清晰地显示地面细节,更好地显示地物目标的轮廓。     

An Improved Method of Linear Encoding Representation-A Cell Linear Quadtree

The linear encoding of a quadtree is an efficient way to represent the quadtree. In this paper, an improved linear quadtree, a cell linear quadtree, is proposed, in which its redundant storage is eliminated and the concept of a cell is introduced. Therefore, it has higher storage efficiency than a conventional linear quadtree.     

海量小文件元数据的分布式存储与检索

针对现有分布式文件系统处理海量小文件时存在的主节点元数据处理性能瓶颈问题,提出采用分布式文件来存储元数据,并通过元数据缓冲和Hash映射实现元数据的分布;采用Map Reduce并行程序对元数据检索进行了实现,并指出了并行检索中存在的问题,提出采取局部位图索引对元数据检索进行了优化．最后通过实验进行了验证,实验结果证明,该方法实现了海量元数据的分布式存储与检索,避免了现有分布式文件系统在处理海量小文件时存在的主节点单点性能瓶颈．     

1MW光伏并网监控系统的设计与应用

针对1 MW光伏并网发电系统,采用C++和C#语言、Visual studio 2010平台和SQL Server 2005数据库技术设计开发了1 MW光伏并网监控系统,该系统包括现场监控、上位机监控和远程监控,可实现对光伏电站的运行状况进行集中监测、控制、存储、分析、显示、打印输出等功能,并融入企业管理的理念,为电站的高层管理人员提供所需的管理信息.其应用效果表明:该系统很好地实现了对于光伏并网电站的监控功能,提高了工作和管理效率.     

单片机网络控制系统

基于Web的单片机远程监控系统采用两级分布式控制方式,其现场控制级采用单片机系统,完成现场参数的采集和控制.监控级为通过串行通信口与现场单片机系统进行数据通信和进行数据处理的监控计算机,该监控计算机还作为远程服务器,通过网络与远程计算机连接.远程计算机通过Internet访问服务器实现对现场设备的远程控制.     

组态王实现汽车油路的泄漏检测和信息管理

以汽车燃油系统的泄漏检测装置的开发为背景，介绍了汽车燃油系统的密封和泄漏的检测方法。本系统利用组态王6．5实现了单台PC机与多下位机的通信，达到对分散下位机的集中控制。并在工业以太网的环境下利用组态王完成检测装置和远程MIS(信息管理系统)连接和现场的实时数据上报。     

基于集合划分的分布式数据库查询分解算法

分布式数据库把数据分散存储在不同的站点上 ,使得数据库中最常用的查询操作 ,必须同时操作多个站点的数据 ,对查询处理提出了较高的要求。通过以关系模型数据库为例 ,详细地研究了分布式查询处理的一个分支——查询分解 ,从而提出了一种行之有效的查询分解算法——基于集合划分的查询分解 ,以使全局查询能完整地在各局部数据库上完成     

面向分布式存储的安全云存储系统研究

云环境下的分布式存储主要研究数据在数据中心上的组织和管理,数据中心通常由百万级以上节点组成,云存储系统所存储的数据规模往往达到PB级甚至EB级,一些数据安全的隐患也由此产生。本文首先介绍了云存储系统的安全需求;然后阐述了安全云存储系统的研究现状;并采用一些关键技术设计了一种安全云存储系统。其中包括密钥分发与管理、用户与存储节点身份认证机制、安全分布式文件系统的基本操作等。最后指出了下一步研究的方向。     

本体支持的智能化空间信息服务发现

分布式环境下的服务发现是实现空间信息数据共享、服务集成和协同工作的前提,针对目前服务发现效率低和自动化程度差的问题,提出基于本体和智能Agent的空间信息服务发现模型。首先提出了本体支持的空间信息服务描述方式,分析了注册中心的扩展方法,给出了综合多种因素的服务语义相似度匹配算法,结合智能Agent设计了服务发现框架和流程,最后验证了模型在服务发现中的有效性。     

分布式存储在数字集群移动通信系统中的应用

当传统数字集群移动通信系统中加入大数据量的新业务时,原有的数据存储查询方案将严重影响系统的可靠性,该文提出了一种使用分布式存储系统进行数据存储查询的方案。方案中的分布式存储系统采用结构化P2P网络结构,使用了一种基于分布式哈希表的chord算法来实现资源的分布与定位。     

基于K-距离拓扑的分布式数据存储方法

针对分布式数据存储算法通常需要较长的等待时间、且对海量数据加密时严重浪费计算资源和时间的问题,提出了一种基于K-距离拓扑的分布式数据存储方法.通过寻找K-距离拓扑子图来实现数据的安全放置,优先选择存取速度更快的节点和自身保护能力强的节点实现总体性能的提升.在Internet 2拓扑图与随机拓扑图下的仿真测试结果表明,所提出的方法能在满足安全距离约束的条件下选择到最优的数据存储节点,从而减小数据存取时间.     

SQL-DFS:一种基于HDFS的海量小文件存储系统

针对Hadoop分布式文件系统( Hadoop distributed file system,HDFS)进行小文件存储时NameNode内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统. 通过在NameNode中加入小文件处理模块实现了小文件元数据由NameNode内存到元数据存储集群的迁移,借助关系数据库集群实现了小文件元数据的快速读写,并对小文件读取过程进行优化,减少了文件客户端对NameNode的请求次数;通过将部分DataNode文件块的校验工作交由元数据存储集群完成,进一步降低了NameNode节点的负载压力. 最终通过搭建HDFS和SQL-DFS实验平台,对HDFS和SQL-DFS 2种架构进行了小文件读写的对比测试,实验结果表明:SQL-DFS在文件平均耗时( file average cost,FAC)和内存占用率方面均明显优于原HDFS架构,具有更好的小文件存储能力,可用于海量小文件的存储.     

延迟光照算法对Hadoop集群渲染系统的改进与实现

针对集群渲染系统在三维场景文件输出过程中,海量数据处理以及存储的问题,利用Hadoop框架对现有系统进行分布式模型改造,以基于延迟光照算法的处理方式,对分布式存储和计算的业务逻辑结构部署,实现改进Hadoop集群渲染系统对任务的处理策略,提供高容错、可靠的存储和海量计算数据的方式.通过实验证明改进的Hadoop集群渲染系统可以提高系统利用率和任务处理能力.     

基于内存映射的ENVI标准格式影像指定块数据快速读取

针对遥感影像海量数据存储问题,提出了一种基于内存映射的指定块数据快速读取方法,并通过OpenGL对ENVI标准格式的遥感影像海量数据快速读取予以验证。实验结果表明,基于内存映射的方式能有效地解决遥感影像海量数据指定内容的快速读取问题。论文还对内存映射的原理以及基于OpenGL显示的ENVI标准格式遥感影像数据读取程序实现细节进行了描述。