大数据背景的IT平台架构探索

传统IT平台架构无法应对大数据井喷式的数据管理和存储压力。本文站在更好地服务大数据采集和分析的角度,设计了大数据背景下的IT平台架构,同时还比较了并行计算、网格计算等几种重要的架构承载技术,比较了其各自的优势和不足。     

基于云计算数据高级存储技术VMFS的实现

云计算平台数据中心有着大量的存储虚拟化技术,通过存储虚拟化技术可以解决很多实践问题。云平台由于服务器虚拟化架构上原先建立的数据存储容量缺乏对后期持续消耗的存储容量预测和评估,导致原有数据存储的容量不足,急需扩容。但扩容的重大前提是不允许数据存储中的虚拟机及相关镜像文件遭到任何破坏,而且要在虚拟机保持伺服的状态下进行"热"扩容,不允许虚拟机停机,可以通过对数据存储实施热扩容来解决这一问题。文章对此进行了分析。     

建筑能源管理大数据平台设计

能源管理平台中数据存储、计算能力直接影响整个系统管理、分析的准确性,影响到整个运行系统维护和更新工作的成效,本文提出一种大数据平台设计方法,根据建筑能耗数据产量大、传输速率快、数据来源多等特征动态建模,构建Hadoop大数据管理平台,从系统体系结构、数据存储、查询处理等方面对基于大数据的公共建筑(群)能源管理大数据管理与处理平台架构进行分析。     

移动互联网时代医院数据存储平台关键技术研究与应用

本文利用先进的SQLserver和Oracle数据库等管理软件,部署和组建了一个先进的数据存储平台,该平台能够利用先进的Hadoop集群访问算法,存储大容量的医院信息资源,包括视频、图片和文本等,还可以根据用户访问的频次,设置数据的优先级,实现对热点数据的迁移,提高数据存储平台的效率。     

基于CPCI架构卫星信号数据存储平台的硬件设计

本文针对地面终端站KSA卫星信号高速数据传输接收系统,设计了一种基于CPCI架构的高速卫星信号基带数据实时转发平台,该平台具备卫星高速数据解调译码后的基带数据按业务帧进行实时转发和存储的功能,能够通过主板SATA接口控制器将基带数据实时存储到本地磁盘阵列。     

清华山维工程文件大小的精简方法

在介绍EPSW平台数据存储原理的基础上,简要介绍了对清华山维图形文件大小进行精简的方法和技巧,以便有效地管理和存储数据,最大化地避免计算机磁盘空间的浪费。     

分布式环境下的GML存储

由于GML空间数据的急剧增加,单机存储已不能满足其发展的需要,为了能够更好共享和管理网络地理信息以及针对海量GML数据的存储问题,本课题研究在分布式环境下对GML空间数据进行存储,进而提高资源利用率。搭建Hadoop平台对GML空间数据按其模式分为不同的数据集,把同一数据集的数据分别存储在不同存储节点上,并用一个主目录...     

基于Web3D的异构数据存储及通信研究——以湖南省虚拟地质博物馆为例

针对目前虚拟现实中三维模型和二维属性关联程度低、加载速度慢的情况,本文以湖南省地质博物馆为例,采用Unity3D作为开发平台,研究了异构数据存储的存储方式及通信途径,制定了数据库存储和文件存储相结合的数据存储方案,并对Unity3D在Web环境下的数据通信过程进行了研究。采用异步、分层次加载的方式对异构数据进行加载,满足了参观者的参观心理,在保证数据一致性的前提下,提高了数据的加载速度。     

运用FastDFS和Drill构建海量BIM族数据存储和查询平台

BIM族数据属于半结构化数据, 其数据结构相对松散且可变, 难以使用传统关系数据库进行存储和查询。本文以FastDFS分布式文件系统和Drill实时查询引擎为基础, 在BIM资源库下针对族数据的存储和查询构建了的分布式数据处理平台。经测试, 较传统以关系数据库为核心的非分布式系统, 存储性能和查询性能均有较大提升。     

福建省学前云教育平台数据存储安全模型研究

近年来,我国政府提出了大力发展学前教育的政策方针,学前教育信息化是学前教育发展的重要保证,使用云计算技术构建学前教育云平台有利于整合各地的教育资源,实现资源的共享。本文探讨了如何使学前教育云平台的数据存储更加安全,作者设计了一种具有较高安全性的轻量级数据云存储架构模型来替代复杂的商业云存储平台。     

串口服务器的工作原理

串口服务器基于TCP/IP的串口数据流传输,它能将多个串口设备连接并能将串口数据流进行选择和处理,把现有的RS 232接口的数据转化成IP端口的数据。将传统的串行数据送上流行的IP通道。串口服务器完成的是一个面向连接的RS 232链路和面向无连接以太网之间的通信数据的存储控制,进行格式转换,使之成为可以在以太网中传播的数据帧。串口联网服务器作为TCP服务器端, 转换器在指定的TCP端口上监听平台程序的连接请求,该方式比较适合于一个转换器与多个平台程序建立连接（一个转换器不能同时与多个平台程序建立连接）。作为 TCP 客户端,转换器上电时主动向平台程序请求连接,该方式比较适合于多个转换器同时向一个平台程序建立连接。     

基于学习过程大数据的智能评价推送系统设计研究

本文首先对学习行为分析内涵进行了阐述,剖析了目前教学平台在智能推送和自动化精准干预的薄弱之处;根据分层软件设计思想提出智能评价推送系统的总体架构,并分别对数据采集层、数据存储层、数据分析层和系统应用层设计和性能优化开展了深入研究。研究结果表明采用Hadoop和Spark框架构建基于学习过程大数据的智能评价推送系统是一种行之有效的设计方案。     

LabSQL在LabVIEW中访问数据库的应用

LabSQL可以实现LabVIEW与数据库的链接。针对数据存储、查询不便于用户操作的缺点,本文基于液压测试平台介绍了在LabVIEW环境下,利用LabSQL软件包对实验数据进行实时存储、多条件查询的方法。结果证明,操作简单,可行有效。     

大数据背景下高校教育资源云平台建设研究

大数据时代的到来对高校数字化校园建设提出了巨大挑战,同时也为高校信息平台转型升级提供了契机。高校教育资源云平台能对高校各种教育资源进行整合,并能提供快速便捷的资源存储、共享、学习和计算功能。本文分析了高校教育资源云平台的优势,并以广西教育学院为例进一步探讨了高校教育资源云平台的环境部署、体系架构、关键技术等,以期为本领域相关研究以及其他高校信息化校园建设提供参考与借鉴。     

基于大数据技术的综合交通信息平台框架研究

通过对综合交通信息平台的需求分析,采用总体层次结构、逻辑结构、物理结构、软件功能模块组成等角度对平台框架进行研宄,并针对交通数据多源、海量、异构等特点,将大数据技术应用于平台框架构建,以适应快速增长、非结构化的交通数据存储和分析的需要。     

一种自适应雷达对抗数据平台设计方法

本文针对自适应雷达对抗数据库平台的建设进行了探讨,提出了一种自适应雷达数据库平台的设计方法,包括数据获取途径、数据采集规范、数据标注机制、数据存储计算以及分布式数据管理平台等内容,为自适应雷达雷达对抗研究中的数据库构建、自适应雷达模型训练以及试验验证系统实现提供支撑。     

岩石力学室内试验ISRM建议方法的标准化和数字化

通过系统分析岩石力学室内试验ISRM建议方法体系基本特征和试验数据信息的结构层次,提出标准化的基本思路和模式,建立标准的方法体系、统一的试验数据结构和发布模式;并应用网络语言技术设计数字化的试验数据结构文档、数据存储文档以及数据显示文档。通过试验数据格式转化平台的开发和Excel的二次开发分别实现初始试验数据文档的数字化存储和试验数据的双向传输。标准化与数字化的试验数据可脱离平台进行网络发布与传输,从而构建国际岩体力学试验数据共享平台。该平台为不同数据库之间的数据整合与共享以及虚拟实验室的实现奠定了基础。该标准化和数字化方法在BPI试验的ISRM建议方法中的成功应用,显示其科学性和可用性。     

城市基础地理空间信息数据集成模式研究

针对地理信息系统数据资源量大,存储的数据格式不同等问题导致的空间数据多源性,数据综合利用及数据共享等不便,对地理信息应用平台构建中空间数据的异源性集成进行了探讨,以期提高各种地理信息数据的集成应用.     

基于Hadoop大数据框架的BIM数据云平台架构设计与实现

随着BIM技术的应用与发展,行业内不再局限于工具软件层面以及项目单体的应用,城市级海量BIM数据的存储、管理和分析的应用需求日益增加。本研究针对此项需求,通过Hadoop大数据框架、云计算技术、WebGL 3D显示技术和BIM信息交换模板等技术的结合,提出了适用于海量BIM数据存储、管理和分析应用的BIM数据云平台,并包含以下功能：BIM数据文件解析,基于WebGL的3D可视化、BIM对象查询、BIM对象属性列表、BIM子模型抽取。BIM数据云平台的核心是数据管理,通过Hbase和HDFS,实现了PB级BIM模型的存储与管理,是当前城市级BIM数据管理的理想数据管理平台。     

地理时空信息的精细化存储方法

针对GIS时空数据存储过程中海量多源信息无法完整、详细表达的问题,采用语义约束原则将地理空间分解成最小单元——元语义对象进行对象化表达,并对构成元语义对象的几何特征、属性特征等相关信息进行封装,根据HBase可靠性高、扩展性强、实时读取的存储特点,以HBase平台作为地理时空海量数据存储的载体构建元语义对象的HBase存储模块的物理结构,提出了一种基于HBase的地理时空信息精细化存储方法。以城市地理时空信息的存储为例,对基于HBase的时空信息的精细化抽象、分类、存储等过程进行描述,说明了该方法的可行性。