符号数据的无监督学习:一种空间变换方法

近年来符号数据的无监督学习在模式识别、机器学习、数据挖掘和知识发现等诸多领域扮演着越来越重要的角色。然而现有的针对符号数据的聚类算法(经典的K-modes系列算法等),相比数值型数据的聚类算法,在性能方面仍然有很大的提升空间。其根本原因在于符号数据缺乏类似数值数据那样清晰的空间结构。为了能够有效地发掘符号数据内在的空间结构,采用了一种全新的数据表示方案:空间变换方法。该方法将符号数据映射到相应的由原来的属性组成的新的 维度的欧氏空间中。在这一框架的基础上,为了找到符号数据更有代表性的模式,结合Carreira-Perpin提出的K-modes算法进行无监督学习。在9个常用的UCI符号数据集上进行了测试,与传统的符号数据聚类算法进行了实验比较,结果表明几乎在所有的数据集上提出的方法都是更加有效的。     

一种用于海洋大数据的低功耗数据采集器设计

为了对海洋环境进行实时监测,设计了一种对气压、气温、湿度、降水、风速、风向、潮汐和盐度等各类信息进行采集的低功耗数据采集器。首先对总体硬件框架进行了设计,然后对各组件的硬件组成进行了详细描述,即数据采集接口、存储器模块、通信模块、显示模块和时钟以及看门狗等硬件进行设计;同时对软件总体框架进行了设计,对软件的各组成部分如串口的初始化、传感器数据读取流程均进行了详细描述。最后,对海洋数据采集器在海洋监测系统中的应用进行了说明。为了验证数据采集器的功能,对所设计的采集器进行了测试,实验表明文中方法能对海洋环境信息进行实时监控,具有测试准确、成本低、功耗低以及布设简单优点。     

考虑空间相关性的数据空间特征提取方法

针对具有空间分布特性的时空数据,首先考虑数据的空间相关性对数据进行空间系统抽样,形成灾害数据空间分布样本;然后考虑样本数据的时间维度,运用粗糙集数据约简方法提取数据的空间特征.空间抽样方法能保证抽样精度、提高抽样效率;基于样本数据的约简技术能在保证数据主要传达信息不丢失的前提下对数据进行有效压缩、极大降低数据量,是解决海洋灾害数据监测花费巨大、数据分析繁杂的一种客观方法.最后,以某浅滩某次海洋灾害时空数据进行仿真,验证了数据简约方法的优良性.     

一种针对商品数据记录的自动抽取方法

提出一种针对电子商务网站商品列表页数据记录的自动抽取方法。该方法根据商品记录的特点,通过商品记录中商品的文本、图片以及布局等节点类型信息计算节点对应的值,依据节点值的相似度对节点进行分组,再从不同分组中过滤出包含数据记录节点的集合,从而抽取整个页面的数据记录。实验结果证明该方法有效且抽取效率较高。     

驰骋数据海洋

浩瀚的数据海洋始终处于不断发展、变化的过程中，当企业数据的处理能力提高到一定程度时，给企业注入的活力和变革将不可限量。对于日交易额达到45亿元的支付宝来说，如何畅游于大数据海洋？     

一种面向空间数据库矢量数据的授权模型与实现方法

空间数据库的广泛应用给人们的生活带来极大便利的同时,也带来了严重的安全威胁.空间应用要求授权系统支持灵活的细粒度授权策略以及否定策略,提供高效的授权实现技术.针对这些安全需求,提出一种基于谓词的矢量数据授权模型,并依据空间数据库管理系统在实现上的特征,采用谓词改写的方法实现对矢量数据的有效授权.和现有工作相比,该模型利用授权谓词表示授权区域,具有更灵活的表达能力,且支持否定授权;所提出的谓词改写的方式不仅避免授权判定时额外增加的一次空间查询,而且可以保证与空间数据库管理系统的低耦合度,还有利于空间谓词的优化,减少空间谓词的冗余.实验证明,该授权模型和实现方法能够满足空间应用的安全需求,实现对空间数据库矢量数据的访问控制和有效授权.     

一种新型多维数据空间放置算法

介绍了一种新型的多维数据空间放置算法——SMDPA.该算法使用数据超方体的先验被访问概率以及访问之间的相似度放置超方体.即使在数据超方体的被访问频率不满足均匀分布的情况下,该算法可以有效地放置超方体.模拟结果证明,该算法较传统算法有更良好的性能.     

数据空间：一种新的数据组织和管理模式

随着数字经济的快速发展,如何实现非可信环境下的多方数据融合,为跨组织场景的数据共享、数据分析以及数据服务寻找新途径,成为了社会数字化产业升级中面临的新问题。数据空间为解决这些问题带来了新思路。文中回顾了数据的组织和管理发展历程,指出在大数据背景下数据空间的系统研究具有急迫性和重要性,分析了数据空间的内涵并进行了形式化描述,提出了基于数据空间的大数据平台架构,总结描述了3类经典的应用场景。围绕数据空间的构建工作,从数据建模、动态演变、数据查询处理、安全与隐私拓展方面分析了当前的关联研究问题和主要技术方法,简述了数据空间在不同领域的实现和应用情况。最后从多模态数据融合、高效的查询处理、数据的安全共享及基于数据空间的大数据平台构建分析方面展望了研究前景和挑战。     

一种分布式数字海洋云系统研究

海洋数据分布区域广泛且数据量庞大,现有数字海洋系统相对独立,海洋数据信息共享度低,制约了大规模海洋数据的高性能计算。为"数字海洋"系统提供有力的数据支持和计算服务。本文提出一种基于云的分布式数字海洋系统,把不同的海洋数据通过高速网络连接起来建立一个存储云,使用一个专用的网络服务协议,用于高性能广域网络连接的计算机集群所进行的大型分布式数据集的高性能计算。实验结果表明,与现有基于Hadoop分布式数字海洋系统相比,该系统的性能有显著提高、数据高度共享。     

一种多传感器数据自适应空间分级融合算法

当采用分布在不同空间位置上的多传感器观测值对测量噪声干扰下的参数进行融合估计时,被测量的空间分散性对融合结果影响较大.针对该问题,以自适应加权融合算法为基础,提出了自适应空间分级融合算法,并给出了误差分析和应用方法.该算法将融合过程分解为两次寻优,第1次是局部空间的自适应加权寻优,第2次是在全局空间内的融合寻优.计算机仿真结果表明:该算法在估计空间分布不均匀的被测量时优于自适应加权融合算法.     

一种远程数据采集系统

介绍一种远程数据采集系统,该系统采用ＳＴＤ总线工控机,使用由ＡＴ命令集控制的ＭＯＤＥＭ调制解调技术,通过公用电话网络进行远程数据通讯,可以实现多采集结点的实时远程数据采集,处理及管理功能。讨论该系统的设计特点,并对远程通讯中的求和校验,实时解锁,通讯失败补救等措施进行论述。     

农业普查空间数据处理与分析平台的构建

刚刚进行的第二次农业普查为了解我国农村现状提供了宝贵的数据资源,然而现有的农普数据处理系统缺乏对农业普查数据的深入挖掘和分析,无法应对农业普查数据的分析需求.本平台以某地区第二次农业普查数据为基础,能灵活全面地进行农普数据的组织提取,并利用地理信息使数据直观有效的展示.根据空间相关性采用新的缺值估计方法,利用空间数据分析模型对统计信息进行分布、行为特征分析,充分发挥农普数据的实用价值,成功实现了数据处理与分析一体化.     

分布式异构空间数据共享研究

在构建防震减灾WebGIS体系的过程中,引入GML来描述空间数据,设计了空间数据库系统,以实现多源异构数据的共享。系统基于客户层、服务器层和数据库服务器三层体系结构来建造。客户层实现图形用户界面并完成数据的表示。服务器包括Web服务器和GIS应用服务器,前者主要用以客户端通信、后者则要实现对数据库服务器的访问,多源空间数据的获取、转换和输出标准的GML文件等。数据库服务器用来存放本地数据和链接分布式异构数据库。系统采用Java Servlet来完成Web服务器和GIS应用服务器的功能开发,通过Java applet实现客户端、并利用SVG来实现GML数据的可视化。     

对象-关系模型在空间数据管理中的应用

对象-关系模型已经成为解决增长型数据管理以及分析非传统数据库应用程序的新标准。本文介绍了在某实际应用系统中使用对象-关系模型存储和管理空间数据的方法，简化了应用程序的开发，提高了系统性能。     

一种数据仓库数据立方体空间采样估计策略

对数据仓库多维视图进行容量估计是数据立方体设计，数据仓库存储规划和实现查询优化的基础，首先以统计理论为基础，提出了一种基于采样的数据仓库数据立方体空间估计策略，该策略针对不同类型的多维视图，对样本统计结果采用不同的空间放大策略，确保了估计结果具有较高的准确性，同时，该策略在最大估计的基础上采用一些启发式规则，对估计视图集进行有效的约简，并对估计过程中采用了样本视图预物化思想，根据预物化视图集生成优化的立方体空间估计序列，从而大幅缩短了整体估计时间。     

利用相关性进行非规则数据场体绘制

文中给出了一种利用象互相关性进行非规则数据场体绘制的方法。该方法通过分割图象空间，遍历体元后向相邻关系以建立基本可见性次序，以扫描转换方法求交和完成交点插值。最后在基本序的基础上适当调整，完成体绘制。     

LBS中外包空间数据的kNN安全查询方法

云计算服务允许数据拥有者将数据库外包出去,从而避免高昂的存储和计算资源,该方法的关键在于既要对第三方服务提供商保持数据的机密性,又要为认证用户提供实时查询结果。对此,提出一种转换和加密方法,应用到服务提供商在空间数据集上执行用户查询和响应过程中。采用空间填充Hilbert曲线将多维空间的每一个空间点映射到单维空间;基于顺序保留加密技术处理转换的空间数据;用户向服务提供商发起基于Hilbert值的空间kNN查询,并应用加密密钥对查询响应进行解密。实验证明该加密方法能减少认证用户与服务提供商之间的通信开销。     

图形硬件辅助的快速数据场体绘制方法

本文以规则数据场的体绘制过程进行了讨论，在此基础上给出一种图形硬件辅助的体绘制方法，该方法通过ＧＯｐｅｎＧＬ提供的函数和接口，利用高性能图形工作站ＳＧＩ的硬件支持快速实现规则数据场的体绘制。本文给出实现方法以及实验结果。     

用图象平面分割方法实现非规则数据场体绘制

本文给出了一种对非规则数据场进行体绘制的方法。该方法具有自适应性。文中给出了实现方法及结果。     

基于关联规则的空间数据知识发现及实现

空间数据挖掘就是从空间数据库中抽取隐含知识、空间关系及空间数据库中存储的其它模式的方法。空间关联规则是空间数据挖掘的一个重要表现形式,利用空间关联规则把空间数据库中的数据转化为知识是一个很好的方法。本文在分析空间关联规则的基础上,用基于关联规则的逐步求精挖掘算法,得出空间数据库中的知识,通过实例证明其方法的可行性。