3MDG:基于动态均衡布局的网格元数据管理模型

通过对网格及元数据特点分析，给出了一种数据网格环境下的元数据管理模型。该模型目的在于实现分布式的元数据管理平台，负责对元数据的注册、访问及管理。通过建立元数据到存储系统的映射，用户可进行元数据资源的透明访问。为了适应网格中资源的多变性，提出改进的动态区间映射布局算法对元数据进行动态的、均衡的、可伸缩的重布局，以提高存储系统的自适应能力。     

面向海量空间数据存储的元数据管理机制

为了有效管理海量空间数据存储的元数据,引入了一种基于一致性哈希的分布式元数据服务器管理架构,并在此基础上提出了一种元数据轮式备份策略,将经过一致性哈希算法散列后存储元数据的节点按轮转方式进行数据备份,有效缓解了元数据管理的单点问题与访问瓶颈.最后对轮式备份策略进行测试,得出最佳元数据节点个数备份方案,与单点元数据服务器相比提高了元数据的安全性,降低了访问延迟,并结合虚拟节点改善了分布式元数据服务器的负载均衡.     

The AMGA Metadata Service

We present the AMGA metadata catalogue, which was developed as part of the EGEE (enabling Grids for EsciencE) project’s gLite Grid middleware. AMGA provides access to meta data for files stored on the Grid, as well as a simplified general access to relational data stored in database systems. Design and implementation of AMGA was done in close collaboration with the very diverse EGEE user community to make sure all functionality, performance and security requirements were met. In particular, AMGA targets the needs of the high energy physics community to rapidly access very large amounts of metadata, as well as the needs for security of the biomedical community. AMGA therefore tightly integrates fine grained access control making use of a virtual organisation management system. In addition, it offers advanced federation and features to increase dependability, performance and data security.     

数值模拟网格数据模型设计与实现

在等离子体动力学、电磁学理论等物理问题的数值模拟中,各类数值模拟程序产生了大量复杂结构的科学数据.一方面,计算程序需要以高效率的I/O方式存储数据,另一方面,数据需要在各类程序间很容易地交换与共享.随着数据的规模与复杂度不断增加,传统数据管理方式的局限性日益突出.为此,设计了面向计算物理领域的数据存储模型--数值模拟网格数据模型(JAD),引入元数据管理机制,对数值模拟程序数据对象进行抽象与封装,在HDF5软件库基础上实现了高层I/O函数库(JADLib),集成先进的数据存储技术,提供直观、易用的应用程序编程接口(API),使得数值模拟数据以统一格式高效率地存储.目前,JADLib已推广应用于高功率微波、惯性约束聚变等领域多个数值模拟程序中,与元数据管理系统(JADIS)、并行可视化系统(JaVis)建立了耦合,使得用户可以直接利用这些系统进行数据的浏览、分析及可视化,促进了应用程序间的数据共享.     

信息网格中元数据层次化结构模型的研究和应用

数据的透明访问是信息集成技术研究的重点问题之一，分布自治的动态网格环境为数据的透明访问带来了更大的挑战，因此网格在分布式数据的异构透明和位置透明的基础上，提出了名字透明、并行透明、模式变更透明等更高层次的要求，这对于描述资源结构、内容、访问方式的元数据的设计也提出了更高的要求，基于信息资源空间模型的元数据层次化结构模型对屏蔽物理资源模式差异和模式变化，实现物理资源命名和位置独立性，实现资源透明访问的目标具有有益的帮助，最后介绍了支持这种元数据结构的元数据目录服务在铁路信息网格中间件中的设计和实现。     

Scalable multimedia delivery with QoS management in pervasive computing environment

People are increasingly demanding rich-media and bundled services. However, the diverse terminals, heterogeneous networks as well as various user requirements constrain the multimedia access to low quality in the pervasive computing environment. In order to enable rich-media delivery across a wide range of devices and networks, multimedia adaptation with scalable QoS management is an important issue. Our research introduces a Scalable Multimedia Delivery (SMD) framework with QoS management. This framework utilizes the CAM4Home metadata model to aggregate multimodal rich media services into a bundle. MPEG-21 metadata is integrated into the CAM4Home model to enforce interoperable QoS management. The issues in supporting QoS are addressed on both fidelity and modality. We further develop the SMD system in IP Multimedia Subsystem (IMS) architecture, where multimedia adaptation is implemented through application-level QoS negotiation.     

一种基于兴趣聚集的P2P元数据管理机制

基于半结构化的P2P存储系统,设计一种基于兴趣聚集的元数据管理机制。采用分层的Bloom filter结构存储并维护热点和本地元数据信息,将元数据的查询请求路由到不同的超级节点上,实现元数据的分布式管理。实验结果表明,该机制能明显提高元数据的查询效率和访问速度,具有较好的适应性和可扩展性。     

DEAM: Decoupled,Expressive, Area-Efficient Metadata Cache

Chip multiprocessor presents brand new opportunities for holistic on-chip data and coherence management solutions. An intelligent protocol should be adaptive to the fine-grain accessing behavior. And in terms of storage of metadata, the size of conventional directory grows as the square of the number of processors, making it very expensive in large-scale systems. In this paper, we propose a metadata cache framework to achieve three goals: 1) reducing the latency of data access and coherence activities, 2) saving the storage of metadata, and 3) providing support for other optimization techniques. The metadata is implemented with compact structures and tracks the dynamically changing access pattern. The pattern information is used to guide the delegation and replication of decoupled data and metadata to allow fast access. We also use our metadata cache as a building block to enhance stream prefetching. Using detailed execution-driven simulation, we demonstrate that our protocol achieves an average speedup of 1.12X compared with a shared cache protocol with 1/5 of the storage of metadata.     

水利工程地理信息元数据的设计

通过对国内外著名的地理信息元数据标准的剖析,讨论了元数据的基本概念及元数据管理系统的开发和网络访问技术。在此基础上,结合水利工程地理信息元数据的特点实现了水利工程元数据标准、编写指南、关键词词典等功能,对元数据库建设具有有益的借鉴价值。     

基于J2EE的元数据管理系统的设计与实现*

对基于XML的多源异构数据融合、遥感数据存储、数据持久化以及用户访问控制技术进行了分析和设计;讨论了元数据管理系统的实现技术、设计思想和系统构架,注重系统的可移植性、可维护性和可扩展性;实现了基于J2EE技术的元数据管理系统.     

Metadata management for distributed first principles calculations in VLab—A collaborative cyberinfrastructure for materials computation

This paper describes the metadata and metadata management algorithms necessary to handle the concurrent execution of multiple tasks from a single workflow, in a collaborative service oriented architecture environment. Metadata requirements are imposed by the distributed workflow that calculates thermoelastic properties of materials at high pressures and temperatures. The scientific relevance of this workflow is also discussed. We explain the basic metaphor, the receipt, underlying the metadata management. We show the actual java representation of the receipt, and explain how it is converted to XML in order to be transferred between servers, and stored in a database. We also discuss how the collaborative aspect of user activity on running workflows could potentially lead to race conditions, how this affects requirements on metadata, and how these race conditions are precluded. Finally we describe an additional metadata structure, complementary to the receipts, that contains general information about the workflow.     

计算资源共享平台中非集中式的元数据管理

提出了计算资源共享平台中的一种非集中式元数据管理方法,它利用对等网络的方式把数据和元数据分散到网络上的其他节点,而不是在后台服务器端。该方法可以在平台运行数据密集型应用时支持大容量的并行工作机读写数据,同时具有随机的访问、灵活的访问粒度、支持高负载的并行读写的特点。运用了分布式哈希表技术,把大容量元数据划分成树型结构的分段树的形式。描述了数据与元数据的读写与追加新数据的过程。测试结果表明：该方法针对3D图像渲染类数据密集型应用,在不同的工作机并行访问与读写过程中,可以获得很高的聚集带宽与平均读写带宽。     

空间数据存储对象的元数据可伸缩性管理*

基于空间数据面向对象存储思想和云存储可扩展架构,将控制信息集中在元数据服务器集群中管理,而实际的空间数据基于对象存储分布到存储设备集群中,实现控制信息路径与数据传输路径的分离,并缓存热点空间数据对象接口,以减少元数据访问次数和降低其服务器负载;基于对象存储设备的并行性和CDMI标准对元数据进行自上而下的功能分层管理,增...     

网格环境中的多维数据信息集成访问研究

在实际的应用环境中，网格数据管理需要集成已有的信息资源，并通过发布领域相关的元数据获得领域内信息数据的集成访问。该文以油气勘探开发领域内的信息资源为主要研究对象，在分析了它的多维度、多层次、结构化特点的基础上，设计了一种对已有数据库集成访问的网格构件IAC。同时，给出了描述IAC代理数据内容及映射关系的元数据模式，并讨论了该构件在应用网格体系结构中的作用。     

网格环境下的数据存储

数据存储可以使利用不同存储环境的用户有效地访问数据。本文对网格环境下的主要存储技术进行了介绍。讨论了在本地和远程存储数据时，存储方法要考虑的问题；数据存储的基本传输和存储单元及存储模式。     

开放式安全存储区域网模拟平台

模拟系统是研究与测试系统功能的重要方法,分析了现有存储区域网模拟系统,针对测试各类应用于保护存储区域网系统的安全机制,设计了开放式安全存储区域网模拟平台.使用线程模拟存储区域网系统中的主机、元数据服务器和存储设备,使用缓冲区模拟存储区域网系统中的通信,实现了接收访问请求和主机模块,构建了元数据和存储设备模块的框架,提供了实现元数据管理和存储设备中数据管理功能的功能接口,能模拟存储区域网的各项功能;在元数据和存储设备模块中提供了增加安全保护机制的安全接口,通过实现的不同安全保护机制,能模拟各类安全存储区域网系统,从而为测试各类应用于保护存储区域网系统的安全机制提供良好的平台;最后在元数据和存储设备模块中,通过功能接口实现了基本的元数据管理和存储设备中的数据管理功能,测试系统是否能正确地处理访问请求,完成存储区域网的功能.测试结果表明:开放式安全存储区域网模拟平台能模拟存储区域网处理访问请求的流程,为测试各类应用于保护存储区域网系统的安全机制提供了良好的基础.     

网格环境下的数据存储

数据存储可以使利用不同存储环境的用户有效地访问数据。本文对网格环境下的主要存储技术进行了介绍。讨论了在本地和远程存储数据时,存储方法要考虑的问题;数据存储的基本传输和存储单元及存储模式。     

Context-aware middleware for resource management in the wireless Internet

The provisioning of Web services over the wireless Internet introduces novel challenging issues for service design and implementation: from user/terminal mobility during service execution, to wide heterogeneity of portable access devices and unpredictable modifications in accessible resources. In this scenario, there are frequent provision-time changes in the context, defined as the logical set of accessible resources depending on client location, access terminal capabilities, and system/service management policies. The development of context-dependent services requires novel middlewares with full context visibility. We propose a middleware for context-aware resource management, called CARMEN, capable of supporting the automatic reconfiguration of wireless Internet services in response to context changes without any intervention on the service logic. CARMEN determines the context on the basis of metadata, which include declarative management policies and profiles for user preferences, terminal capabilities, and resource characteristics. In addition, CARMEN exploits the mobile agent technology to implement mobile middleware components that follow the provision-time movement of clients to support locally their customized service access. The proposed middleware shows how metadata and mobile agents can favor component reusability and automatic service reconfiguration, by reducing the development/ deployment complexity.     

元数据管理在作战系统数据集成设计中的应用

数据集成是舰艇作战系统体系结构设计的重点之一。为了解决作战系统接口设计存在的问题,提出采用XML数据建模和元数据管理技术的集成设计方法。通过填充型号项目表、二级系统表、上网节点表、接口规格表、信息单元表、数据字段表和数据类型表等7张表构成的接口模板得到数据模型,并开发实现工具软件辅助完成数据建模和元数据管理,从而有效提高作战系统数据集成设计的效率。