基于Hadoop平台的数据迁移方法研究实现

随着计算机科学的发展和大数据时代的到来,应用系统已经出现了数据海量化、用户访问高量化的局面,使得企业应用系统的原有关系型数据库(RDBMS)面临承担更大负荷的压力,系统的高性能要求得不到有效满足,对于关系型数据库所面临的问题,Hadoop平台中的HBase数据库可有效解决。以关系型数据库中MySQL数据库及Hadoop平台中分布式数据库HBase数据库为研究基础,应对企业应用数据海量化增长,提出从关系型数据库(MySQL数据库)向分布式数据库(HBase数据库)进行数据迁移的方法,并通过研究HBase数据库存储原理提出从MySQL到HBase的表模式转换原则实现高效数据查询性能的数据迁移方法。最后,将该方法与同类数据迁移工具Sqoop进行比较,证明该方法进行数据迁移的便捷性和在迁移后数据库中进行连接查询的高效性。     

分布式数据库在外贸系统中的设计和实现

分布式数据库系统是数据库技术和计算机网络技术相结合的产物,是当前数据库的必然发展趋势。该文分析了外贸系统的特点及其对分布式数据库的要求,以SQLServer2000和VisualBasic6.0为开发环境,设计和实现了外贸系统的数据库结构,体现了分布式数据库的思想,并保证了数据库安全性、可靠性和灵活性。     

分布式数据库的现状和发展方向

信息时代离不开各种信息系统,而数据库技术是构成一切信息系统的基础。随着计算机网络技术的日益成熟和应用范围不断扩大,分布式数据库成为数据库技术的核心。90年代以来,分布式数据库逐渐向客户机/服务器模式发展,并由于新的应用领域的出现,出现了许多新的技术热点。本文介绍了分布式数据库的现状以及市场上应用较广的分布式数据库产品,介绍了分布式数据库目前的研究热点和发展方向,包括多库系统、移动数据库和Web数据库等。     

异构数据库迁移的设计和实现*

介绍了基于B/S模式异构数据库迁移的具体实现, 阐述了分布式数据库概念、JDBC原理和数据库转换技巧;详细说明了数据转换规则、数据库连接、迁移过程、断点续传。     

PC ETHERnet局部网络中分布式数据库的实现

分布式数据库系统是计算机网络技术与数据库技术有机结合的产物,是计算机网络的一种颇为重要的应用。本文讨论在IBM PC/XT ETHERnet局部网络中使用数据库管理系统dBASE—Ⅱ,建立分布式数据库系统。     

分布式数据库系统的数据一致性研究

分布式数据库是数据在物理上分布而在逻辑上统一的数据库,如何维护其数据一致性是一个关键的技术问题.分析引起分布式数据库系统数据不一致的主要原因,研究分布式数据库数据一致性的基本原理,结合具体实例阐述基于ADO.Net实现分布式数据库系统数据一致性的有效方法.     

一种MySQL到HBase的迁移策略的研究与实现

随着Web2.0的到来,互联网数据快速增长。大规模数据的采集和处理及应用直接影响着用户体验,决定着企业的发展。比较传统关系型数据库和分布式非关系型数据库两者处理大数据的性能,将本地数据迁移到分布式数据库势在必行。文章分析了现有迁移工具的利弊,基于HBase数据库提出了一种有效的数据迁移策略,并依据提出的策略实现了一种半自动化迁移工具。以美国城市和方言系统CityDetail数据库数据为例,阐述了该迁移工具的工作原理并对迁移后的数据进行多次查询比较,证明了使用该工具进行数据迁移的高效性。     

基于协同缓存的分布式数据库更新机制研究

减小数据库事务中的写操作开销对于分布式数据库系统的性能而言很关键。该文提出了一种基于协同缓存技术的分布式数据库更新机制,通过在分布式数据库服务器节点物理内存之上构建全局协同缓冲池,并利用其缓存写入记录,减小了数据库事务中的磁盘访问开销,研究了基于协同缓存的分布式数据库更新机制与其在该机制下事务性能改进。     

CIAgent平台上基于MAS的企业分布式数据库集成应用研究

为了克服传统多数据库集成技术的诸多不足，提出了利用多Agent技术集成分布式数据库的新方法．结合分布式人工智能中的多代理系统（MAS）与分布式数据库技术，集成一个企业的多个现有数据库而成为一个新的同构异质分布式数据库，在不影响原来的数据库应用的条件下，提供全局模式，在CIAgent平台上构建网络通信模块，设计了多Agent系统结构，实现多Agent交互．运用该方法构建的油田分布式数据库系统能克服传统集成技术的许多不足，具有良好的开放性、适应性和互操作性．实践表明，该方法为分布式数据库的集成提供了新的组织方式，为油田的信息集成提供一种科学的新手段．     

高校分布式数据库管理实验系统的设计与实现

目前,高校分布式数据库实验一般使用Oracle数据库管理系统.然而Oracle要经过复杂的数据管理和配置才能实现分布式数据库管理系统的技术和方法,也不利于学生对一些基本概念的理解.针对这一问题,设计并实现了基于C/S的同构型的高校分布式数据库管理实验系统,提出了系统的体系结构,定义了系统语法,并详细阐述了数据库字典、语法分析模块、定位模块等关键技术的设计.该系统能够满足高校分布式数据库实验的要求,对高校教学有一定的意义.     

异构关系数据库移植平台的设计

在研究现有异构关系数据库移植工具的基础上,比较分析其各自的优劣及存在的问题,设计并实现一个更为通用的异构关系数据库移植平台。重点分析该系统的功能模块构成,并且分模块对程序设计思路和功能实现流程进行详细阐述。     

用于软件维护的Oracle数据库移植工具

作为现代计算机信息系统和计算机应用系统的基础与核心——数据库,在软件维护中充当着重要的角色,因为只有在数据库移植工作完成舌,才具备应用程序的测试环境。因此做好软件维护中的数据库移植成为首要的工作。针对极具前瞻性和发展性的Oracle数据库。提出了一套用于软件维护的Oracle数据库移植方案。利用这一方案能有效地实现数据库移植,提高软件维护效率。     

Oracle数据库跨平台数据迁移研究

从数据迁移的实际需求出发,比较Oracle数据库三种标准备份方法的优缺点,分析Oracle导出文件的结构,给出Oracle数据库从Windows平台到UNIX平台数据迁移的实现方法。     

异构数据库数据迁移的研究与实现

数据是业务运转的基础．是企业的宝贵资产。企业在系统升级过程中往往会遇到数据迁移问题,由于新系统与旧系统经常存在数据结构异构的情况．使数据迁移工作难以实现。开发一款异构数据库数据迁移工具,该工具通过框架程序在ODBC（Open Database Connectivity）开发平台以及XML技术的支持下实现数据结构异构的数据库数据迁移。     

联邦数据库系统研究

1.引言网络的发展使不同数据库系统之间的互操作在物理层成为可能,但要真正实现,还得依赖于逻辑层的处理,即数据库系统之间的交互。由于不同数据库系统之间的异质性和封闭性,使得这二技术实施起来很困难。     

浅谈数据库安全技术若干问题的探讨

在数据库系统中,由于数据大量集中存放,并且由很多用户直接共享,故安全问题显得尤为重要。因此建立良好的安全策略,既有助于保护那些迅速成为最重要的共同财富一数据,也是数据库系统应用成功的保证。为此,本文首先讨论了数据库安全性评测系统的定义、用途和分类,接着分析了审计追踪的分析方法、传输过程中对数据进行加密技术及安全套接字层（SSL）的使用、从数据库系统内部实现存储安全,最后研究了利用存储过程加强数据库系统的安全性。因此本文具有深刻的理论意义和广泛的实际应用。     

浅谈数据库安全技术若干问题的探讨

在数据库系统中,由于数据大量集中存放,并且由很多用户直接共享,故安全问题显得尤为重要。因此建立良好的安全策略,既有助于保护那些迅速成为最重要的共同财富—数据,也是数据库系统应用成功的保证。为此,本文首先讨论了数据库安全性评测系统的定义、用途和分类,接着分析了审计追踪的分析方法、传输过程中对数据进行加密技术及安全套接字层(SSL)的使用、从数据库系统内部实现存储安全,最后研究了利用存储过程加强数据库系统的安全性。因此本文具有深刻的理论意义和广泛的实际应用。     

外包数据库系统安全机制研究

在外包数据库系统模式下,组织将数据库业务外包给外部数据库服务器运行,外包服务提供者为数据拥有者及数据库用户提供远程的数据库创建、存储、更新与查询服务。由于外包服务器本身并非完全可信,外包数据库系统带来了一系列安全问题。本文讨论了数据库安全体系的分类,探讨了外包数据库的基本结构,综述了外包数据库在数据加密、密文查询策略、隐私保护、数据完整性验证及基于数据库水印技术的数据库版权保护等安全机制方面的研究现状,介绍了其研究进展,并展望了安全外包数据库系统的发展方向。研究认为,整合多种安全机制,兼顾安全性和可用性两方面的合理需求,是构建外包数据库系统的技术关键。     

数据库安全性控制的研究

针对目前数据库面临的安全威胁,从数据库安全的内涵出发,分析影响数据库安全的因素,提出数据库系统的安全体系三个层次框架.重点论述这三个层次的数据库安全控制采取的技术手段和措施,并在此基础上设计了一种安全数据库体系结构,实现数据库多层安全控制技术协作与管理,更可靠地保证数据库的安全.最后展望数据库安全研究的方向.