基于网格服务的GridFTP传输性能的研究

利用GT4提供的网格服务功能研究了基于网格服务的GridFTP数据传输的性能,分别在关闭网格服务环境下和开启网格服务环境下,观察利用GridFTP进行不同文件类型和大小的数据传输情况,分析了网格服务对GridFTP数据传输的影响,并针对目前GridFTP进行跨异构平台传输过程中存在的问题,提出了几种改进方法.实验结果表明,将网格服务应用于Grid-FTP数据传输,可以改善其传输性能,提高其传输质量.     

雷达情报网格数据传输服务的研究与实现

对以数据交换与共享为目的的雷达情报网格,数据传输是其核心功能.GridFTP是Globus网格计算环境中数据管理的一个通用的数据传输协议.通过对GridFrP协议、Globus Toolkit4和网格编程模型的分析研究,提出一种符合WSRF规范访问GridFTP的方式,以服务调用实现雷达情报网格数据的传输.     

GridFTP:网格环境中安全高效的数据传输协议

GridFTP作为网格环境中安全高效的数据传输协议,是对标准FTP协议的扩展。文中介绍了GridFTP的特性、实现及性能,分析了该协议的的发展前景,并详细说明了Linux系统中配置GridFTP服务的步骤。GridFTP由于具备标准FTP所没有的第三方控制传输、并行传输等新特征,已成为主要的网格数据传输协议。     

GridFTP:网格环境中安全高效的数据传输协议

GridFTP作为网格环境中安全高效的数据传输协议，是对标准FTP协议的扩展。文中介绍了GridFTP的特性、实现及性能，分析了泫协议的的发展前景，并详细说明了Linux系统中配置GridFTP服务的步骤。GridFTP由于具备标准FTP所没有的第三方控制传输、并行传输等新特征，已成为主要的网格数据传输协议。     

GridFTP数据传输模型研究

通过分析传统C/S数据传输模型的不足,介绍了GridFTP第三方控制数据传输的概念、模型结构和工作流程.在此基础上,深入研究了GridFTP基于可靠文件传输RFT(Reliable File Transfer)服务的第三方控制数据传输的模型结构、RFT服务架构、实现细节以及扩展数据块工作模式,指出GridFTP协议能够满足网格平台数据传输的需要.     

Vega Hotfile--一种网格文件管理协议的设计与实现

网格中的数据传输工具主要有GridFTP和GASS，但是GridFTP并非针对面向服务的网格体系结构设计，其部署、配置和管理困难，缺乏动态性和可扩展性；GT3中的另一个数据传输工具GASS由于传输过程延迟高，计算开销大而无法真正应用．因此基于Web Services与Servlet技术开发了一个数据传输协议，它不仅与网格面向服务的体系结构兼容，还减少了服务间由于XML消息传递带来的传输性能损失；授权之后的网格用户可以在Vega服务网格环境中动态地部署、维护、使用与卸载这种协议．测试表明，Vega Hotfile在以服务方式实现文件控制与传输的情况下具有较高性能．     

NGridFTP:一种基于GridFTP的网格数据传输工具

网格数据传输协议GridFTP提供了安全可靠地传输大量数据的能力.但是目前的最新网格中间件GT4中,GridFTP只提供了一些命令和API,一般用户使用GridFTP很不方便.在研究GT4 GridFTP的基础上,借助JavaCoG设计和实现了一个可视化的网格数据传输工具--NGridFTP,NGridFTP实现了网格数据的上传下载、并行传输、三方传输等主要功能.对大数据的并行传输实验表明,NGridFTP并行传输比传统传输具有优势,但在并行模型下,增加并行数并没有提高传输速度.     

网格工作流中数据传输服务的研究和实现

分析了网格工作流数据访问和传输的新的需求，提出了用一个特殊的基干GridFTP的网格数据传输服务来分流工作流引擎中的数据传输功能，使得引擎可以不必等待数据传输完成就可以继续控制其他的业务流程的进行，从而提高了整个工作流的效率。重点介绍了数据传输服务的设计思想和体系结构，给出了过程定义文档和接口描述。     

GridFTP服务器的构建与应用

GridFTP是Globus项目组开发的一个用于支持网格远程数据传输的一种基本的数据访问和数据传输协议。在基于Linux的GT3平台基础上,给出了GridFTP服务器配置和测试的步骤,实现了GridFTP服务器的构架;研究了GridFTP第三方控制数据传输的体系结构,描述了第三方控制数据传输过程,给出了第三方控制数据传输的客户端编程实现模式。     

基于网格服务的网格环境下数据传输

网格环境下的数据访问需要一种能够跨异构平台进行数据传输的机制，但是，现有的GridFTP协议存在某些情况下无法跨防火墙进行数据传输的局限。为解决这一问题，论文提出了一种基于网格服务进行数据传输的方法，使用数据压缩、并行数据传输、缓冲区调整技术改善了该传输方法的性能；基于传输日志实现了故障恢复，提高了数据传输的可靠性。最后使用Globus工具集实现了这种数据传输方法，并进行了传输性能的分析。     

网格环境中文件传输服务的研究与实现*

论述了利用Java CoG Kit实现网格中的文件传输服务客户端的图形化界面,提供了高性能、可靠的网格环境中的文件传输服务,它具有支持基础安全机制、客户-服务传输、第三方控制传输等功能,剖析了GridFTP,详细介绍了基于网格环境中的文件传输服务实例。     

DotDFS: A Grid-based high-throughput file transfer system

DotGrid platform is a Grid infrastructure integrated with a set of open and standard protocols recently implemented on the top of Microsoft .NET in Windows and MONO .NET in UNIX/Linux. DotGrid infrastructure along with its proposed protocols provides a right and solid approach to targeting other platforms, e.g., the native C/C++ runtime. In this paper, we propose a new concurrent file transfer protocol called DotDFS as a high-throughput distributed file transfer component for DotGrid. DotDFS introduces some open binary protocols for efficient file transfers on current Grid infrastructures. DotDFS protocol also provides mechanisms for multiple file streams to gain high-throughput file transfer similar to GridFTP protocol, but by proposing and implementing a new parallel TCP connection-oriented paradigm. Almost no research work has been conducted to suggest a concurrent file transfer protocol that simultaneously employs threaded and event-driven models in the protocol level. Due to our knowledge, DotDFS is the first concurrent file transfer protocol that, from this viewpoint, presents a new computing paradigm in the field of data transmission protocols. In our LAN tests, we have achieved better results than Globus GridFTP implementation particularly in multiple TCP streams and directory tree transfers. Our LAN experiences in memory-to-memory tests show that DotDFS accesses to the 94% bottleneck bandwidth while GridFTP is accessing 91%. In LAN disk-to-disk tests, comparing DotDFS protocol with GridFTP protocol unveils a set of interesting and technical problems in GridFTP for both the nature of the protocol and its implementation by Globus. In the WAN experimental studies, we propose a new idea for analytical modeling of file transfer protocols like DotDFS inspired by sampling, experimentation and mathematical interpolation approaches. The cross-platform and open standard-based features of DotDFS provide a substantial framework for unifying data access and resource sharing in real heterogeneous Grid environments.     

基于GridFTP的数据传输设计与实现

GridFTP是Globus网格计算环境中数据管理的一个通用的数据传输协议，具有支持GSI的安全机制、三方控制、并行传输等功能。通过对GridFTP协议的分析，描述了三方控制数据传输体系结构，设计了GridFTP客户端控制软件，详细介绍了基于GridFTP数据传输的安全认证、数据传输过程和客户端三方控制数据传输的实现。     

基于GridFTP的网格数据传输服务平台的设计与实现

网格具有很强的计算能力,要实现这一能力需要海量的数据传输.针对网格传输的问题,分析Globus提供的文件传输协议GridFTP,设计一个图形化的网格数据传输服务平台.该平台可以完成数据的上传/下载,以及第三方控制传输.     

GridFTP传输性能分析

网格环境中,数据的传输是一个基本的问题,该文研究了GridFTP的特点,根据其特点,提出若干可以改进数据性能的方法。对其在不同条件下的数据传输性能分别作了测试,实验证明,该文所提出的提高数据传输性能的方法是有效的,同时,还指出了GridFTP在提高数据传输性能时要注意的问题和受到的限制。     

Long-haul secure data transfer using hardware-assisted GridFTP

Extreme-scale scientific collaborations require high-performance wide-area end-to-end data transports to enable fast and secure transfer of high data volumes among collaborating institutions. GridFTP is the de facto protocol for large-scale data transfer in science environments. Existing predominant network transport protocols such as TCP have serious limitations that consume significant CPU power and prevent GridFTP from achieving high throughput on long-haul networks with high latency and potential packet loss, reordering and jitter. On the other hand, protocols such as UDT that address some of the TCP shortcomings demand high computing resources on data transfer nodes. These limitations have caused underutilization of existing high-bandwidth links in scientific and collaborative grids. To address this situation, we have enhanced Globus GridFTP, the most widely used GridFTP implementation, by developing transport offload engines such as UDT and iWARP on SmartNIC, a programmable 10GbE network interface card (NIC). Our results show significant reduction in server utilization and full line-rate sustained bandwidth in high-latency networks, as measured for up to 100 ms of network latency. In our work, we also offload OpenSSL on SmartNIC to reduce host utilization for secure file transfers. The offload engine can provide line-rate data channel encryption/decryption on top of UDT offload without consuming additional host CPU resources. Lower CPU utilization leads to increased server capacity, which allows data transfer nodes to support higher network and data-processing rates. Alternatively, smaller or fewer DTNs can be used for a particular data rate requirement.     

GridFTP数据存储接口框架的研究与实现

数据存储接口(DSI)为存储系统提供一个GridFTP数据传输接口,实现对不同存储系统的支持,但是DSI开发相当复杂。该文提出一个可扩展的GridFTP数据存储接口框架,分离并实现DSI共有的核心功能,提炼一个更为简洁的开发接口。实验表明,该框架简化了存储系统DSI的开发流程,满足具体应用对数据的需求。