分布式合作缓存中的全局向量时钟模型

在分布式合作缓存技术对中文件块的查找与替换是一个全局性的管理问题。针对在中系统中由于局部时钟不一致而造成的块查找与块替换决策失误的问题。本文提出了全局向量时钟模型ＧＶＴ的概念,并通过维护基于全局向量的最老时戳表来完成块查找与块替换操作。全局向量时钟对传统的向量时钟进行了改进,提供了多种方式用于时序关系的判断。     

BUSTER：一个可移植的并行调试器

软件可移植性问题研究对提高工作站机群系统的通用性具有重要意义。并行调试器通常对于平台的依赖性强,可移植性较差。为此,本文提出了一种层次结构的设计方案,通过通用源代码信息表,较好地解决了并行调试系统的平台独立性问题,该方案已经实际应用于并行调试工具BUSTER系统,成功地实现了该系统在不同运行平台的移植。     

虚拟化的集群资源管理技术研究

在集群管理领域,集群的快速部署和快速切换等问题一直未能很好解决。随着虚拟化技术的发展,带来了解决这些问题的新方法。虚拟化方法消除了系统软件与硬件之间的耦合,使得构建定制的虚拟集群成为可能。通过分析,设计并实现了一个虚拟集群系统VirtualCluster。实验表明此虚拟集群系统比传统集群有明显优势。     

基于自主运算的自适应存储区域网络系统

存储管理是目前网络存储系统亟需解决的重要问题之一,解决存储管理问题的核心是自动适应外部环境变化,实现自我调整和自我管理,其中自适应是管理的关键.提出了一个解决存储管理的新方法和体系结构,基于自主运算理论实现自适应的SAN(storage area network)存储管理系统.在Tsinghua Mass Storage NetworkSystem(TH-MSNS)项目的基础上,提出了一个基于自主运算的SAN存储管理系统的通用结构框架,实现了一个自适应级别的自主FC-SAN存储系统.初步的实验结果说明,新     

并行集群系统的Linpack性能测试分析

§1.引言 近些年随着计算机软硬件技术的提高,尤其是网络部件性能的提高,集群技术得到不断的发展。传统的PVP(Parallel Vector Processor)超级计算机以及MPP(Massively Parallel     

并行任务动态派生的积极惰性化控制方法

本文给出了并行任务派生的理想状态，分析和研究了积极任务派生（ＥＴＤ）方法和惰性任务派生（ＬＴＤ）方法，指出了这两种方法所具有的局限性，提出了一种新的并行任务派生的积极惰性化方法（ＥＬＤＴ）及其算法．初步研究表明ＥＬＤＴ方法可安全有效地增大计算粒度，在由多个商售单处理器构成的小规模并行系统上ＥＬＤＴ算法有效地控制计算粒度和任务派生，使并行任务的派生近似达到理想状态．     

文件分配问题的一种动态解决算法

文件分配问题 (FAP)是计算机网络和分布式系统优化中的经典问题 .分析了 FAP的主要特征 ,提出了一种需求驱动的动态分配算法 ,该算法避免了复杂的运算 ,参数较少且容易采集 ,既能进行文件分配 ,也能回收闲置文件副本 .仿真实验表明 ,该算法在负载平衡、吞吐率和响应时间等方面有明显优势     

一个并行程序集成开发环境的功能框架及实现中的关键技术

高性能,高可靠性和良好的可扩展性使得机群系统的应用领域日益广泛,但是目前缺乏一个方便实用的并行程序开发环境。本文首先从方便程序员开发并行程序的角度提出了一个并行程序集成开发环境的功能框架,然后重点论述了实现集成开发环境时涉及到的一些关键问题和技术,最后简要介绍了基于这些技术的IPCE2．0系统。     

Web信息的分布式在线评测技术

通过对Web信息的跟踪记录可以实现网上用户行为的分析,同时也为Web Server和Web Cache的性能评测提供了原始数据.本文提出了分布式在线评测解决方案.该方案通过网络监听产生评测的日志,并利用分布处理扩大了系统的吞吐率,提高了系统的可用性.同时,通过在线重构、数据内核过滤等关键技术有效地提高了系统的性能.     

高效训练百万亿参数预训练模型的系统挑战和对策

随着预训练模型规模的急剧增长,训练此类模型需要海量的计算和存储能力。为此,本工作在新一代国产高性能计算机上训练了一个174万亿参数的超大规模预训练模型,模型参数量可与人脑中的突触数量相媲美。重点讨论在训练这一超大规模预训练模型中遇到的几个关键系统挑战：如何选取高效并行策略,如何进行高效数据存储,如何选取合适的数据精度,以及如何实现动态负载均衡,并总结了针对上述挑战的一些解决方法。