基于LSF集群系统的分布式并行计算

介绍了LSF集群系统和分布式并行计算的基本概念,基于LSF集群系统提出了一个分布式并行计算的基本结构和分级任务调度策略,另外在此结构上实现了矩阵相乘的分布式并行计算,并对此结构进行了性能评测,最后分析了基于LSF集群系统的分布式并行计算具有的优点和存在的不足.     

分布式渲染调度策略优化研究与实现

围绕如何提高分布式渲染任务执行效率这一目标,重点研究了LSF作业管理系统工作原理以及扩展调度插件机制,设计并实现了依据服务节点负载量及处理能力选择候选主机的分布式渲染调度算法（DRS）,并利用LSF调度插件嵌入自定义调度模块,该模块能与系统内置调度模块协同工作。最后构造仿真集群执行环境,通过模型渲染验证了算法的有效性。     

基于 OpenStack 的虚拟资源调度技术研究

传统的高能物理计算系统基于物理机集群,主要通过 Torque、Condor、LSF 等资源管理和作业调度系统将作业调度到物理机器上运行,缺少对虚拟化计算的接口支持。我们选取 OpenStack 作为底层虚拟化平台,设计并实现上层调度系统与 OpenStack 之间的桥梁,采用推拉结合的作业运行方式,构建虚拟计算集群。     

集群作业管理系统的关键技术分析及比较

集群技术是一种较新的技术,通过集群技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益,集群作业管理系统则是集群系统中的核心部分.讨论了集群作业管理系统中的一些关键技术,如作业调度的组织模式、作业调度策略、进程迁移机制、资源组织和管理等,据此分析比较了当今具有代表性的几种集群作业管理系统PBS,CONDOR和LSF,并由此得出了对于今后研究和开发下一代集群作业管群系统有重要指导意义的结论.     

曙光3000机群作业管理系统JOSS的设计与实现

介绍了曙光3000机群作业管理的设计与实现，介绍曙光3000作业管理系统的组成、结构、功能、作业调度算法和资源分配策略等以及设计时的一些考虑，最后对该系统与PBS和LSF作了比较，并对系统存在的不足之处和进一步的工作作了简要的叙述。     

改进的最小空闲时间优先调度算法

最小空闲时间优先(least slack first,简称LSF)算法结合任务执行的缓急程度来给任务分配优先级.任务所剩的空闲时间越少,就越需要尽快执行.然而,LSF算法造成任务之间的频繁切换或严重的颠簸现象,增大了系统开销,并限制了其应用.在调度策略中设置抢占阈值可以减少任务之间的切换,但现有的抢占阈值设置方法因受到固定优先级的限制而不适用于LSF算法.为了减轻LSF算法的颠簸现象,基于抢占阈值的思想,提出适用于LSF算法的抢占阈值分配方法,动态地给每个任务配置抢占阈值.任务的抢占阈值是随着任务执行的缓急程度不同而动态地变化的,而且不受任务个数的限制.仿真结果表明,通过对LSF算法的改进,任务之间的切换大大减少,同时降低了任务截止期错失率.该改进型算法对设计和实现实时操作系统具有一定的参考价值.     

基于映像的集群部署系统设计与实现

使用基于映像的安装技术和Intel的PXE协议,基于分布式网络模型设计并实现了一个Linux集群部署系统,能够快速部署大规模集群。系统具有良好的可扩展性、单一控制点。经过实践使用表明,该系统能够简化集群安装和维护工作,降低系统管理员工作量。     

基于胞腔均匀度的清浊模式码书设计算法

清音和浊音线谱频率（LSF）参数分布具有差异性。为了提高声码器中LSF参数的量化性能,利用胞腔均匀度（CE）能定量表征清浊音LSF参数分布的差异程度,提出了一种基于CE的清浊模式码书设计算法。该算法首先根据CE推导出清音和浊音参与训练的LSF参数的数量比;然后剔除清音中指定数量的非典型LSF参数;最后重新训练出码书。实验结果表明,在相同码率情况下,该算法较码书共享算法谱失真降低2.5%,平均意见得分提高了2.3%,码书存储量下降了21.1%,并且适用于不传输清浊音标志的声码器。     

集群计算系统的分析与研究

本文对典型的集群系统进行了详细分析,建立了集群计算系统的模型结构,并提出了解决集群计算系统主要瓶颈的方案,对进一步分析、评价和设计集群系统提供了有力的依据。     

使用E1接口实现集群系统与PSTN的互联

介绍了利用单片计算机控制MT－9075和M－976,进行集群专用系统中有线网络数字中继接口的设计,为集群专用通信系统的数字化和功能的进一步扩展所做的工作。     

基于动态抢占阈值的LSF调度算法

在最小空闲时间优先(LSF)调度算法中,当任务集中有多个任务的优先级相同或相近时,过多的上下文切换会产生“颠簸”现象,从而大幅增加系统开销。为此,结合LSF算法的特点,通过设计合理的动态抢占阈值,提出一种改进的调度算法DPTLSF。仿真结果表明,改进的算法能够大幅减少“颠簸”现象的发生,降低任务集的截止期错失率。     

自动应答系统中自然语言理解技术的研究

自动应答系统（QAS）是一种基于因特网的高性能软件系统。它的核心技术是基于自然语言理解的相关技术,包括知识库和语料库的建设、文本的切分和标注、句子的语法分析和语义分析等。重点论述了自动应答系统中知识信息的语义网络表示和LSF随机化句法分析模型,以及自动应答系统的结构与组成,并对LSF模型进行了参数训练,实践证明这些技术是可行的、高效的。     

线谱频率及差分线谱频率参数相关性分析

根据英语/汉语男女声线谱频率（LSF）参数及差分LSF参数帧内相关性统计结果，提出适合于LSF参数及差分LSF参数的分裂矢量量化（SVQ）分组方案。实验表明，在不考虑码书大小的情况下使用SVQ量化10阶LSF参数时，(4,6)分组的量化效果较优，否则(4,2,4)或(4,4,2)分组的量化效果较优。通过相关程度分布表清晰表明，至少68%的差分LSF参数在帧内呈微相关，有效减少了LSF参数的帧内冗余信息。随后采用DSQ和多种分组的EEDSVQ对差分LSF参数进行量化，结果表明差分LSF的量化性能优于LSF参数的量化性能。在语音编码中，采用差分LSF参数代替LSF参数作为模型参数，可在保持相同语音质量的情况下进一步降低编码速率。     

超大规模计算集群监控系统的设计与实现

【背景】传统集群监控软件在性能、灵活性、可扩展性上无法满足超过10000节点的超大规模计算集群以及多集群系统的监控管理需求。【目的】亟需设计研发新型集群监控系统,提升超大规模计算集群和多集群的运行管理能力与效率。【方法】本文采用总分架构设计,利用消息中间件、分布式存储、REST技术实现了一种超大规模计算集群监控系统。【结果】该系统支持监控指标自定义、数据主动上发、自动告警等功能,具有良好的横向扩展能力。已部署于多套计算集群中,满足上万节点和设备的监控需求,日均采集数据逾200GB。【局限】由于监控指标繁多、监控数据量庞大,针对业务场景的数据关联分析能力有待提升。【结论】本文工作满足了超大规模计算集群及异地多集群系统的自动运管需求,采用的方法对更大规模集群甚至E级计算系统的运管工具的研发具有积极借鉴意义。     

基于SSI的远程集群管理系统

受集群系统结构的固有特性的影响,集群系统的管理问题日益突出。早期集群系统通过命令行方式进行管理,存在功能不完善、结构单一、可用性差、不支持远程管理等缺点。该文分析了集群管理软件的功能需求和相关技术,设计和实现了一套基于SSI的远程集群管理系统。该系统采用标准化模块设计方法,其功能可灵活组态,扩展性较好,并实现比较完整的单一系统映像,可提供简单、高效的管理功能。对系统进行了测试和评价,并提出该系统未来的研究方向。     

集群计算系统的分析与研究

本文对典型的集群系统进行了详细分析，建立了集群计算系统的模型结构，并提出了解决集群计算系统主要瓶颈的方案，对进一步分析、评价和设计集群系统提供了有力的依据。     

基于Web的集群监控系统设计与实现

计算机集群系统在具有高性价比的同时,带来了管理性差的缺点。首先设计了一种基于Web的集群监控模型,然后结合运行在集群系统上的某数据流服务给出实现策略,并详细描述了整个集群监控系统的开发过程。实践表明,该监控系统可以大大提高对计算机集群系统的管理效率。     

高可用性集群技术应用

当今高可用性集群技术已经发展的非常成熟,并在网络系统中部署、应用日益广泛。本文介绍了高可用性集群技术的原理,应用和部署知识。并对其特点和部署方法进行了剖析和解释,总结提出了高可用性集群设计和应用的一些基本原则,希望能对读者的工作有一些启发和帮助。     

面向地震资料处理的集群系统设计与实现

针对能源应用领域的地震资料处理对高性能并行计算的需求,介绍了一种集群系统的设计与实现方案。寸集群系统中易产生性能瓶颈的网络通信子系统、存储子系统、全局共享文件系统这些关键子系统提出了详细的设计方法与实现技术。同时对集群系统管理、地震资料处理的并行计算应用部署给出了具体的实现方法。最后分别使用LINPACK基准测试与地震资料处理并行计算应用实测结果,验证该集群系统芷高性能并行计算方面的优越性。     

基于集群架构的公共自行车数据可视化系统

针对公共自行车数据可视化系统的性能问题,提出了一种整合Web服务器集群、数据库集群以及缓存框架服务器的集群架构,设计并实现了基于该架构的公共自行车数据可视化系统。系统使用Nginx搭建反向代理服务器,使用Redis搭建缓存服务器。设计的系统还集成了Session一致性策略、前端性能优化等技术。针对公共自行车普通用户和管理者分别设计了移动端应用(APP)和Web可视化页面。测试结果表明:设计的系统满足了用户对公共自行车可视化系统功能和性能的要求。