数据依赖约束下的任务调度资源选择算法

大数据环境下的计算任务往往具有一定数据依赖性关系(如MapReduce),现有的分布式存储系统任务资源选择策略选择离请求者最近的数据块响应服务,忽略了对数据块所在服务器CPU、磁盘I/O与网络等资源负载状态的考虑。在分析研究系统集群结构、文件分块、数据块存储机制的基础上,定义了集群节点矩阵、CPU负载矩阵、磁盘I/O负载矩阵、网络负载矩阵、文件分块矩阵、数据块存储矩阵与数据块存储节点状态矩阵,为任务与数据之间的依赖性构建了基础数据模型,提出了一种数据依赖约束下的最优资源选择算法(ORS2DC)。任务调度节点负责维护基础数据,MapReduce任务与数据块读取任务由于依赖资源不同而采取不同的选择策略。实验结果表明：所提算法能够为任务选择质量更高的资源,提高任务完成质量的同时减轻了NameNode负担,减小了单点故障发生的概率。     

隧道施工病害的成因及防治探讨

在隧道规划和设计阶段要预防可能的病害、危害,进行合理设计;在隧道施工阶段要采用合理的施工工艺、方法、措施和材料,以保证施工质量。在隧道运营阶段要及时检查、发现病害,分析病害成因,采用合理的整治设计和施工方法。     

青岛智能配电自动化系统的建设

已建成的配电自动化系统为智能配电自动化系统打下了基础。介绍了青岛供电公司开展智能配电自动化系统建设的总体思路及智能配电自动化系统的实现模式、网络接线原则、通信技术原则,以及具体建设措施。实践中的几点体会可供参考。     

温度感知的MapReduce节能任务调度策略

现有的FIFO、Fair、Capacity、LATE及Deadline Constraint等MapReduce任务调度器的主要区别在于队列与作业选择策略的不同,而任务选择策略基本相同,都是将数据的本地性(data-locality)作为选择的主要因素,忽略了对TaskTracker当前温度状态的考虑。实验表明,当TaskTracker处于高温状态时,一方面使CPU利用率变高,导致节点能耗增大,任务处理速度下降,导致任务完成时间增加;另一方面,易发的宕机现象将直接导致任务的失败,推测执行(speculative execution)机制容易使运行时任务被迫中止。继而提出温度感知的节能任务调度策略,将节点CPU温度纳入任务调度的决策信息,以避免少数高温任务执行节点对作业整体进度的影响。实验结果表明,算法能够避免任务分配到高温节点,从而有效地缩短作业完成时间,减小作业执行能耗,提高系统稳定性。     

基于JSP的在线考试系统的设计与实现

该文首先介绍了基于JSP的在线考试系统的现状及发展趋势,接着探讨了基于JSP的在线考试系统的开发模式和实现技术,最后介绍了该系统的主要功能和相关技术。     

整体型云爆战斗部静爆实验研究

在对整体型云爆战斗部结构设计和优化的基础上,制造了2发整体型主体战斗部原理样机,通过高速运动分析系统和爆炸场测试系统对静爆实验进行了测试.结果表明设计的原理样机结构较合理,具有良好的作用可靠性,云团覆盖面积大,爆炸威力可达6～8倍TNT当量.     

分布式发电机组微网方式接入智能配电网研究

微网技术是解决分布式电源大量介入配电网问题的有效措施。以青岛麦岛污水处理厂沼气发电机组成功地以微网方式友好接入配电网为例,介绍了麦岛沼气发电机组微网的技术构架,运行方式、微网策略、控制逻辑等,实现的微网控制功能,具有良好的经济和社会效益。     

水利施工企业如何创建优质工程

文章对施工企业如何增强创优和创新意识 ,创建优质工程提出了 8点建议。     

基于作业历史运行信息的MapReduce能耗预测模型

在数据量规模剧增的背景下,大数据处理过程中产生的高能耗问题亟待解决,而能耗模型是研究提高能耗效率方法的基础。利用传统的能耗模型计算MapReduce作业执行能耗面临诸多挑战,在对大数据计算模型MapReduce的集群结构、作业的任务分解及任务与资源映射模型分析建模的基础上,提出基于作业历史运行信息的MapReduce能耗预测模型。通过对不同作业历史运行信息的分析,得到DataNode运行不同任务时的计算能力及能耗特性,继而实现在MapReduce作业执行前对作业能耗的预测。实验结果验证了能耗预测模型的可行性,并通过对能耗预测准确率调节因子的修正,能够达到提高能耗模型的预测准确度的目的。     

轻型井点在水利工程中的应用

轻型井点降水适用于基坑开挖深度较大 ,渗透系数小 ,地下水位偏高 ,渗透系数为 0 1 - 5m d ,尤其土质条件不好的情况下使用。