基于Hadoop分布式计算架构的海量数据分析

随着互联网的发展，分析处理海量数据成为各公司组织急待解决的问题。Hadoop分布式系统依靠廉价的PC集群提供可靠的并行计算服务，其子项目Pig立足Map—Reduce并行计算框架，提供类SQL功能的PigLatin语言，成为实用、高效的海量数据处理平台。本文对Pig平台系统架构进行说明，介绍Pig平台引擎前端和引擎后端的功能，并结合实例阐述Pig平台处理PigLatin脚本过程中产生逻辑计划、物理计划及Map-Reduce计划的具体流程。     

灞河生态治理工程模型试验研究

通过模型试验，对位于西安市东郊因采沙使河道破坏严重的灞河河段进行了复现试验和研究，并以此为依据，通过优化比较为设计部门提供了合理的橡胶坝坝址和坝座高程。在此基础上，又对建坝的橡胶坝对上下游冲淤变化的影响进行了试验研究和分析，解决了工程设计中的一些关键技术问题。     

灞河生态治理工程模型试验研究

通过模型试验 ,对位于西安市东郊因采沙使河道破坏严重的灞河河段进行了复现试验和研究 ,并以此为依据 ,通过优化比较为设计部门提供了合理的橡胶坝坝址和坝座高程。在此基础上 ,又对建坝后橡胶坝对上下游冲淤变化的影响进行了试验研究和分析 ,解决了工程设计中的一些关键技术问题     

改进后的细管粘度仪及其试用

本文详细介绍了改进后的细管粘度仪的结构、测量原理及试用情况.改进后的细管粘度仪能消除α十β取值不准及搅拌引起的附加水头损失等因素产生的试验误差,并增强了细管粘度仪对粗颗粒低浓度浆体的适应性,有利于扩大流变试验范围,提高试验精度.     

基于LDA主题模型的分布式信息检索集合选择方法

该文针对分布式信息检索时不同集合对最终检索结果贡献度有差异的现象,提出一种基于LDA主题模型的集合选择方法。该方法首先使用基于查询的采样方法获取各集合描述信息;其次,通过建立LDA主题模型计算查询与文档的主题相关度;再次,用基于关键词相关度与主题相关度相结合的方法估计查询与样本集中文档的综合相关度,进而估计查询与各集合的相关度;最后,选择相关度最高的M个集合进行检索。实验部分采用R_m、P@n和MAP作为评价指标,对集合选择方法的性能进行了验证。实验结果表明该方法能更准确的定位到包含相关文档多的集合,提高了检索结果的召回率和准确率。     

灞桥河段河床演变及陇海铁路桥失事原因分析

为从2002年陇海铁路桥水毁事故中总结经验，吸取教训，对铁路桥所在灞桥河段的来水来沙条件及河床演变历史进行了分析与总结，重点论述了桥下游河段采沙以及包括该大桥在内的桥上游较短河段内多座桥梁对河床演变的影响。结合该桥梁自身安全隐患的分析，对该大桥失事原因进行了客观评价，指出河段侵蚀基准面的人为降低与多座跨河建筑物对来水来沙条件的调节是造成灞河下游河床普遍下切的主要原因；大桥失事原因是多方面的，而直接的诱发因素是桥梁下部施工、维修、抢险不当，片面强调下游河段挖沙的负面作用是不现实的。     

基于深度神经网络的多因素感知终端换机预测模型

针对基于特征工程的传统终端换机预测模型依赖于领域知识且无法充分利用用户通话、流量使用等序列数据的问题,提出基于深度神经网络的多因素融合终端换机预测模型. 该模型使用长短时记忆网络（LSTM）提取用户通话、流量使用行为序列特征,使用全连接网络融合用户自然属性、行为序列特征和历史换机信息,预测用户是否换机. 实验表明,基于深度神经网络的多因素融合终端换机预测模型能够考虑影响用户换机的多种因素,充分挖掘用户通话、流量使用行为序列特征;当召回率为0.135时,相比于传统模型精确率提高了34.3%.     

含流沙地质条件下排水管道工程的施工技巧

通过工程实践，总结了在高水位含流沙地质条件下进行排水管道工程施工的技巧，应用后不但加快了施工进度，而且确保了施工质量。     

低压管道输浑水灌溉工程中临界不淤流速的计算及防淤措施

防止泥沙在管道中淤积是低压管道输浑水灌溉工程设计成败的关键。本文用实测资料对几个常用的临界不淤流速的公式进行了检验,并对瓦斯普临界不淤流速计算公式进行了修正,得到了能够适用于低压管道灌溉工程的临界不淤流速计算公式。对含沙水流在低压管道的某些管段可能造成的回流和异重流淤积问题,提出了简单可行的防淤措施。