基于Scrapy的GitHub数据爬虫

作为最大的社交编程及代码托管网站,GitHub提供了丰富的数据来源。基于Python开源框架Scrapy设计实现了一个Web爬虫,能对GitHub的资源抓取和分析,并进行了结构化处理和存储,可为后续数据分析提供基础。介绍了GitHub爬虫的设计原理、算法的实现方式,对实验结果进行了分析。     

管道流量计现场校准技术在新疆水资源取用水管理中的应用

基于对管道流量计现场校准方法的研究,开展新疆5个地区取水户21个管道流量的现场校准工作,以便携式超声波管道流量计所测得的管道流量数据与现有计量设施的管道流量数据进行比对,分别对2组数据的相对示值误差、重复性和不确定度进行分析,从中得出各取水管道合理的优化整改办法.对个别示值误差异常的取水管道计量设施给出具体解决方案,同...     

铝土矿中镓的快速比色法测定

利用镓的氧化物具有两性的性质,样品经碱熔,热水浸取后,不经酸化蒸干分离硅,直接分取碱性溶液,用盐酸酸化并使溶液酸度保持在6N(HCl),三价镓与丁基罗丹明B生成氯镓酸丁基罗丹明B的络合物一次被苯—乙酸丁酯萃取,此法可测铝土矿中0.1～8.0此g/10ml镓的含量。经试验和大批样品测得结果证明,矿样中硅高达50％以上也不干扰,与碱熔除硅反复萃取的经典比色法结果完全相符,重现性好,质量稳定,速度快,成本低。其手续如下:称取矿样0.5000g于银坩埚中,用无水乙醇湿润,加氢氧化钠     

异构HPL算法中CPU端高性能BLAS库优化

异构HPL(high-performance Linpack)效率的提高需要充分发挥加速部件和通用CPU计算能力,加速部件集成了更多的计算核心,负责主要的计算,通用CPU负责任务调度的同时也参与计算.在合理划分任务、平衡负载的前提下,优化CPU端计算性能对整体效率的提升尤为重要.针对具体平台体系结构特点对BLAS(ba...     

命名数据网络中面向移动用户的内容预取方法*

针对命名数据网络(Named Data Networking, NDN)移动性增强支持不足的问题,基于城区移动场景提出了一种基于移动预测的内容预取方法(Mobility-aware Prediction Approach for Content Prefetching, MAP-CP)及扩展方案(extended MAP-CP, eMAP-CP)。MAP-CP和eMAP-CP通过预测移动用户的下一接入点(Access Point, AP),预取在当前AP下因切换AP不能获取到的Data并缓存到所预测的下一AP相关联的NDN节点中,为切换AP后的移动用户就近服务,达到降低内容获取延迟和提高响应率的目的。eMAP-CP在MAP-CP的基础上,可预取切换AP过程中请求的Data,能够进一步提高性能。基于ndnSIM的仿真实验表明,和NDN本身相比,MAP-CP和eMAP-CP具有更低的平均内容获取延迟和更高的响应率,而且eMAP-CP更优。在移动速度为20m/s,发包速率为200pps时,MAP-CP和eMAP-CP的平均内容获取延迟可分别降低约4.0%和38.7%,响应率可分别提高约1.2%和4.9%。     

基于二维超声- 三维 CT 配准的肾脏穿刺定位方法可行性研究

医学影像引导的经皮肾穿刺手术是经皮肾镜取石术中建立手术通道的重要手段,高质量的 实时医学图像可以提高术中穿刺精度,减少手术风险。针对自由呼吸下经皮肾穿刺靶点的导航定位问 题,该研究提出了一种基于术中二维超声-术前三维 CT 实时配准的肾脏穿刺定位方法。首先对肾脏轮 廓特征的二维超声图像和三维 CT 图像进行由粗到精的快速配准,然后通过超声探头标定,将配准融合 后的图像注册到手术空间,实现穿刺靶点的实时定位。人体腹部模型实验结果表明,超声探头标定均 方根误差为 0.998 mm,二维超声和三维 CT 数据配准误差为 0.709 mm,平均配准运算时间为 1.15 s,最 终的平均定位误差为 2.265 mm。     

基于最小截取二乘法的道路线形识别算法

根据道路线形的特点，在道路数据采集车获得道路的坐标原始数据的基础上，利用基于Hough变换的直线和圆曲线提取算法对数据进行分组，然后利用基于最小截取二乘法（LTS）的选权迭代法对数据进行平差，从而实现道路线形识别的目的。最后利用条件平差对道路各段线形参数进行平差，得到线形参数的最优化结果。利用本文提出的道路线形识别算法，从原始数据中提取线形参数，进行道路线形识别，在实践中取得了良好的效果。     

基于延迟时间理论的n中取k系统检测区间模型

延迟时间理论广泛应用于系统维修领域,能够更为细致和准确地反映系统的运行状态.不同于一般维修理论只用一个阶段描述系统的故障过程,该理论将系统的故障过程分为两个阶段:正常阶段和缺陷运行阶段.系统部件的状态有正常、缺陷和故障3种情况.延迟时间理论主要应用于单部件系统和串联系统的维修和检测,目前尚未应用于n中取k系统.对此,运用延迟时间理论确定n中取k系统的最优维修检测区间,分别针对两种情况进行分析:一种是系统中部件的初始缺陷发生时间服从指数分布的情况,一种是其服从非指数分布的情况.建立单位时间维修费用模型和设计仿真过程,以单位时间维修费用最小为目标进行优化,求解系统的最优维修检测区间.最后通过数值案例表明所提出方法的有效性.