电信大规模社交关系网络图数据挖掘研究

电信技术的发展使得通话网络几乎覆盖了整个社会,对电信运营商来说,这个庞大的社会网络蕴藏着巨大的商机.尤其在日益激烈的市场竞争中,客户关系的维护、客户潜在价值的挖掘以及有针对性地对客户进行营销等对电信图数据的挖掘,受到了强烈关注.通过对比,研究了当前针对类似电信网络的大规模社交关系网络图数据进行挖掘的分布式和单机图计算工具和框架,并对单机图计算工具Graphchi的单机处理数据能力进行了可行性和可用性测试,同时采用单机Graphchi对电信社交关系网络的数据进行了图挖掘研究和应用.     

基于IP和密码双重管理安全认证系统的设计和实现

以电子期刊的网上发布与管理为基础，提出了“基于IP和密码双重管理”的安全认证策略，很好地解决了信息发布与安全问题。     

粗粒土卸载－再加载变形特性的研究

计算坝体卸载及再加载时的变形在设计中是一个有待研究的重要问题。文中首先分析粗粒土卸载再加载条件下的强度－变形特性，进而讨论了卸载－再加载变形模量确定的常规方法和改进，并将拉德－邓肯模型修正后用于再加载应力－应变的弹塑性分析。结果表明，对卸载和再加载条件下变形的弹塑性分析，采用修正的拉德－邓肯模型是适宜的。     

基于云平台的分布式高性能网络爬虫的研究与设计

随着大数据时代的到来,数据成为最宝贵的资源,而网络爬虫技术作为外部数据采集的重要手段,已然成为数据分析的标配.介绍了一种高性能、灵活和便捷的基于云平台的爬虫架构设计和实现.从爬虫的整体架构、分布式设计以及各模块的设计等角度进行了详细的阐述.爬虫各模块用Docker封装,Kubernetes做集群的资源调度和管理,在性能优化上采用了MD5去重树算法、DNS优化和异步I/O等多种策略组合的形式.实验表明,对比未优化的方案,爬虫在性能上具有较明显的优势.     

冰碛土微观结构、应力应变特性及其模型研究

本文探讨了冰碛土的微观结构特征,分析研究了在高低应力条件下的应力-应变-体变特性,并阐明了影响这些特性最主要的因素。按照这些研究成果,建议了新的考虑剪胀和软化特性的非线性K-G模型。     

宽带运营的业务竞争模式及对策

文章描述了宽带网络运营的现状和困惑，分析了电信业务提供及竞争模式，提出了数字时代价值来源的“双喇叭”结构。根据该结构，文章给出了几种宽带业务运营对策，包括用户市场细分、管道控制技术和业务价值链合作。     

基于微博API的分布式抓取技术

随着微博用户的迅猛增长,越来越多的人希望从用户的行为和微博内容中挖掘有趣的模式.针对如何对微博数据进行有效合理的采集,提出了基于微博API的分布式抓取技术,通过模拟微博登录自动授权,合理控制API的调用频次,结合任务分配控制器高效地获取微博数据.该分布式抓取技术还结合时间触发和内存数据库技术实现重复控制,避免了数据的重复爬取和重复存储,提高了系统的性能.本分布式抓取技术具有可扩展性高、任务分配明确、效率高、多种爬取策略适应不同的爬取需求等特点.新浪微博数据爬取实例验证了该技术的可行性.     

基于信息增益的Hadoop瓶颈检测算法

当今,Hadoop已经成为了大数据存储和大数据挖掘的主要平台.虽然Hadoop平台通过分布式的机器集群来实现高性能的并行计算,但由于其由廉价主机组成,故当集群负载增大时,便不可避免地在某机器上出现瓶颈.针对此问题,提出一种基于信息增益的瓶颈检测算法,该算法通过计算各个资源的信息增益来检测集群的瓶颈资源.实验证明了该瓶颈检测算法具有可行性.