一种基于Kademlia的全分布式爬虫集群方法

针对将海量爬虫节点组织成全分布式爬虫集群所遇到的高效、均衡、可靠、可拓展等问题,提出了一种基于Kademlia的全分布式爬虫集群方法。该方法通过改进的Kademlia技术建立起爬虫节点间的底层通信机制。在此基础上,根据Kademlia的异或特性及节点的可用资源情况,设计并实现具有任务划分、异常处理、节点加入退出处理及负载均衡的全分布式爬虫集群模型。在实际网络系统上的实验结果表明,该方法能有效利用海量弱计算终端的计算、存储和带宽资源,构建高效、均衡、可靠、可大规模拓展的全分布式爬虫集群。     

K网络节点标识符重复与别名现象测量

为方便P2P网络的内容投递,Kademlia协议作为一个鲁棒性强的分布式Hash表协议,被BitTorrent和eMule等P2P文件共享应用部署.在此,将这些被部署的基于Kademlia协议的网络称为K网络.K网络中每个节点拥有唯一的IP地址(或ID)是至关重要的,因为K网络中的"节点查询"和"资源搜索"都依赖于此.然而,据分析发现,K网络中相当一部分节点存在IP重复与ID别名.为深入理解IP重复与ID别名的分布特征,提出了几个度量IP重复与ID别名的测度.基于这些测度和Rainbow采集器,对K网络中的IP重复与ID别名进行了测量,发现了许多有助于P2P网络挖掘研究的IP重复与ID别名特征.     

基于两种P2P协议的数据自销毁技术

随着云计算等互联网应用的兴起,个人数据更多地存储于网络上,其数据安全面临着极大挑战,传统的数据加密方式有时候存在加密密钥不能及时销毁的问题,存在着安全隐患。针对当前个人网络数据安全问题,采用Chord和Kademlia两种P2P协议设计了个人应用数据的自销毁协议,利用P2P协议固有的扰动特性进行个人网络数据的自动销毁数据,使用OMNEST仿真软件进行了两种协议对数据自销毁的性能分析,其仿真结果表明使用Kademlia协议的数据自销毁性能更优。     

基于DHT的Kademlia路由算法改进

Kademlia是一种基于DHT的路由算法。针对该路由算法在热点资源查找定位方面所存在的问题,本文提出了一种改进策略,通过采用快速查表和权重设置对热点资源进行判断和缓存,从而提高系统的整体效率。仿真实验结果表明,改进后的Kademlia路由算法在一定条件下搜索性能优于原Kademlia路由算法。     

基于文件分片的P2P视频点播系统片断选择

在基于BT技术的文件分片传输片段选择方案基础上,提出基于KAD网和文件分片的P2P视频点播系统的设计和相应的片断选择方案,主要描述系统模型和新型的算法,该算法包括节点分类、节点服务速度的定义和估算方式、任务分配调度机制和紧急处理原则。介绍系统的实现方案,并与中心VOD方式进行对比。对比实验表明,该方案是高效和可行的。     

PRTP辅助的CDN-P2P混合模式的流媒体点播平台设计与实现

在分析CDN架构和简单P2P模式分析的基础上,提出CDN-P2P混合模式的流媒体点播平台方案.重点描述在PRTP辅助下CDN-P2P混合模型的设计方案,主要包括混合模式的流媒体点播平台总体架构设计、上层CDN架构和终端P2P的结合点(骨干节点)的设计实现、PRTP协议支持的混合式分发实现.通过实验证明CDN-P2P混合模式增强了P2P流媒体点播平台的健壮性和扩展性.最后展望该领域的主要研究方向.     

基于Kademlia算法的P2PSIP系统的研究与设计

本文首先概述了基于C/S模式的传统SIP系统的缺陷、P2PSIP系统的由来及发展现状,然后提出了一种构建于P2P层之上的SIP网络电话(P2PSIP)系统的设计方案,其中P2P层采用全分布式哈希表算法Kademlia算法实现;接着重点分析了该方案中DHT(Kad)模块的工作机制以及SIP over P2P中的交互消息;最后给出基于该方案的原型系统的测试结果。     

基于P2P的RFID编码解析网络结构与算法研究

 本文结合P2P技术,提出了分级P2P RFID编码解析网络结构.并基于改进的kademlia算法,在该网络中实现了RFID编码解析服务.实验数据表明,分级P2P RFID编码解析网络相对于基于DNS技术的EPCglobal ONS,具有负载均衡、可扩展性好、能有效应对单点失效等优点.最后,本文给出分级P2P RFID编码解析网络需要继续深入考虑的问题.     

基于Kademlia的负载平衡云存储算法

针对采用主从式结构的主流云存储系统可能出现的性能瓶颈和可扩展问题,基于分布式哈希表(DHT)技术的完全分布式云存储系统成为一种新的选择。解决好节点的负载平衡问题,是此类技术获得推广的关键。研究了Kademlia算法应用于云存储系统的负载平衡性能。考虑到算法在异构环境下负载平衡性能有明显下降,改进算法在Kademlia找出的候选存储节点中根据节点的存储能力来分配负载。仿真结果表明,改进后算法的负载平衡性能有非常明显的提高,在系统模拟运行时间足够长(如1500 h以上)时,过载节点平均下降7.0%(轻载)和33.7%(重载);文件保存成功率平均提高27.2%(轻载)和35.1%(重载),而增加的通信开销可接受。     

基于改进的Kademlia协议的P2PSIP系统研究

文中研究如何构建高效的P2PSIP系统,以节省SIP系统部署开销和提高系统运行的稳定性.考虑到SIP系统对时延非常敏感,首先改进了Kademlia协议的资源定位模型,然后提出了新型的P2PSIP系统模型.在具有数百万节点的Kad网络上的仿真实验表明,基于Kademlia协议构建P2PSIP系统具有很好的可行性和有效性.