广域网分布式Web 爬虫

分析了广域网分布式Web 爬虫相对于局域网爬虫的诸多优势,提出了广域网分布式Web 爬虫的3 个核心 问题:Web 划分、Agent 协同和Agent 部署.围绕这3 个问题,对目前学术界和商业界出现的多种实现方案和策略进 行了全面的综述,深入讨论了研究中遇到的问题与挑战,并论述了广域网分布式Web 爬虫的评价模型.最后,对未来 的研究方向进行了总结.     

分布式约束优化

多Agent系统由于拥有智能性、自主性以及协同性等一系列的特性受到人们广泛的关注.分布式约束优化是协调多个Agent解决分布问题的有效技术,目前是多Agent领域的研究热点.本文将首先介绍分布式约束优化问题的基本概念和框架结构,总结现有的解决该问题的主要算法.并通过效率、性能、隐私等各方面对这些算法进行全面的比较与分析,然后介绍分布式约束优化问题的一些典型应用,最后还将对分布式约束优化问题及其算法未来的研究发展方向进行论述.     

Agent技术在Web服务中的应用探讨

Web服务是一组采用面向服务的体系架构的基于标准的Web协议的软件构件,而Agent是一种在某个环境中自主行动以实现其设计目标的智能化软件实体.Web服务与多Agent系统(MAS,Multi-Agent System)在架构、范例和技术方法等方面具有很大的相似性.Web服务的可信性是未来计算机软件发展关键的问题,实现Web服务在分布式环境下的协同式测试具有一定的挑战性.本文在探讨Web服务与Agent技术的共性的基础上,分析并总结了Agent技术在Web服务中的应用.针对Web服务测试的开放性、协同性、动态性和不确定性等特点,结合Agent系统的自主性、反应性、适应性和社会性,本文提出了一种基于MAS的Web服务测试框架(MAST,Multi-Agent-based Service Testing),并对其关键技术进行了探讨.     

基于MAS自治与合作机制的广域网远程监控系统

基于分布式人工智能的思想,将多Agent理论引入到广域网的远程监控系统中,扩展了传统意义上的分布式远程监控系统,使其能够运行于一个动态的、实时的、不确定的开放式网络环境中。指出了广域网远程监控系统的优势和存在的问题,提出了一种远程监控系统的Agent体系结构,分析了MAS理论在远程监控系统中的可实现性和MAS环境特性;研究了监控系统监控单元的自治、通讯和合作机制,及其Agent状态的全局可靠性和监控信息时序的可靠性。     

智能Agent与多Agent系统的研究

智能Agent及多Agent系统自20世纪80年代起一直是分布式人工智能研究的热点。对Agent理论，语言，结构以及多Agent系统结构等问题进行了研究，并对Agent与对象（Object) ,过程控制系统，软件“精灵”以及多Agent系统与分布式问题求解的区别进行了分析。     

基于移动Agent的Web服务组合执行框架设计

对Web服务组合技术深入分析，从Web服务组合的控制执行层面入手，结合移动Agent的优势，提出一种基于移动Agent的Web服务组合执行框架。对于复杂Web服务组合，框架可将其分解成若干相互依赖的任务片，其中任务片对应一个线性的子Web服务组合，然后分配给多个移动Agent进行分布式执行。     

基于移动Agent的GIS动态服务技术

利用Web服务和Agent特性来解决空间信息GIS领域的动态服务问题.提出了基于Web和Agent的GIS动态服务模型,阐述了动态服务原理和相关的实现技术,特别是利用创建、迁移GISAgent和构件下载策略,以及GISAgent和Web服务的交互操作和集成技术,实现了用功能构件的移动代替海量空间数据的移动,提高了分布式网络的计算速度,改进了空间数据处理的瓶颈问题.     

基于Hadoop的广域网分布式主题爬虫系统框架

广域网分布式爬虫与局域网爬虫相比有诸多的优势,而现有基于Hadoop分布式爬虫的设计主要是面向局域网环境的。为解决Hadoop分布式计算平台不适合部署于广域网的问题,设计了一个基于Hadoop的广域网分布式爬虫系统框架。爬虫系统利用消息中间件实现分布式可靠通信,数据存储采用可伸缩的Hadoop分布式文件系统HDFS,网页解析利用MapReduce并行处理,并基于模板匹配实现框架可定制。系统的性能仿真显示该框架具有支撑大规模爬虫并发工作的能力。     

Agent技术在Web数据仓库结构中的应用研究

针对基于Web的数据仓库体系结构存在的问题,在该体系结构中引入软件Agent技术,运用移动Agent技术来解决传统方法难以解决的一些主要问题,提出了一种基于Agent的Web数据仓库系统体系结构。文中发挥数据仓库技术和Web技术结合的优势,重点研究了Agent技术在Web服务器端的应用,在把有用的Web数据集成并入到数据仓库中这一目前的研究热点问题中,提出了基于Agent技术将HTML页面转化为XML数据源的解决方案。此外,文章分别研究了应用服务器端和数据仓库系统中的Agent技术的应用,并提出了将Agent技术引入后实现基于Web的数据仓库体系的关键技术。     

基于移动Agent的分布式多层结构及应用研究

本文在分析分布式对象技术、Web多层结构技术和移动Agent技术的基础上 ,建立了基于移动Agent的分布式多层结构计算模型 ,并将此模型应用于远程学习系统中。     

基于Mobile Agent聚类挖掘算法研究

Mobile Agent技术是随着网络应用的日益深入而发展起来的一项新兴技术。Mobile Agent技术的智能性和移动性,不仅降低了网络负载,而且提高了通信效率;此外,其支持异步自主交互、支持断连操作,具有安全性、并行性,具有学习、容错、智能化路由能力等优点,使得Mobile Agent技术在复杂的分布式问题求解方面表现出非凡的优势,因此,将Mobile Agent技术应用于数据挖掘系统中,具有很好的研究及应用前景。     

整合Agent与语义Web服务

目前的语义web服务方法和标准提供了很多由Agent平台操纵的基础设施，这有利于Agent与语义web服务的结合。本文分析了语义web服务与Agent之间的关系，提出Agent的主要角色是用来封装用户的意图，协调用户的目标，并最终调用web服务.我们利用当前的Agent技术与语义web服务技术，设计出自己的平台，整合了Agent BDI模型与语义Web服务。     

分布式搜索引擎系统效能建模与评价

针对分布式搜索引擎系统效能建模与评估问题,通过对当前分布式搜索引擎系统的建模与分类,扩展了能耗与网络开销的成本模型;对5种构建搜索引擎系统的设计方案,从系统成本、系统规模和查询响应时间等角度进行了详尽的理论分析与评价,由此发现,由广域网分布式采集系统和多机群索引系统组成的半广域网搜索引擎系统相对于其他系统具有相对较高的效能,同时能够较好地兼顾用户的服务质量.     

面向服务组合的主动Agent聚合框架及仿真实验分析

Web服务的组合需要聚合足够多的能满足服务请求的元服务,由服务请求者自己来查找这些需要的服务是目前SOA的常用方法,但这种方法没有考虑服务本身作为主体也有主动推销服务的意愿。为此提出了一个面向服务组合的主动服务聚合框架,引入Agent作为Web服务的代理可以将服务抽象地封装成一个可以主动发现服务请求的智能实体,通过意图-行为-实现机制实现了服务能力与服务请求的匹配。最后通过一个仿真程序上的几组实验数据分析和讨论了聚合框架的性能,验证了该方法的可行性。     

基于Agent的分布式入侵检测系统框架设计

在分析现有基于Agent的入侵检测系统的基础上,提出了一种基于Agent的DIDS(Distributed Intrusion Detection System,分布式入侵检测系统)模型,系统采用分布检测,分布处理的模式,通过多Agent技术的思想建立DIDS整体结构,用Agent实现不同的功能单元,给出了模型的各个组成部分,并对模型中各种Agent的功能设计和实现原理进行了分析;尽管Agent的相关理论和系统有待发展与完善,但由于网络系统的分布式的特点以及网络应用的发展,基于Agent的检测框架应是未来IDS发展的重要方向.     

可移动agent系统位置透明通信的一种实现

在可移动的软件Agent（Mobile Software Agent,MSA）的应用中,Agent并不是孤立地完成计算任务,它们需要不断地与其它agent进行信息交换,而agent的位置又是经常变动的。文中提出了一种实现agent位置透明通信的方法,主要解决agent位置追踪问题和agent迁移时的消息处理问题。