基于Python的Web数据采集技术

针对Web数据采集技术进行了介绍,分析了Web数据采集技术在将非结构化数据转换为结构化数据方面的优势:速度快、准确性高。从HTTP协议层分析了Web数据抓取的原理,并重点介绍了如何实现基于Python的Web数据采集方案。Web数据采集系统可以分为:HTTP交互和数据解析两个模块。     

基于Web Services数据抽取的研究与实践

通过对Web Services技术和数据抽取的研究,提出了基于Web Services技术的数据抽取解决方案。重点介绍了增量数据自动化产生方法,提出了基于Web Services技术的解决方案,该方案是建立在数据端到端安全传输规范和并行数据抽取的基础之上,通过使用简单的标准适配器和接口,来完成粗粒度数据交换服务和高效的数据传输,能够满足大型异构企业环境的数据交换需求。基于Web Services技术的数据抽取提高了数据抽取的安全性和执行效率,使企业数据交换更加方便、灵活、可靠,伸缩性也更强。     

基于领域模型的Web数据抽取与集成

Web数据抽取与集成的目的是提供面向领域的增值服务,结合领域数据特征,提出Web数据模式与领域数据模型.给出了基于Web数据模式的数据定位、抽取与基于领域数据模型的集成算法,并结合行业领域的需求,验证了模型和算法的有效性.     

Web数据挖掘研究与探讨

随着WWW迅猛发展，WWW上的信息量不断增加，如何在这些信息中找到用户真正需要的内容，成为数据组织和Web相关领域专家学者关注的焦点。由Web数据具有的半结构化特性，使得Web数据挖掘更加复杂，不同于传统的基于数据库的数据挖掘。为了解决这个问题，把数据挖掘的理论和技术应用于WWW，出现了一个新的研究领域——Web数据挖掘。基于Web的数据挖掘主要分为：Web内容挖掘、Web结构挖掘和Web使用记录的挖掘。综述了基于Web的数据挖掘技术概念与原理，并且介绍用以Web数据挖掘实现的一种全新的技术——XML。如何进一步开发Web数据挖掘，充分利用Web资源，还有待于进一步的研究。Web数据挖掘的研究具有极大的挑战性，同时又具有极大的开发潜力。     

Web挖掘技术及在电商ERP中的应用

数据丰富而知识贫乏导致了知识发现和数据挖掘领域的出现,基于Web的数据挖掘,是从Web海量的数据中自动、智能地抽取隐藏于这些数据中的知识。文章主要介绍了Web挖掘的概念和技术,最后阐述了Web挖掘在电子商务ERP中的应用。     

一种基于增量式时间序列和最佳任务调度的Web数据聚类算法

为了实现Web服务请求数据的快速聚类,并提高聚类的准确率,提出一种基于增量式时间序列和最佳任务调度的Web数据聚类算法。该算法进行了Web数据在时间序列上的聚类定义,并采用增量式时间序列聚类方法。先通过数据压缩形式降低Web数据的复杂性,再进行基于服务时间相似性的时间序列数据聚类;最后针对Web集群服务的最佳服务任务调度问题,通过以服务器执行能力为标准来分配服务任务。仿真实验结果表明,相比基于网格的高维数据层次聚类算法和基于增量学习的多目标模糊聚类算法,该文的算法在聚类时间、聚类精度、服务执行成功率、聚类失真度上均获得了更好的性能。     

一种基于多Agent的Web数据挖掘方法

基于多Agent的数据挖掘技术,不仅能够针对不同的Web数据综合采用不同的挖掘算法,而且可以在各站点进行并行挖掘,避免Web通信量过载。在简述Agent技术和Web数据挖掘技术的基础上,结合多Agent和Web数据挖掘,设计出一种新型数据挖掘模型,且进一步阐述了该模型,并做了一些分析测试。结果证明,该方法能有效提高Web数据挖掘的速度、准确率和覆盖率,提高了数据利用率。     

Web数据挖掘及在电子商务中的运用

电子商务现在已经开始普遍存在于现代商务活动之中,而电子商务的蓬勃发展也为不少企业产生了新的发展机遇,在机遇产生的同时也产生了大量的数据业务。面对这些新产生的庞大数据量,Web数据挖掘技术开始展现出独有的作用。Web数据挖掘技术可以很好地帮助企业在电子商务活动中挖掘、利用和管理到了全面的海量数据,使得这些数据不为人所知的价值被挖掘出来,帮助企业决策人更好的制定计划和各项业务的指标。基于此,本文主要从电子商务的概念、Web数据挖掘技术、Web数据挖掘过程、电子商务系统中的Web数据挖掘技术和Web数据挖掘技术在电子商务中的应用五个方面进行了叙述,希望以此来提高Web数据挖掘技术在电子商务中的运用程度。     

基于Web Services的数据上传系统的设计与实现

探讨了如何使用Web Services进行数据上传的思路和步骤，详细阐述了数据上传系统的框架结构与功能。对Web Services的体系结构以及数据表动态选择、数据上传和数据导入等关键技术的解决方法进行了详细阐述，并给出了一个基于XML和Web Services技术的实现方案。     

Web日志数据挖掘中数据预处理模型的研究与建立

数据的质量直的好坏接关系到数据挖掘的结果,因此数据预处理是Web日志数据挖掘首要的步骤,基于前期提出的几种数据预处理方法,提出了通用的Web日志挖掘的数据预处理模型,将Web日志数据的预处理分为5个步骤:数据清理、用户标识、会话标识、路径补充和格式化,并结合旅游网站进行了实例验证。证明该数据预处理模型是完全可行,并且具有良好的通用性和可扩展性。     

基于Web Service的分布式教务管理信息系统的设计

针对目前高校存在着地域分散、多种管理系统并存的特点,提出了一个基于Web Service的3层结构的分布式教务管理信息系统的设计方案,详细介绍了他的系统结构、功能模块及其关键技术。系统能够较好地满足当前高校对分布式数据管理的要求,并且架构简捷、投入成本低,具有良好的扩展性,可与学校内部的其他信息管理系统相互集成应用。     

基于Web检索的陕北民歌语料库设计

运用语料库语言学的基本观点,探讨陕北民歌语料库构建原则及Web管理系统的设计实现设计了陕北民歌ACCess语料数据库,其中包含全文语料数据表、句子语料数据表、陕北民歌词表数据表共3个。介绍语料库的在线检索和管理功能,提出字词频统计功能和Web在线检索功能实现的方法,开发基于ASP的陕北民歌开放性语料库Web管理系统,用户可以方便地通过IE浏览器进行语料检索、词频统计、语料提取等操作。     

基于GIS技术的数字房产管理系统研究

为了解决当前市场上房产管理系统数据不直观、图形数据和属性数据孤立：测绘数据利用不充分等不足,提出基于GIS技术的房产管理系统解决方案,然后以该方案为基础,运用GIS,Web Service等技术设计并编码实现了某市数字房产综合管理系统。这里阐述了该系统的设计要点,以及实现过程中涉及的关键技术、开发难点,最后总鲒了该系统跟传统房产系统相比的优越性,证明了将GIS技术引入数字房产的先进性和必要性。     

B/S架构地质公园信息平台的设计与实现

设计并实现了基于Web GIS电子地图和B/S架构的云台山世界地质公园信息管理平台,论述了使用Arc IMS发布地质公园电子地图,实现信息管理平台的Web GIS功能,以及基于元数据的地质科学资源共享的关键技术.     

基于Web的空间数据可视化研究

分析了Web环境中空间数据可视化的特征,提出基于结点的面向对象空间数据模型,采用面向对象的方法来表达和管理空间数据;然后设计了一个有效的空间数据可视化体系结构,该体系构架在海量空间数据的组织、管理、传输和显示上有了突破,实现了Web环境下的空间数据可视化.最后给出了该系统的应用实例,该系统具备空间数据的真实感可视化表达、场景实时漫游、交互查询等功能.     

基于WebGIS的科学城地理信息管理系统

介绍了万维网地理信息系统(WebGIS)的相关技术,详细叙述了基于WebGIS的科学城地理信息管理系统的功能设计及特点。基于WebGIS的科学城地理信息管理系统的建立,可以充分利用科学城现有的各种基础数据及专业数据信息,更好地发挥科学城地理信息系统的优势,推动其应用的进一步深入,为提高科学城相关业务部门的管理水平和工作效率提供更方便实用的技术手段。     

基于． NET技术的科技管理信息系统--以沃尔沃汽车展示网站为例

“互联网＋”时代,大众对信息的系统服务也提出了新的要求。本文应用ASP技术,深入探讨了基于Web的汽车展示系统工作原理,对适合系统的Web技术和数据库做出了优化选择。针对汽车网站的需求分析,开发了基本信息设置、新闻中心、产品中心、留言管理、管理员管理和退出后台管理六大功能模块;而且阐述了支持网站的SQL数据库,并从其功能、结构、风格上进行了设计;同时利用数据库视图、触发器技术实现了系统中约束规则在数据层与应用层的合理划分。     

基于Java的Web开发技术浅析

随着互联网技术的快速发展和Web技术的广泛应用,使得基于Web技术的应用系统的开发成为了软件开发中的热点.由于Java的可移植性、易用性等特性,再加上完善的Web应用体系结构,基于Java的Web开发技术得到了广泛应用.本文详细阐述了基于Java语言在Web开发,同时简要论述了Web应用的基本原理和基于Java的Web开发技术.     

Web服务在CATV管理系统中的应用

从一个管理系统实例出发,探讨了Web服务 (Webservice)在广电网络公司计算机管理系统中的应用,简单介绍了Agent技术和Web服务技术。建立了一个AgentWeb服务的框架 (AWS),讨论了其在CATV管理系统中的功能和作用以及它的扩展应用。     

基于Web服务的电能质量监测系统的研究

为适应管理部门对电能质量数据的实时掌握、网络共享的发展要求,利用Web服务的跨地域性、跨平台性以及信息传输的快捷和方便性,设计了一种基于Web服务的电能质量实时监测系统,能够实时监测电能质量的各项指标,消除"信息孤岛"现象并给出了系统设计的关键技术,实现电能质量信息共享,满足网络化电能质量监测需求。