非结构化数据的ETL设计

为了实现非结构化数据的ETL处理,分析了数据整合的发展现状和业务需求,描述了目前国际流行的公共仓库元模型（CWM）以及在ETL实现中的作用,详细分析了结构化数据和非结构化数据的不同特点。针对两种数据的差异,提出了解决非结构化数据的属性提取和数据打包的方法,为非结构化数据形成元数据奠定了基础,从而实现了非结构化数据的ETL设计,设计完全满足标准的数据整合要求。     

面向数据库查询的非结构化数据融合存储系统

为提升非结构化数据处理过程中数据库主机的存储能力,设计了面向数据库查询制度的非结构化数据融合存储系统。根据非结构化存储框架连接形式,确定融合控制电路对于数据存储载体的约束作用能力,完成数据融合存储系统的关联硬件执行环境搭建。定义查询指令所属类型,通过优化非结构化数据目标的方式,得到最终的数据融合代价估算结果,完善面向数据库查询的信息参量存储策略。联合相关硬件执行设备,实现非结构化数据融合存储系统设计。实验结果表明,与传统I/O模拟器存储网络相比,在处理非结构化数据时,融合存储系统的数据库主机明显具备更强的信息存储能力,与之相关的数据信息连接并发个数值也相对更大。     

基于结构化噪声矩阵补全的Web服务QoS预测

随着面向服务计算技术的快速发展,越来越多具有相同或相似功能的Web服务被部署在网络上。用户进行服务选择之前,通常需要根据历史调用信息对未使用过的服务QoS进行预测。由于历史调用信息收集过程缺乏有效的监督和约束机制,所采样的QoS信息往往容易受到结构化噪声污染,从而导致现有方法预测性能急剧下降。为了克服这个困难,通过将Web服务QoS预测问题建模为L2,1范数正则化矩阵补全问题,提出了一类基于结构化噪声矩阵补全的Web服务QoS预测方法。真实数据集上的实验结果表明,该方法不仅能精确地辨识出QoS采样矩阵中噪声行所在位置,而且能对缺失Web服务QoS进行有效预测。     

大数据环境下的海量非结构化信息处理

文章针对大数据环境下的非结构化数据的特性和存储现状进行分析,运用分布式云存储理论,以及分布式技术和软硬件一体化原理,提出一个务实的高性能、可伸缩、易管理的分布式海量非结构化信息处理解决方案。     

企业级非结构化数据管理平台分析

企业在经营管理的过程中会出现大量的非结构化数据,如果忽视对其进行数据价值挖掘,企业对市场的适应能力将被严重的削弱,所以企业级非结构化数据管理平台的构建越来越受到关注,本文以Linux集群为基础的Hadoop开发框架管理平台为对象,对企业非结构化数据管理平台架构、平台功能和特点展开研究,为提升企业级非结构化数据的管理水平作出努力。     

一种面向语义Web服务的软件设计语言和设计方法

在分析已有的面向服务的设计和开发方法的基础上,设计了一种语义编程语言SPL,并基于该语言提出一种面向语义Web服务的软件设计和开发方法,试图提供一种有效的解决方案,用于设计和开发面向语义Web服务的软件系统.结合旅游预订领域的一个实例,讨论了该方法的全过程.还给出了SPL语言和相关语言的比较.该研究对面向语义Web服务的软件分析、设计和开发具有一定的参考作用.     

企业非结构化数据检索研究

随着信息化的高速发展,企业内部各业务系统中非结构化数据的数据量急剧膨胀,使得信息的搜索工作变得极为繁琐。建设该企业级非结构化数据检索平台,在Linux计算机集群上部署Hadoop开发框架以及Solr全文检索系统,将各业务系统中的非结构化数据进行集中式的存储、管理,并且提供统一的搜索服务。介绍了Solr的原理,并使用它搭建非结构化数据的中文搜索引擎,通过测试证明了该搜索引擎具有良好的搜索性能。通过检索平台,用户能够快速而高效地获取精确的搜索结果。     

基于NLP技术的计算机类就业辅助应用

大数据专业作为目前的新兴专业方向,在人才培养、教学计划以及学生就业指导市场需求方面对大部分学生和老师来说都还非常陌生.本文通过爬取2020各招聘网站数据,通过NLP技术分析和挖掘2020最新的招聘信息数据,从大量的非结构化文本中,通过嵌入式词向量技术、信息聚类、关联规则等技术,提取有价值的信息,为学生提供大数据方向的个...     

面向大规模定制的非结构个性化客户需求结构化处理研究

大规模定制客户个性化服务需求往往具有非结构化特征,准确获取并分析真实客户需求是大规模定制成功实施的关键。首先讨论大规模定制客户非结构个性化需求的内涵和判定方法,针对非结构个性化需求特点构建大规模定制客户非结构个性化需求结构分析框架,然后设计三元组映射规则,对QFD进行扩展应用,实现非结构个性化客户需求向结构化产品需求的转换,最后举例说明结构化方法的具体应用。方法具有普遍适用性,对云计算等IT个性化服务定制具有指导意义。     

非结构化数据存储中面向访问任务的小文件合并策略

分析了非结构化数据储存方式下云存储层次结构,探讨了面向访问任务的小文件存储问题,提出了小文件合并的策略.     

支持事务的非结构化数据聚合存储系统GSL

文章提出了一种将非结构化数据集中存储,同时支持事务的存储方案,并依据此方案实现了一个高效、易用的数据存储系统GSL。GSL的数据存储接口与文件系统的接口风格一致,同时支持事务处理。文章将GSL与文件系统和Oracle数据库的BLOB存储效率进行了测试和比较,结果表明GSL的存储效率与文件系统相当,并优于BLOB。     

无人机巡视非结构化数据服务平台研究

针对无人机输电线路巡视应用和巡检数据特点等方面进行需求分析,进行无人机输电线路巡视非结构化数据平台研究.构建覆盖视频、图像、音频、激光点云数据和倾斜摄影数据等非结构化数据服务平台,实现对全省输电线路非结构化数据的统一存储和管理,为公司各单位的输电线路巡检数据应用提供非结构数据服务能力,消除公司非结构化数据服务短板,为实...     

一种基于Web服务的应用集成解决方案

文章针对信息化建设中出现的分散、异构资源之间的“信息孤岛”问题，提出了一种基于Web服务的应用集成解决方案。首先给出了该解决方案的体系结构，然后针对其中的关键技术——安全策略进行了重点的分析和研究。     

基于服务链的Web服务组合方法

以Web服务本体和领域本体为基础,采用服务轮廓的匹配算法,提出一种基于语义匹配的查找服务链的方法。使用这方法可以根据服务请求发现一个服务链,将这个服务链组合起来,可以满足请求者的需要。把本方法应用到一个具体的实例,说明本方法是怎样查找服务链的。     

面向语用Web服务的网络服务管理机制研究

语用Web服务在将来的网络服务管理研究中成为趋势.文中提出将语用Web服务作为网络服务的管理对象,研究语用Web服务管理与网络管理的融合等关键技术问题,开发出下一代互联网面向语用Web服务的网络管理系统.     

IBM推出业务分析新产品，管理分析非结构化信息

近日，IBM发布了新的业务分析产品：IBM Cognos内容分析软件、IBM InfoSphere内容评估软件和IBM InfoSphere主内容软件，旨在帮助客户以统一的方式更好地管理和控制结构化和非结构化数据。同时基于企业内各方面内容提供有价值的洞察。     

Web服务应用接口系统的开发研究

随着Web 服务技术的不断成熟,其在异构系统集成应用中的优势逐渐显现,基于Web服务的应用集成技术成为企业信息系统研究的热点。使用方便、实用的Web服务应用接口,也成了互联网通信技术的发展趋势。文中对这一关键技术进行了研究,取得了初步理论与软件成果。另外,文中深入研究了Web服务的基本原理与实现技术、基于Web服务的应用系统集成技术、Web服务应用接口系统的开发原理与技术,提出了一套 Web 服务开发方法、Web 服务应用接口系统的模型框架。在理论研究的基础上,基于Microsoft.NET2003环境,文中还实现了基于模式引导的应用接口包装器的生成与维护软件,其可为不同的应用系统提供Web服务的应用接口,方便客户端调用,还可以简化Web服务应用的编程过程,提高了应用系统开发效率。     

基于Web服务的经销商数据交互平台应用研究

本文在了解江淮汽车股份有摘限公司乘用车营销体系信息化现要状的基础上,提出了一个基于Web服务的经销商管理系统数据交互平台架构,有效解决数据共享及未来系统集成和扩展问题,并通过了模拟客户端的远程调用来验证了该平台的合理性和有效性。