基于大数据及物联网的数据库半结构化数据识别方法

为实现对不同类别半结构化数据的精准识别,文章将开展基于大数据和物联网的数据库半结构化数据识别方法的设计研究。笔者通过从各种来源收集数据,包括传感器、日志文件、社交媒体平台、其他数据库等,对半结构化数据所在数据库进行联网,使用大数据中的数据清洗技术进行半结构化数据预处理;对完成预处理的数据库半结构化数据进行特征提取,根据具体的数据识别问题确定模型架构,生成数据识别模型,并实现对半结构数据的识别。对比实验结果表明：设计的方法可以实现对数据库半结构化数据的精准识别。     

计算机技术在物联网通信中的运用探析

近些年,传感器以及移动通信技术越来越发达、应用越来越广,在一定程度上加快了物联网技术的诞生.在物联网通信中,计算机技术发挥着非常重要的作用.以此为前提,该文首先叙述了物联网通信中计算机技术的使用,接着讨论了计算机技术在物联网通信中的实际应用,希望能深度挖掘出计算机技术在物联网通信中的应用.     

半结构化数据到结构化数据的模式抽取

在分析现有的半结构化数据的存储方式及存在的问题基础上,引入了小集合属性、集合属性、聚类集合、模板集合、父属性序列等概念,借助映射表达语言STORED,提出了一种基于数据挖掘的半结构化数据到结构化数据的模式抽取的方法。     

半结构化数据的模式发现

半结构化数据指那些具有隐含结构或结构不严谨的数据,如何在这些数据上有效地找到有用信息,是知识发现领域的一个新课题。由于半结构化数据具有结构不规则的特性,从中抽取结构或发现模式就成为知识发现的的首要步骤。为了对该问题有一个较清晰的了解,本文综合了该领域的发展现状,将半结合化数据上的模式发现归为两类,数据模型和信息 取,并在每一类中展现了一些有代表性的应用。     

半结构化数据的模式研究综述

1 引言近年来,Internet的飞速发展已经给人类的生活带来了翻天覆地的变化,网络迅速成为一种重要的信息传播和交换的手段。在Internet上,存在着大量的各种形式的数据,如文本文件,HTML文档,各种数据库等,如何快速准确地在网上查找所需的信息,成为一个重要的问题。为了解决这个问题,各种搜索引擎维护了大量网站和网页的索引信息,主要采用关键字匹配的     

半结构化数据查询重写

查询重写是数据库研究的一个基本问题，它和查询优化，数据仓库，信息集成，语义缓存等问题紧密相关，目前Internet上存在海量的半结构化数据，在信息集成过程中产生了大量半结构化视图，如何利用物化半结构化视图来重写用户查询，减少响应时间成为研究热点问题，上述问题本质上是NP问题，提出了一种半结构化查询重写的新方法，该方法在保证算法正确性和完备性的基础上，利用半结构化数据特点和查询子目标之间的关系，减少了指数空间的查询重写候选方案生成，理论分析表明，它极大地降低了算法的代价。     

半结构化数据库中的交互式查询和搜索

文章提供了对半结构数据库进行交互查询、搜索的新模型。论述了有效关键字的搜索、查询结果的结构化总结和对逆向指针支持的重要性，并针对这些技术问题给出了初步解决方案。     

半结构化、层次数据的模式发现

Web数据资源及数据集成引发了半结构化数据问题,半结构化数据指其结构隐含或不规整的自描述数据。由于缺乏独立于数据的模式,有效地查询划浏览该类数据比较困难,半结构化数据的模式发现成为解决该问题的基础步骤。本文提出的算法能够快速有效地发现半结构化层次数据中的规整结构。它采用自顶向下的生成,结合有效的剪枝策略,从OEM模型表达的半结构化层次数据中构建模式树。     

在物联网通信中应用计算机硬件及网络技术的实践途径

近几年,伴随着创新驱动发展逐步宣传、推广,我国对于物联网通信给予的投入也逐步增大,在信息化逐步增强的前提下,计算机硬件的改良与优化也有所增快,在应用网络技术后,物联网的宣传与推广范围不断提升。对物联网,在其发展期间,需要应用信息技术,想要紧依时代,就需要对计算机硬件进行构建,以保障网络技术的应用能够最优化。对此,本次对物联网的相关概念、核心技术进行分析、研究,并给出计算机硬件与网络技术应用到物联网中的相关作用,最终,给予计算机硬件与网络技术应用到物联网中的相关对策。     

现代物流实训系统的实时联网通信

基于计算机局域网技术、现场总线技术和RS485通信技术,结合数据库技术,利用接口软件有效地解决了物流管理系统与自动控制 系统的实时联网通信问题。该文主要以上海某学校的大型现代物流实训系统为例.阐述物流管理系统与自动控制系统的实时联网通信的设计 与实施。     

物联网通信设备的新型数据传输单元设计

针对物联网通信时,串口数据转换成网络数据的必要性,提出了数据传输单元的设计方法。串口数据接口为常用的RS-232和RS-485接口,网络数据接口则为RJ45网口和3G网络接口。为了DTU便于扩展,还预留了USB和拨打电话等外部扩展接口。整套DTU系统运行中国电信的M2M协议,以保证DTU在工作时,可以向M2M平台报告自身的运行情况。经测试,整套DTU运行稳定,具有自我修复功能,故障率极低。     

物联网环境下的差异网络数据库异常数据检测

当前的物联网环境下,各个智能网络的数据库的使用没有统一标准,不同生产商的数据库中的异常数据标准也不同,这就使得传统的以模式识别为基础的网络数据库异常检测方法在进行异常阀值设置时,无法形成统一标准,数据库数据量庞大且存在无序性,无法保证检测的准确性和检测效率;提出基于混沌特征分析算法的物联网环境下的差异网络数据库异常数据检测方法;依据混沌特征分析相关理论构建物联网环境下的差异网络数据库模型,构建一种异常数据的偏差函数,对不同数据库下的异常数据进行偏差统计,通过对偏差函数的统计结果进行最小值求解,根据求解描述最小化的阀值请求,实现物联网环境下的差异网络数据库异常数据的检测;实验结果表明,利用改进算法进行异常数据检测,能够提高检测的有效性与准确性。     

泛在电力物联网的无线网络通信方法

针对现有泛在电力物联网的无线通信接入方式效用较低,通信数据传输过程中效率较低、误差较大等问题,本研究基于通信网络QoS建立判决指标,通过TOPSIS评价算法解决各无线通信方式之间的异构性,实现多种无线通信网络的选择;通过改进压缩采样技术将两步迭代法融入到无线通信数据的压缩过程中,使无线通信数据重构效率和准确度得到提升.实验结果表明,本研究所提方法使得无线通信数据效果明显提升.     

工业物联网数据流自适应聚类方法

5G通讯技术的迅猛发展使工业物联网得到了全面提升, 工业物联网数据规模将越来越大、数据维度也越来越高, 如何高效利用流聚类进行工业物联网数据挖掘工作是一个亟需解决的问题. 提出了一种基于工业物联网数据流自适应聚类方法. 该算法利用微簇之间的高密性, 计算各微簇节点的局部密度峰值以自适应产生宏簇数; 采用引力能量函数对微...     

嵌入式异构物联网密文数据动态捕获方法

传统物联网密文数据捕获方法的误差较高,捕获时间过长.为此,对嵌入式异构物联网密文数据动态捕获方法进行优化.通过小波变换平移处理异构物联网初始数据,得到初始数据及其噪声关联性;根据阈值滤除噪声系数,实现小波系数重构;采用簇数据样本集合平方误差和推算出类别集合,利用映射函数对最小二乘支持向量机实施变换;应用拉格朗日乘子创建...     

物联网技术的统计数据采集方法研究

针对传统采集技术以人工操作为主导致数据采集效率较低、时间较长的问题,提出了物联网RFID技术的统计数据采集方法研究.构建物联网技术应用于拟审计算机数据采集影响模型,确定拟审计算机数据采集影响因素.选取Mesh网络结构作为感知网络结构,以ZigBee与GPRS为数据感知中心进行数据通信.根据RFID技术原理,计算不同参考...     

物联网中传感节点数据异常检测方法研究

研究物联网中节点数据异常的检测问题,提高检测的准确率。针对当物联网中的传感节点采集到的外界数据内容随机性较大,在数据存储形式、格式等特征上存在较大差异时,造成各个节点数据之间很难取得一致。传统方法检测无法准确根据差异信息建议统一待检测特征,造成检测的准确度不高的问题。为了解决这一问题,提出一种基于特征模糊聚类概率搜索的节点数据异常检测算法,通过计算节点数据与异常数据之间的特征模糊聚类概率,运用模糊概率因素判定非法节点数据。实验证明,改进方法能快速、完整地将检测节点异常数据,取得了理想的效果。     

面向物联网的可见光近场通信方法研究

为了满足物联网应用中边缘感知系统信息交互的需求,可以采用传输便捷、功耗较低的近场通信方法。然而,传统的近场通信方法基于电磁波的广播通信,广播通信存在着安全性的先天不足。针对这一安全问题,使用移动设备上的可见光传感器实现了一种面向物联网的可见光近场双工通信系统。在该系统中,上行链路和下行链路采用不同的传感器模块进行数据传输。上行链路由环境光传感器感知光强变化完成数据接收,并且针对可见光源信号不稳定的特点,提出了一种基于可见光通信的状态转化调制STM(State Transaction Modulation)策略。在下行链路中,采用图像传感器扫描移动设备屏幕实现数据传输,并提出了一种能耗自适应的信号传输方法降低下行链路的能量开销。实验结果表明,在上行链路中,STM调制的传输速率高于PWM和PIM调制且能耗大幅降低,在传输序列有重复的情况下吞吐率亦优于DH-PIM调制。     

基于Drools规则引擎的物联网数据查询方法设计

物联网(IoT)数据具有数据量大和实时性好的特点。通过复杂事件处理技术处理物联网数据时需要设置复杂的规则,但规则往往会随着业务的变化而变化。Drools规则引擎可以通过分离的配置文件设置规则,在不修改设备数据或管理平台代码的情况下,筛选到匹配规则的数据或事物。为解决DRL规则文件架构和决策表文件架构筛选数据产生的重复匹配的冗余问题,设计了一种修正数据库的数据查询方法。在不同数据量、不同规则数的查询环境下,对DRL规则文件架构、决策表文件架构和修正数据库架构进行了数据查询性能分析。实验结果表明：修正数据库架构在大数据量查询时时间损耗更少,可有效减少冗余。     

云信任驱动的物联网电子通讯稳定性优化方法

针对多人同时通讯且外界干扰因素较多,电子通讯过程中容易产生信号不稳定的问题,提出云信任驱动的物联网电子通讯稳定性优化方法.将云信任机制作为各物联网电子通讯服务之间的动态演化信任关系,进行显性和隐性的不确定性转换,计算数据通信网络性能的目标函数,确认控制策略;将通信中网络节点的定位信息加入到通信数据包中,得到网络中最稳定的电子通信路径,构成网络拓扑结构;采用克拉索夫斯基法,并将通讯网络的节点工作状态划分为拥挤状态以及正常状态,计算出两者概率,判定转换平衡的范围,以此实现网络拓扑稳定性的优化.仿真结果证明,所提方法可以提高物联网电子通讯精度,且较少地受到外界干扰因素的影响,通讯传输速率较快.