一种基于模糊层次聚类分析的大数据挖掘算法

在文本大数据挖掘过程中受到语义模糊性因素的影响,导致大数据挖掘查准性不好,故提出了一种基于模糊层次聚类分析和语义相似性关联特征提取的大数据挖掘算法.该算法采用泛化映射构造语义概念树,结合二元语义分析方法进行大数据分布式本体模型构建,并采用模糊层次分析方法进行大数据的语义相似性和关联性判断,提取大数据信息流的语义关联特征,结合模糊C均值算法对提取的特征量进行聚类分析,自适应均匀遍历学习方法进行大数据挖掘中关联特征量的信息融合处理,求得挖掘目标函数的最优解,实现大数据优化挖掘.仿真结果表明,采用该算法的语义指向性较好,数据的聚焦性能较优,提高了数据挖掘的查全率和查准率,总体性能稳定可靠.     

基于知识库的多媒体视频信息云存储方法

为了提高多媒体视频信息云存储的聚类能力,降低存储空间和数据访问延迟率,提出基于知识库的多媒体视频信息云存储方法.在Hadoop云平台中构建多媒体视频信息的大数据挖掘模型,结合知识库本体构建方法和日志文件分析方法对多媒体视频信息进行融合特征挖掘和信息聚类;采用模糊C均值聚类分析方法建立多媒体视频信息的属性归并模型;在语义...     

基于卷积神经网络的顶岗实习管理系统数据挖掘研究

通过数据挖掘方法管理系统数据时,仅依靠关联规则约束,容易导致数据挖掘的泛化误差增大。因此,以顶岗实习管理系统为例,提出基于卷积神经网络的数据挖掘方法。提取顶岗实习管理系统的数据,建立面向主题的数据仓库,结合统计回归分析法和模糊聚类法生成非线性时间序列数据流,采用模糊聚类法设计数据特征提取机制。根据数据特征提取结果分析关联规则,构建卷积神经网络数据挖掘模型,通过特征压缩方法进行数据降维处理,实现挖掘数据的输出。实验结果表明：所提数据挖掘方法与基于决策树和基于一维卷积网络的方法相比,泛化误差较小,能保持在[-0.05,0.05],可以获取更加精确的信息挖掘结果,具有较好的实际应用效果。     

基于预测数据特征的空气质量预测方法

采用LightGBM预测模型对空气质量预测问题进行研究,提出并设计一种基于预测性特征的空气质量预测方法,有效地预测北京市区内未来24 h核心表征空气质量的PM_2.5质量浓度。在构建预测方案过程中,分析训练数据集特性开展数据清洗,利用随机森林与线性插值相结合的方法,解决数据大量缺失以及噪声干扰问题;提出使用预测性数据特征方法,同时设计相关统计特征,提高预测结果的准确性;采用滑窗机制挖掘高维时间特征,增加数据特征数量级;对预测模型的工作性能和结果进行详细分析,并结合基线模型进行对比评价。试验结果表明,基于预测性特征结合采用LightGBM预测模型的方案具有更高的预测精度。     

基于人工智能技术的局部离群数据挖掘方法

针对传统离散数据挖掘方法存在内存消耗过大的问题,研究基于人工智能技术的局部离群数据挖掘方法.提取离散数据特征,并使用基于信息熵的算法检测局部离群数据.标准化处理检测出的数据,在神经网络中实现对局部离群数据的挖掘,完成对基于人工智能技术的局部离群数据挖掘方法的研究.通过与传统数据挖掘方法的对比实验结果可知,本文方法在数据挖掘过程中内存消耗较少,与传统方法相比具有明显的优越性,充分验证了该方法的应用性和有效性.     

基于直觉模糊集的网络安全态势评估方法

传统网络安全评估没有考虑多维、动态的安全特征要素,难以在大数据环境下进行快速、有效、定量的网络安全态势评估,为此提出了一种大数据环境下基于直觉模糊集的网络安全态势评估方法,该方法面向大数据环境分析大数据安全特征,构建可量化的指标体系,采用直觉模糊综合评估方法评估网络安全态势。实验结果表明,该评估方法比传统网络态势评估方法能够更全面、及时、准确地反映大数据环境下的网络安全态势情况。     

基于用户访问树的分布式Web日志挖掘算法

为了提高对分布式Web日志数据的准确挖掘能力,提出基于用户访问树的分布式Web日志挖掘算法.构建分布式Web日志的信息分布式检测模型,采用模糊信息粗糙集调度方法进行分布式Web日志信息的结构重组,提取分布式Web日志的统计特征量,采用用户访问树特征聚类方法进行分布式Web日志数据的空间分布式重组,结合粗糙集特征匹配方法...     

小差异化图像数据库中的特定特征挖掘方法设计

针对传统的特定特征关联挖掘方法存在挖掘效率低的问题,提出基于一种推荐模式的小差异化图像数据库中的特定特征数据挖掘方法.运用萤火虫优化支持向量机参数法,提取小差异化图像数据特定特征,解决相似关联问题,采用主成分分析方法对小差异化图像特征进行降维处理,利用Laplace预测分类方法对提取的小差异化图像特定特征进行推荐分类,之后对分类的特定特征按照推荐等级进行挖掘.结果表明,所提出的挖掘方法要优于传统挖掘方法,准确率及效率得到明显提高.     

一种基于最大Lyapunov指数奇异分解的并行挖掘算法

针对当前大数据挖掘并行计算采用多元线性回归分析方法导致的计算开销过大、挖掘准确度不高等问题,提出了一种基于最大Lyapunov指数奇异分解的大数据挖掘并行计算方法.该方法对大数据信息流进行高维相空间重构和QR分解,计算大数据流模型的最大Lyapunove指数谱,基于微积分极值理论构建大数据的Lyapunove指数谱的网格分布矩阵,采用奇异值分解方法对参与运算的大数据特征向量矩阵行分解,将大规模的数据挖掘计算问题变为一系列小规模的并行计算问题,实现了大数据挖掘中并行算法的改进.测试结果表明,采用该方法进行大数据挖掘的计算时间较短、内存开销较小、准确度高.     

基于属性依赖度分析的粗糙集数据挖掘方法应用

目的采用粗糙集中的属性依赖度分析方法对胶合板缺陷检测数据进行分析,获得各属性对决策的不同作用,并得出各属性间的依赖关系．方法采用粗糙集属性依赖度分析方法对实验数据进行有效分析,挖掘出对决策分析影响大的属性,去掉对决策分析影响小的冗余属性,构造数据挖掘模型．结果从胶合板缺陷检测数据中挖掘出各属性对决策分析的影响程度以及各有关属性间依赖关系的知识,在胶合板缺陷检测数据集的17个属性中,得到了3个重要属性,5个对决策影响较小的属性．结论基于粗糙集属性依赖度的数据挖掘方法提高获取规则的快速性,降低计算的复杂度,增强规则的可解释性,取得良好的研究结果．     

基于TOPSIS法的群决策方法

根据群决策的特点,按照集议决策的习惯程序,提出了一种充分发挥集议决策优势的群决策方法。通过组织者有效的组织,专家群体经过充分的讨论和广泛的交流,使各专家行为有效集结。最后由运筹专业人员利用ＴＯＰＳＩＳ法对行为集结的最后结果（决策矩阵）进行数学集结,较好地做了决策在定性和定量上的综合集成。     

基于薄层分析的反应位移法研究

介绍薄层单元分析法结合容积法求解半无限空间层状地层中地下结构水平、回转、垂直及轴向的地层阻抗函数过程,并将地层阻抗函数运用到地下结构抗震设计方法-反应位移法中,综合考虑地下结构水平、回转、垂直运动特性,较大程度上提高了反应位移法的计算精度.在北京地区典型地质条件下的典型地铁车站结构模型振动台试验的基础上,进行一般反应位移法及基于薄层分析的反应位移法的计算分析,并将其内力及变形值与一般反应位移法及振动台试验结果进行比对.结果表明,该方法与地铁车站结构振动台的试验结果符合良好,验证了这种基于薄层分析的反应位移法的适用性.     

区域分解并行有限元计算方法研究

按照区域分解算法“分而治之”的思想,研究了在普通PC机群上实现大规模并行有限元计算的方法.针对PC机群的特点,有限元计算数据采用分布式存储策略,方程组的求解采用并行预处理共轭梯度算法.采用C++语言及MPI消息传递接口开发了基于PC机群的并行有限元计算程序,利用6台计算机对247871个单元的有限元模型进行了并行求解,并行加速比达到5.26.验证了程序的可靠性和高效性.     

基于增量法的服装CAD自动放码法

针对现行服装CAD系统中常用纸样放码方法的不足,结合服装纸样本身固有的特点,提出一种基于增量放码法,采用基础纸样的放码规则,对派生纸样实现自动放码.此方法与传统放码相比,避免了手工输入各个关键点的放码量,从而提高了执行效率.     

像素-仿真法研究

像素－仿真法是利用计算机显示器屏幕的像素表示毁伤幅吊并运用ＭｏｎｔｅＣａｒｌｏ方法仿真子弹的随机分布来计算子母弹毁伤幅吊的一种新方法。使用证明,这种方法计算简便,精度可靠,适用广泛。     

基于变形玻恩迭代法的多重网格反演方法

将多重网格技术与变形玻恩迭代法相结合,对轴对称二维非均匀介质分布进行了反演。在反演过程中首先利用变形玻恩迭代方法近似地反演出目标函数的平均值,然后逐级细分目标区域的离散网格。通过计算实例表明,该方法具有稳定性好的特点,不但可以极大地降低反演过程的计算量,而且能更精确地反演高对比度的散射目标。     

区域分解并行有限元计算方法研究

按照区域分解算法"分而治之"的思想,研究了在普通PC机群上实现大规模并行有限元计算的方法.针对PC机群的特点,有限元计算数据采用分布式存储策略,方程组的求解采用并行预处理共轭梯度算法.采用C 语言及MPI消息传递接口开发了基于PC机群的并行有限元计算程序,利用6台计算机对247 871个单元的有限元模型进行了并行求解,并行加速比达到5.26.验证了程序的可靠性和高效性.     

比值审敛法与根值审敛法的比较及推广

将比值审敛法与根值审敛法进行比较,找出其内在关系,并对比值审敛法作进一步推广.     

基于多维能力谱法的震损建筑抗震评价方法

目的 研究震损建筑的抗震能力评估方法,得出震损建筑的抗震能力,提出基于静力弹塑性分析的震损抗震评价方法,为编制震损建筑抗震评价标准提供基础数据.方法 针对各种结构类型的震损建筑,建立考虑实际情况的多维地震作用下震损建筑结构的弹塑性损伤模型,利用刚度退化建立震损建筑模型,对结构x和y两方向进行推覆分析得到结构的能力曲线,并使用多维能力谱法对结构进行评估.结果 笔者通过算例分析得出该结构性能点,x方向的损伤指数为O.77,y方向的损伤指数为0.92,多维能力谱法与简化的能力谱法结合考虑了地震的多维性更符合实际情况.结论 笔者通过算例分析得到了单自由度体系下震损建筑各阶模态的结构性能目标.又通过多个振型的组合得到多自由度体系下结构的性能目标.最后由损伤指数公式算出该结构的损伤程度.笔者的方法 简便、易行,可用于实际工程.