一种基于Spark的不确定数据集频繁模式挖掘算法

如何在海量不确定数据集中提高频繁模式挖掘性能是目前研究的热点.传统算法大多是以期望、概率或者权重等单一指标为数据项集支持度，在大数据背景下，同时考虑概率和权重支持度的算法难以兼顾其执行效率.为此，本文提出一种基于Spark的不确定数据集频繁模式挖掘算法（UWEFP），首先，为了同时兼顾数据项的概率和权重，计算一项集的最大概率权重值并进行剪枝；然后，为了减少对数据集的多次扫描，结合Spark框架的优点，设计了一种具有FP-tree特征的新颖的UWEFP-tree结构进行模式树的构建及挖掘；最后在Spark环境下，以UCI数据集进行实验验证.实验结果表明本文的方法在保证挖掘结果的同时，提高了效率.     

桑叶的功能性

日本神柰川县功能性食品研究所在对桑叶的研究中发现其新的功能。其中最主要的是含有预防糖尿病的DNJ成分,这一成分具有对存在于小肠的α糖苷酶起阻碍作用,抑制二糖的吸收,以实现控制食后血糖上升的目的,同时还具有调节肠胃和改善便秘的作用。     

数据库中文查询对偶学习式生成SQL语句研究

针对当前中文NL2SQL (Natural language to SQL)监督学习中需要大量标注数据问题,该文提出基于对偶学习的方式在少量训练数据集上进行弱监督学习,将中文查询生成SQL语句。该文同时使用两个任务来训练自然语言转化到SQL,再从SQL转化到自然语言,让模型学习到任务之间的对偶约束性,获取更多相关的语义信息。同时在训练时使用不同比例带有无标签的数据进行训练,验证对偶学习在NL2SQL解析任务上的有效性。实验表明,在不同中英文数据集ATIS、GEO以及TableQA中,本文模型与基准模型Seq2Seq、Seq2Tree、Seq2SQL、以及-dual等相比,百分比准确率至少增加2.1%,其中在中文TableQA数据集上采用对偶学习执行准确率(Execution Accuracy)至少提升5.3%,只使用60%的标签数据就能取得和监督学习使用90%的标签数据相似的效果。     

一种支持大规模数据的多维可视化分析框架

以Hadoop为代表的可扩展大规模数据库难以进行多维可视化分析。为此,设计基于B/S架构的可视化分析框架Bizard。数据模型通过封装底层数据接口以支持业界多维数据访问协议XMLA,从而在展现层易于接入支持XMLA的传统分析工具,同时采用视图物化技术提高分析性能,利用互联网技术丰富用户分析体验。实验结果表明,该框架能在高达千万条记录级的数据上进行多维可视化分析。     

基于Relief-F特征加权的模糊支持向量机的分类算法

传统基于样本与类中心的欧氏距离构造模糊支持向量机隶属度函数的方法将所有特征同等对待,并未考虑不同特征对样本与类中心距离的影响。针对这一问题,提出基于Relief-F特征加权的模糊支持向量机分类算法。首先通过Relief-F算法计算各特征权重并剔除权重较小的特征;然后应用特征权重计算样本到所属类中心的加权欧氏距离;最后,基于加权欧氏距离构造隶属度函数。该方法在考虑到特征重要性对分类效果影响的同时,通过权重阈值剔除权重较小的特征,从而将数据降维,提高了分类准确度和训练效率。实验结果表明:与支持向量机和传统基于距离构造隶属度的模糊支持向量机相比,基于Relief-F特征加权的模糊支持向量机具有更高的训练效率和分类准确率。     

以色列的高效水资源利用

以色列地处地中海西岸，包括西岸地区和戈兰高地在内实际控制国土面积约为2．5万km^2。地形南北狭长，北部及中部地区为山区，南部为荒漠地区，平原区集中在地中海沿岸一带，受地中海气候影响，冬季温和湿润，夏季高温干旱。降雨量小且时空分布不均，多年平均降雨量北部为700～800mm，中部为400～600mm，南部内格夫沙漠只有20～50mm，而且蒸发能力极大，因而南部地区地下水盐度都较高。     

锚定国家需求 以水资源优化配置助力高质量发展

水资源优化配置是协调经济社会发展与生态环境保护的重要手段。新形势下国家战略对水资源安全保障提出更高要求,通过辨识区域水情和水问题特征,分析了近十年我国水资源配置研究和实践坚持以国家需求为导向、以均衡协调为目标的特点,总结了取得的重要理论技术创新与重大应用实践成果,提出了未来水资源配置在理论、技术、实践等方面进一步提升的方向。     

改进的SCS模型在流域径流模拟中的应用

介绍了改进的通用SCS日模型,应用该模型对汉江牧马河等8个流域进行长系列水文模拟,结果表明:模型对于较大径流系数的流域模拟效果较好,而较小径流系数的流域则不够理想;模型不仅仅可用于小流域径流计算,对于较大流域也一样可以取得满意的结果。结合M OD IS遥感数据确定模型参数,为开展无资料地区的水文预报进行了一定的尝试。     

贝太美食我来做

据来自日本《食品开发》的报道,随着对生活质量的提高,人们十分关注每日摄取的食品和水污染问题.     

焦炭塔结构的固有频率和振型研究

在传统的直立塔设备固有频率和振型的计算中,将塔设备简化为悬臂梁计算模型,但实际塔的薄壁圆筒结构与梁模型不符,为此对焦炭塔建立有限元分析模型进行模态分析,得到焦炭塔的固有频率和振型,计算分析表明,由于焦碳塔特殊的结构特点使得焦炭塔的振动特性与传统大型直立设备简化为悬臂梁计算模型所得振动特性相比有所不同,因此焦炭塔结构计算中在计及高阶振型与固有频率时,不宜简化为悬臂梁计算模型.