教学过程中数据收集和分析的应用研究

在数据驱动教学的时代背景下,教师数据应用能力显得尤为重要。数据意识的内涵有狭义数据意识和广义数据意识之分。本文从课前、课中、课后三个阶段分享教学过程中数据收集和分析的应用研究经验,帮助教师树立数据意识。通过对数据的应用,实现基于数据的以学生个性化学习为目标的教学活动,促进学生的个性化发展。     

基于本体的出生缺陷相关医学知识管理系统*

当前网络中分布着大量与出生缺陷相关的电子病历、医学文献和临床实验数据库。如果对这些数据库进行数据整合,实现有效地管理,将便于医学工作者对海量数据进行快速查询和综合分析。基于以上需求,设计了基于本体的出生缺陷相关医学知识管理平台,实现了基于本体的数据整合、数据标注和数据查询。该系统已用于国家科技支撑计划重点课题人口和生殖健康综合信息服务大型门户系统中。     

一种大数据时代海量数据抽取的开发模型研究

随着大数据增长速度提高、数据体量增大, 数据的冗余也将会越来越大, 传统的数据软件分析模型已经不能满足需要海量信息的处理和分析的需要, 如何从大数据里面抽取有效的信息, 对数据进行有效的分析和决策, 建立新的数据模型, 对数据进行分析和处理就显得尤为重要。采取了一种更适合大数据时代的数据抽取模型, 并给出了数据抽取的判定方法。此方法具有复杂度低, 易于实现, 具有良好的估计性能。     

元数据驱动的分布式数据资源管理技术

采用元数据驱动方法,研究分布式数据资源管理,实现数据的统一组织,提供高效数据共享服务。在对数据进行分类分析基础上,基于元数据定义和管理,开展分布式数据管理的数据检索和缓存。突破分布式数据资源管理关键技术瓶颈,构建分布式资源全局目录,实现目录服务,进行高效传输的数据缓存管理,减少处理、采集、分发的延时。提供基于多副本的动态自适应数据调度方案,解决分布式数据资源管理的数据选择和动态变化问题。     

一种基于XML 的装备保障数据集成方法

为了解决装备保障信息系统的数据异构问题,通过分析数据集成的相关概念,针对装备保障数据集成过程中的特点,提出了一种基于XML转换规则的数据集成方法,对集成过程中数据抽取、转换、载入和清洗的实现过程进行了详细设计。     

一种针对类别数据分析的平行坐标改进方法

针对类别数据在传统平行坐标系中的映射重叠问题，提出类别统计和数据累积式偏移映射的平行坐标改进方法。该方法首先统计多维数据中的各类别数据的频次，使用直方图表示其记录数，将直方图与平行坐标相结合提出改进平行坐标。然后提出一种类别数据的数据累积式偏移算法，将映射在一点的数据均匀分布在坐标轴上的一定区域中，区域的范围根据数据记录数确定。最后设计实现可视化分析系统，通过改进平行坐标实现对数据集的筛选、条件交叉分析、类别间数据分析和维度间数据分析；通过联动视图和弦图两种方式实现每两个维度间的对比分析；通过字云显示每一维度的频次分布。案例数据集实验结果表明，该方法能在平行坐标中实现各维度中类别间的对比、各维度中记录数排序，以及对筛选数据集的分析，展示类别型数据维度间的关联关系。     

数据可视化在炼化生产企业中的应用研究

在某大型炼化生产企业中,数据可以看作是一种新的石油,从原料进厂、调度排产、生产运行、储运销售各个环节、各个专业都会产生大量的数据信息,我们被这些数据资源包围,对数据的重视程度与日俱增,对数据进行一站式整合、挖掘、分析、可视化的需求日益迫切。这里数据可视化不仅仅是统计图表的堆砌,还是借助于图形的方式展示事物原理、规律、逻辑的一种方法。目前数据可视化主要通过编程和非编程两类工具实现,本文着重讲述利用数据分析软件实现数据可视化,并在炼化生产企业中应用,通过ODS技术集成多个业务系统的数据,对炼化生产过程进行管控分析,提升企业生产决策水平。     

田湾核电站基于Elasticsearch的创新型数据应用研究与实践

针对难以在海量数据中快速定位目标数据的问题,田湾核电站对Elasticsearch这一搜索引擎技术进行研究,通过微服务架构设计模式和前后端分离的开发技术建立起三项具体数据应用,解决了数据索引和数据定位的问题,提升了工作效率。IT智能客服机器人平台建立起具备自动应答功能的在线服务平台,在线提供高效的IT服务,提升IT服务质量;智能化主数据检索平台将各类主数据资源统一汇总,实现在主数据层面的快速数据查找;集中系统日志检索分析平台实现对全部Web应用的日志收集、日志存储、日志分析和展示看板,提升应用管理效率。本文通过对搜索技术的研究,实现简单便捷的数据查询利用,为更多基于搜索技术的多数据应用场景提供参考。     

数据加密标准算法的DSP实现

DES(Data encryption standard)是ISO颁布的数据加密标准,通过对DES算法的分析,提出了用DSP实现数据加密标准算法,通过循环或迭代,将简单的基本运算(如左移、右移、模2加法等)和变换(选择函数、置换函数)构造成数据流的非线性变换(加密变换或解密变换),从而实现对计算机数据进行密码保护.DSP快速运算有利于数据加密、解密和数据的传输.     

数据空间技术研究

阐述了数据空间概念及其特性,提出了数据空间集成与管理系统框架.在此基础上,进一步从数据模型、数据集成、数据查询、数据更新、存储索引、数据演化和系统实现几个方面对数据空间研究工作进行了总结分析.讨论了数据空间研究面临的挑战和未来的研究工作.     

数据绑定与导航在Visual C#.Net下的实现及应用

本文主要介绍了在Visual C#.Net中如何利用数据集访问模式提供的数据绑定与导航技术实现数据库中数据的显示。文中先总结了在.NET平台下利用Visual C#.Net实现数据绑定与导航的方法,然后在VS.NET环境中通过创建C# Windows数据库应用程序实现了数据绑定与导航,对实现这种技术的关键问题进行了分析,最后将这种技术应用到数据维护和一对多的数据关系中。     

基于用户消费行为的电力数据客户立体画像构建

针对现有技术中用户消费行为数据繁多,电力数据分析能力较差的问题,构建了电力数据客户立体画像系统,实现了对用户消费行为的多信息分析。设计了FCM分类算法模型,实现对电力用户消费行为数据信息立体画像原始数据信息分类, 提高了数据分类能力。构建了灰色GM(1,1）模型,实现对用电行为数据信息的分析,从而提高电力数据客户立体画像分析和应用能力。试验表明,研究所提方法分类准确率达95%以上,误差在1%以下,准确度高,研究所提方法方法提高了电力用户消费行为数据信息分析能力。     

面向火箭数据分析和故障诊断的数据仓库设计

针对运载火箭测试发射数据分散存储且数据利用不充分的问题,提出了以数据仓库技术对火箭的测试发射数据进行组织和存储管理,实现对火箭数据价值的深层次发掘。根据运载火箭数据的特点,提出了数据仓库基础层、源数据层、数据交互层、数据架构层、应用层、显示层六个层次的框架设计;通过面向火箭数据分析和故障诊断的数据清洗规则设计,对不同来源、不同格式的数据进行清洗和加载;对火箭的数据应用方向进行了探索,设计了包络分析、相关性分析、故障诊断等数据分析模块。用某型号火箭测试发射数据进行了验证,结果表明,数据仓库方案切实可行,为后续火箭数据的持续性管理和分析奠定了基础。     

智能化煤矿数据归类与编码实质、目标与技术方法

智能化煤矿数据归类与编码是智能化煤矿数据治理与融合共享标准体系的关键组成部分,但目前尚未形成完善的方法论体系,亟待对智能化煤矿数据归类与编码的技术目标、技术原则与关键技术流程等进行深入研究。从分析智能化煤矿高级阶段目标实现进程中数据归类与编码要解决的核心问题出发,阐明了智能化煤矿数据归类与编码的实质：智能化煤矿数据归类与编码是对智能化煤矿信息世界的认识和构建,对智能化煤矿意识世界的优化和映射,以及对智能化煤矿物理世界的改造和描述。从总体战略目标、经营战略目标和职能战略目标3个层面分析了智能化煤矿数据归类与编码的目标要求：智能化煤矿数据归类与编码要推动煤炭企业商业模式重塑,改变价值创造驱动模式,聚焦关键价值活动,实现智能化煤矿数据的科学组织。提出了智能化煤矿数据归类与编码需要遵循科学性、规范性、完整性、唯一性、有效性的基本原则。给出了智能化煤矿数据归类与编码基本思路：智能化煤矿宜采用“基准-扩展”两阶段的数据归类思路,即第1阶段采用“业务域-数据域-对象-属性-数据元”的逻辑顺序确定智能化煤矿数据的归类基准,第2阶段采用“智能应用体系-智能业务系统-系统功能-数据资源”的逻辑顺序进行数据...     

基于大数据平台的交通数据可视化设计与实现

本文实现是以某市交通事故分析为核心,面向某市交管局指挥中心大屏环境,对交通事故相关综合数据进行处理分析和维护任务,具备优异的数据可视化显示效果,支持大屏、多屏等展示场景,为交通整改、政府决策等提供全面服务,使交管部门工作从规模庞大的交通事故数据中快速直接地检索到重要且需要的数据,最后通过数据可视化和数据分析处理相结合,提升交通事故剖析能力。     

2022年第1期目次

起止点数据是一种由起点、终点、起止点时间及一些其他属性构成的轨迹数据。其是一类非常 典型的时空数据,大量产生于城市交通管理、人口迁移、社交媒体等领域。可视分析技术目前被广泛用于研究 大规模起止点数据的时空模式,能够实现对数据深层次的探索。首先介绍了起止点数据特征以及可视分析的任 务,其次梳理了近年来起止点数据可视分析中的可视化方法、交互技术和可视化系统,并对不同领域的应用案 例进行介绍。最后,对起止点数据可视研究中面临的问题进行总结,对起止点数据可视化研究的前景做出了展 望,以期为未来的研究提供新的思路。     

电力调度大数据应用平台系统技术研究

为解决智能电网的发展中电网运行和设备检测或监测数据、电力企业管理数据、电力企业营销等数据海量的增加带来的不同业务系统之间分散地开发、运行和管理,系统数据存储结构独立,带来数据多源、格式不一致,数据准确性、实时性不强,数据质量不高,缺乏统一的数据规范等问题,本文利用Hadoop的分布式文件系统HDFS和并行处理框架MapReduce的工作原理,搭建电网调度大数据应用平台系统,解决了不同业务系统之间的数据不能及时共享、访问、管理与分析挖掘等问题。采用数据清洗数据,解决数据质量不高的问题。搭建电网调度大数据应用平台系统,既能实现跨专业、跨部门的多维度关联分析,又能满足海量的智能电网数据存储和数据处理需求,并具有强大的伸缩性,可扩展为电网实现安全、可靠、经济、高效地运行提供保障。     

数据驱动的燃气应急抢修系统设计与实现

利用数字化技术重塑上海燃气,建立多源异构燃气数据的采集、治理、智能分析应用和数据服务,通过数据融合形成能源数字化资源.集中对燃气数据的模型、规范、标准和质量进行管控,规范燃气数据管理流程,智能挖掘燃气数据资源与价值.通过对抢修事故数据的实时动态数据分析,建立智能分析模型,实现调度优化、应急事故分析、站点管理、路径推荐等...     

用户活动信息相关性分析

用户在日常操作活动中留下的活动信息是了解用户兴趣和需求的重要依据之一。本文提出一个用户活动模型,实现了一个用户活动信息相关度的分析算法。对用户活动信息从语义、切换、时间等方面进行分析,计算其相关性。研究并实现了一个用户活动的收集分析工具并将其部署在一个数据空间系统中。用户在数据空间中搜索时,系统不但返回数据搜索结果,还返回活动相关的信息,帮助用户寻找相关数据。     

数据仓库技术及实施

介绍了数据仓库的基本概念,针对数据仓库建立对创建数据仓库的过程进行了分析,对实现数据抽取、数据仓库的存储和管理等进行分析和比较。