非结构化数据的ETL设计方法探讨

现代信息技术在行业中的应用日益深入,而各系统在开发过程中因其自身的独立性,在处理相关业务或实现数据管理时,多需要从异构环境下来进行整合。文章结合当前流行的公共仓库元模型以及ETL技术特点,针对非结构化数据的差异性,探讨属性提取和数据打包的有效方法,为实现非结构化数据的ETL设计奠定基础。     

核电力学分析集成系统的应用研究

当前核电项目存在数量多、进度紧、要求高等特点,传统的核电力学分析流程与工作模式,越来越难以满足工程的进度需求。为了实现更高效、更高质、更协同的设计研发与制造模式,提高核电项目中力学分析的工作效率、降低人因失误、强化协同设计能力以及加强数据管理应用,该文提出并研究建立一套核电力学分析集成系统,该系统以核电工程力学强度评估方法及分析过程为基础,以自动化过程为核心,以智能数据应用为驱动,以数字集成平台为依托,能够对上下游的结构化数据进行解析和传递,可完成设备、管道的一体化自动分析流程,并实现数据管理和关联统计等功能。该系统应用于核电项目的过程中,在保证设计安全和质量的同时,也将进一步推动核工程领域中力学分析环节的程序化、信息化、智能化发展。     

企业统计信息化建设的探索与思考

随着企业不断发展,企业需要统计的信息数据越来越多,为了能够迅速有效地统计出信息数据,企业对自身数据管理提出了更高的标准,因此促进了新时期统计信息化建设工作的发展。然而我国现代企业统计信息化建设工作存在一些问题,只有正确认识与改进这些问题,企业统计信息化建设工作才会顺利进行。     

综合气象信息共享与管理系统的构建与应用研究

由于气象分析数据共享具有多源、异构、海量、高效和时效等特点,如何便捷高效地为用户提供气象共享数据管理服务是一个长期以来困扰气象业务和数据管理人员的重大难题。文章基于系统CIMISS和Ci-Hadoop HDFS,给出了系统的各项性能优化测试结果和核心应用推广效果,表明该应用系统已经能够为佛山市大型气象信息业务核心用户提供高效便捷的气象数据共享和气象信息资源管理应用服务,具有一定的应用示范性和推广应用价值。     

烟草行业主数据平台建设方法研究

本文针对中国烟草行业主数据管理的特点,从行业信息化长期发展的需求出发,结合行业未来四纵一横大应用的集成整合要求,对行业未来主数据管理的主要功能进行清晰定义,对平台运行模式进行前瞻性探索,明确行业两级主数据管理框架、平台建设方法和关注重点,为未来行业开展全面的主数据建设提供理论框架基础。      

基于多源异构的烟用香原料数据集构建

为解决烟用香原料数据查找难、获取难、使用难等问题,构建了基于多源异构的烟用香原料数据集。通过公开数据来源进行数据采集,获取香原料基本信息、理化性质、感官特性等数据;对香原料样品开展感官评价与成分检测,获取样品检测数据。经过条目标准化、数据结构融合和数据标签标注,实现了多源异构数据处理。烟用香原料数据集涵盖1 000余种香原料,包含10个数据模块,并以此为基础建立了烟草行业香原料中心库平台。对主体香型分布、嗅香香韵分布、香韵与卷烟加香作用之间的关联性进行分析,结果表明：(1)数据集能够从多维度提供烟用调香数据,并面向应用场景支持多种数据检索功能。(2)通过数据分析能够发现烟用香原料的分布特征,所体现的卷烟加香规律与实际经验基本相符合。(3)数据集检索量达到15 000余次/年。该研究可为推动烟草调香数字化转型提供支持。     

一种元数据驱动数据仓库设计与应用

数据仓库技术广泛服务于业界信息系统建设之需求,大数据分布式架构的兴起也促进了数据仓库技术带的发展。文章结合一个应用项目的需求,设计开源技术方案,实施多种异构数据整合、元数据驱动、主题标签及Extjs架构的图形显示。实现了一套可视化的数据仓库系统,用以解决复杂的异构数据以及数据的展示,也为后续的决策支持系统构建和数据挖掘工作提供基础     

ESB技术在地市级公立医院信息集成平台设计中的应用探索

随着国家三级公立医院绩效考核与国家电子病历评级工作的持续推进,医院对信息系统及业务数据要求越来越高。现有的系统数据库异构,无法满足数据的规范性、灵活性、适应性和共享性等需求。为实现软件系统之间高内聚、低耦合以达到系统间数据互联互通的目标,该文以南宁市第二人民医院基于企业服务总线技术（Enterprise Service Bus,ESB）搭建信息集成平台建设情况为例,分析介绍其使用现状、技术要点并提出对应医疗集团化医院信息化建设方案。集成平台的建设解决各数据异构无法互联互通的问题,提高信息化水平同时对未来医院更好响应大数据时代建设具有参考价值。     

酱香型白酒产业大数据资源的应用困境及建议研究

贵州省在大数据基础建设方面已取得了突出的成效，大数据存储基地已基本建成，大数据产业链逐渐形成。然而，由于数据资源的多源、异构等特征，使得数据资源的所有权与使用权归属问题尚未鉴定清楚，由此引发的数据安全、隐私保护、数据交易机制等问题尚未得到有效解决，从而影响到大数据资源的深度开发与应用，酱香型白酒产业是贵州省的十大支柱产业之一，酱酒产业与大数据的融合可以有效提升贵州省大数据及酱酒产业整体发展。鉴于此，以“酱酒产业大数据资源的应用困境及建议”为题，对贵州省大数据在酱酒产业应用发展面临的困境开展研究，通过研究形成较为系统的技术方法与解决方案，以期为贵州省的大数据与酱酒产业融合发展提供决策参考。     

基于SOA架构运用SAP XI实现卷烟工业企业一体化信息集成平台的应用研究

为有效集成卷烟工业企业的众多管理信息系统、整合现有信息资源,以浙江中烟工业有限责任公司信息系统建设为例,基于SOA架构运用SAP XI(Exchange Infrastructure,XI)构建了卷烟工业企业一体化信息集成平台.该集成体系将所有需要连接的系统,建立以SAP XI为中心Hub的星形连接,简化了多系统集成时的复杂度;SAP XI将所有由源系统传来的数据格式进行转换处理.实现了异构系统之间的通信集成;SAP XI服务总线将国家局、省级公司、制造部不同信息系统互相衔接,实现了不同层级多个业务系统之间的无缝集成.信息集成平台应用后,实现了多套应用系统之间的总线式信息交互,从架构层面确保了企业各应用系统之间进行灵活、有序、可控的信息交互,解决了信息孤岛、数据质量、流程整合等问题,对卷烟工业企业开展信息化建设提供了借鉴和参考.     

基于多源异构数据的肉类食品安全风险评级模型研究

目的 基于多源异构数据构建肉类食品安全风险评级模型。方法 依据2020—2023年肉类监督抽查数据、食品召回数据、实验室管理系统数据和行政处罚数据等多源异构数据,分析肉类食品的全链安全风险因素类别。通过数据治理手段,使用基于决策树的随机森林算法构建肉类食品安全风险评级模型。结果 肉类食品安全风险评级模型的准确率达到90%以上,与实际情况基本吻合,基于模型分析发现食品添加剂和微生物指标的风险程度要高于其他类别,其中山梨酸、亚硝酸盐和胭脂红这3类食品添加剂具有较高风险,菌落总数在微生物指标中具有较高风险,在流通环节的菌落总数的不合格率要高于生产和餐饮环节。结论 基于随机森林的肉类食品安全风险评级模型可以推断肉类安全风险因素的风险程度,该模型可以为政府和监管机构提供风险管理方面的数据支持,并为监督抽检方向提供建议。     

智能工艺流程设计在核电系统设计中的应用

文章基于Diagrams软件在核电项目系统智能工艺流程设计方面的应用,讲述针对核电项目体系化设计和数据一致性需求,通过对Diagrams软件的定制,实现核电项目系统智能工艺流程设计和二、三维数据校验,并介绍了核电项目系统流程设计应用情况。     

基于物联网监控的烟叶精准种植管理系统设计与实践

围绕"智慧烟叶"建设目标,研发了一套基于物联网监控的烟叶精准种植管理系统:设计了基于物联网技术的多源异构种植数据采集和传输机制,实现烟田种植数据的实时监控和采集,解决烟田数据采集难度大、成本高和采集滞后的问题;提出了一种基于机器学习的烟草精准种植和智能管理方法,利用机器学习和神经网络技术,训练烟草大田种植期分类模型和烟...     

智慧园区异构数据集成技术的研究与实现

人工智能、物联网、大数据、5G等新兴技术的进步,推动了智慧园区的飞速发展.随着智慧园区接入子系统的增加,数据信息呈指数级爆炸式增长,不同的数据采集、处理和存储方式使得海量数据具有来源复杂、结构异构的特点,难以共享和互操作.分析智慧园区数据异构的技术难点,提出利用数据集成方法实现异构数据的统一标准接口.该方法无需改变原系统的数据库存储和管理方式,集成平台介于数据展示层和系统应用层之间,向下协调各数据库系统,向上为访问集成数据的应用提供统一数据模式和数据访问的通用接口,通过实地应用,解决异构系统的数据集成问题.     

主数据管理系统在烟草企业的应用

结合红塔辽宁烟草有限责任公司(简称红辽公司)主数据管理系统的建设,本文介绍了一种面向烟草企业主数据管理系统。首先分析了国内企业在主数据管理的现状及存在的不足,特别是烟草企业存在的问题。然后结合红辽公司的信息化建设规划及本身特点,介绍了改善该现状的解决方案--红辽主数据管理系统,及总体架构和系统设计。最后针对该系统面向数据集成的接口模式,介绍了设计和实现的主要技术。     

基于大数据分析的智能电网监控运行系统建设

大数据分析下的智能电网监控运行系统具有异构、高维、多源、先验等突出特点。依靠大数据分析下的现代信息、通信和控制技术,积极发展智能电网监控运行系统,适应未来可持续发展要求,已成为国际电力发展的现实选择。本文以大数据视角分析智慧电网监控运行系统的整体构建形式,并介绍智能监控运行系统的具体应用。     

基于智能制造信息平台的全产业链质量追溯管理

通过智能制造信息平台的建设,建立食用盐产品相关质控流程、项目和数据的电子档案,结合人工智能、大数据技术的深化应用,强化食用盐产品生产过程中的数据管理,打造产品质量记录、管控、追溯、分析与持续优化完善的智能数据管理系统,提高了产品全生命周期质量管理能力.     

云计算和云数据管理技术研究

我国在发展的过程里,对于数据管理的能力也在逐渐提升,特别是近些年来,互联网中的云数据和云计算的管理技术已经越来越成熟。对于云计算涉及的数据来说(也叫做云端数据),能够精准且快速的查询。云计算和云数据技术管理是当前我国出现的新型数据管理思路,这种管理模式是以云计算技术为基础的。文章探讨了云计算和云数据管理的关键技术,并且提出了相应的发展思路。     

万州供电公司营配调数据贯通现状分析

在当前泛在电力物联网建设背景下,深入挖掘电力数据的价值具有重要作用。随着高级量测系统的建设日益完善,供电公司的数据采集系统所能采集的数据类型越来越丰富,为进一步发挥数据在电力业务中的作用提供了良好的基础,但现有的营配调数据仍然存在不贯通的问题。文章以万州供电公司为例,从模型与状态数据的历史反演性和非同源异构数据的匹配性角度,分析现有营配调数据的贯通现状,找出目前存在的问题,为电力公司数据系统的完善提供参考。     

试论计算机科学技术在数据管理中的应用

随着现代科学技术的不断创新完善,计算机技术发展得到了质的飞跃。社会大众在工作生活中无时无刻不在与计算机信息技术打交道。计算机科学技术应用作为数据管理过程的重中之重,是一个必不可缺的关键部分,直接关系到数据管理应用的安全性。因此,要想最大程度发挥出各项数据信息的作用,为人类创造出更多的经济效益和社会效益,就必须高效利用计算机软件技术和加强对数据的收集整理以及分析处理工作,这样才能实现庞大数据库的高效科学管理。文章将进一步对计算机科学技术在数据管理中的应用展开分析与探讨。