基于数据中台的高校数据服务体系及快速应用构建研究

针对目前高校在数据集成、数据治理和数据服务等方面的问题,提出了基于数据中台的解决方案,在数据的采集和加工处理中引入数据湖、主题层和专题层,并对数据中台的整体架构设计、中台内数据的分层设计、数据模型的构建、数据服务体系的设计进行了详细阐述;对基于数据中台的快速应用构建,提出了采用大中台、微服务的系统建设方式,通过对系统进行解构,重新根据不同业务逻辑进行模块化组装,实现快速灵活构建业务系统。经过实际案例验证,该研究对于高校如何建设数据中台以及如何在中台上开展各类数字应用建设提供了很好的范例。     

GPRS远程数据监控服务器的实现

GPRS是General Packet Radio Service的英文简称，是一种基于GSM系统的无线分组交换技术。本文讨论了利用GPRS技术进行远程数据监控的特点，在监控服务器中引入了一种新型高效的按需转发方法。实现了转发服务器对数据采集终端实和监控终端的实时控制，本服务器的实现可大大提高远程数据监控系统转发的效率和安全性。     

面向用户画像的轻量化数据中台研究

以数据中台作为建设中小企业信息基础设施的新模式，并针对性构建轻量化中台，有益于统一管理数据资产，改善数据孤岛问题，提高企业部署大数据应用的能力；以用户画像这一典型大数据应用为切入点，归纳画像构建流程并与数据中台体系整合；以整合后的中台体系为基础，提炼必要的功能模块并从结构、技术栈、部署三个角度进行轻量化设计，从而提出面向用户画像且易于搭建和部署的轻量化数据中台方案；基于Hadoop生态组件搭建轻量化用户数据中台，并使用淘宝用户消费数据构建RFM模型下的用户价值标签，验证轻量化数据中台的可行性。     

基于OPC-XML技术的互联网实时监控系统研究

讨论了基于OPC-XML技术和ASP技术的Web应用。根据OPC-XML纲要，设计并实现了基于OPC-XML技术的互联网实时监控系统。Internet／Intranet用户可以通过Web浏览器从Web服务器得到现场的实时数据，了解现场的实际情况；也可以按照各种方式处理这些实时数据，从而实现了基于Internet／Intranet的远程监控、远程故障诊断、远程指挥调度和远程设备管理。     

军工企业数据中台架构研究

军工企业及其科研院所现有的信息化系统存在数据孤立不能沟通共享的问题,为了提升企业信息化水平、挖掘数据价值,同时应对科研生产业务需求复杂多变从而造成信息化能力提升困难的现状,可通过数据中台的建设来沉淀数据复用能力,形成数据从汇聚、开发、管理到数据服务的中间层能力平台。该文介绍了数据中台建设路线及关键技术,实现了数据中台架构设计,总结了数据中台的应用实践。     

远程容灾系统的设计与实现

设计并实现了一种远程容灾系统。通过实时监控本地存储服务器上的数据变化,并将变化数据通过Internet发送到远程灾备服务器来实现数据的远程备份,通过将远程备份数据写回到本地存储服务器来实现灾难恢复,生产服务器的容灾数据存储于本地存储服务器中,通过iSCSI技术访问。该系统提供了多种数据同步与恢复策略,并提供了图形化Web配置管理平台,支持多种操作系统。     

智慧后勤平台建设研究

在对国内外企业后勤业务深入调研和分析的基础上,提出了基于智能化、智慧化、中台化为核心的智慧后勤平台建设方案,构建后勤业务新生态,实现后勤业务数据的纵向互通、横向互联、集成共享.智慧后勤采用三台架构设计,敏捷前台快速响应和统一调度后勤资源,满足用户多元需求;业务中台实现业务服务共享和新业务快速交付,数据中台实现数据优化治...     

从知识图谱到数据中台: 华谱系统

针对碎片化的各姓氏家谱数据, 华谱系统通过构建家谱知识图谱的数据中台, 能够解决数据孤岛、烟囱式开发等问题. “数据中台”是一个源自国内的新近技术概念, 在华谱系统建设中, 我们通过家谱知识图谱的构建和应用, 对这个概念进行了正式定义. 基于这个定义和对应的7项核心功能, 本文提出一种用于家谱数据分析的数据中台建设架构Huapu-CP (华谱系统), 并通过该架构详细介绍面向家谱领域的数据中台核心技术, 分析数据中台构建的关键问题.     

基于Dymola的大数据可视化教学辅助系统

大数据可视化教学辅助系统运算较为复杂，导致系统中央处理器（CentralProcessingUnit,CPU）占用率增加，影响系统的稳定运行，因此设计基于Dymola的大数据可视化教学辅助系统。硬件方面，设计MC68HC908GP32芯片和SDIN5C2-8GB存储器。软件方面：建立教学辅助权限控制模块，对不同的权限实体采用不同的权限控制；基于Dymola构建大数据可视化教学辅助模型，简化系统运算程序，从而提高系统的运行稳定性。测试结果表明，该系统的CPU占用率更低，能够保持良好的运行状态。     

异地备份系统数据一致性检测方法

针对异地备份系统中数据持续变化的情况,设计并实现了一种基于累积摘要值的一致性检测方法.该方法解决了传统一致性检测需要中断备份任务的问题,保证了备份任务的连续性,并且能够迅速检测本地服务器和远程备份中心数据的一致性,提高了一致性检测的效率.测试结果表明,该方法准确性与中断备份任务对本地服务器上的原始数据和远程备份中心的备份数据进行一致性检测相同.     

基于B/S架构的数据库原理及应用课程线上教学辅助系统设计

针对现有线上教育辅助系统存在事务成功率低、中央处理器（Central Processing Unit,CPU）占用率高的问题，研究基于浏览器/服务器模式（Browser/Server,B/S）架构的数据库原理及应用课程线上教学辅助系统。系统硬件设计方面，通过设计B/S架构进行数据访问与调用，安装数据处理芯片保证系统正常运行。系统软件设计方面，通过计算实际运行过程中的加密协同值对学生登录信息数据进行加密，对教学资源数据属性进行划分，实现优质教学资源的共享与存储。测试结果表明，该系统能够在规定时间内完成大规模并发访问，有效降低了CPU占有率，具有一定的应用价值。     

民机驾驶舱人为因素生理体征数据采集系统设计

提出了基于物联网技术的一种生理体征数据便携式采集系统.该系统通过传感器网络和嵌入式系统,将体征数据实时采集并传输到远程进行分析处理.系统主要由生理体征采集模块、ARM接收模块、远程数据分析服务器组成.系统充分体现了模块化的设计理念,配合高效的数据协议,使得系统可靠性高、稳定性强、扩展性好,对于民机驾驶舱人为因素研究是一...     

一个网络文件存储系统TNS关键技术

基于多服务器架构、为多用户服务的网络文件存储系统普遍存在资源分配不均,重复文件多,存储空间浪费严重的问题。设计并实现了TNS网络文件存储系统,该系统基于多服务器存储架构,分别由用户服务器、索引服务器、数据服务器、共享服务器、管理服务器和登录服务器组成,为多用户服务,采用一致性Hash实现负载均衡,支持在客户端进行文件粒度的重复数据删除。经过实际生产环境运行测试,具有良好的负载均衡能力和重复数据删除功能,可以有效节省存储空间,提高存储设备利用率。     

智能煤矿数据中台架构及关键技术研究

数据中台是智能煤矿建设的数据底座,是煤矿大数据应用的基础。提出了包含数据汇聚、数据开发、数据存储、数据资产管理、数据服务等的智能煤矿数据中台建设思路;设计了智能煤矿数据中台架构,分析了数据中台的数据标准规范、大数据基础支撑、数据汇聚、数据开发、数据资源池、数据资产管理、数据服务、运维保障等功能模块;探讨了建设智能煤矿数据中台过程中高并发低时延数据处理、数据分级分类存储、数据治理、基于大数据的煤矿灾害风险模型构建等关键技术的解决方案。应用表明,智能煤矿数据中台实现了数据汇聚、数据开发,以及各类感知数据、基础数据、管理数据的分级分类存储、数据资产管理、数据建模、模型训练、数据服务等,使得煤矿多源异构数据从数据资源变为数据资产,可提供基于大数据的调度决策、灾害风险分析、设备健康诊断、预防性维护等应用,解决了煤矿信息孤岛严重、数据难集成、智能化分析水平低等问题。     

基于大数据挖掘的电力客服中台数据智能整合方法

针对数据整合过程中屏蔽处理的异构数据较少，损耗较大的问题，提出基于大数据挖掘的电力客服中台数据智能整合方法。综合分析电力客服数据的时序性，引入大数据挖掘算法，挖掘电力中台数据，定义电力区域存在多个服务区域，聚合处理并生成电力客服逻辑区块，增加屏蔽异构数据，构建空间范围内的观测变量后，完成电力客服中台数据智能整合。搭建电力客服数据发送、接收结构，实验结果表明：所设计的数据整合方法实际产生损耗数值在20 kW左右，需要屏蔽处理的异构数据较多时，可以满足电力客服中台数据整合需求。     

虚拟镜像网络服务器的设计与实现

虚拟光盘镜像服务器是专门为光盘资源网络共享服务而设计开发的,它对光盘数据资源的共享具有重要意义。本文设计开发了一种专用的高性能虚拟光盘镜像服务器,它不仅支持远程共享,还极大地提高了光盘资源的传输效率,实验结果也表明了本文设计系统的有效性。     

支持访问控制的P2P大规模遥感数据分发系统

遥感数据日益增长,大规模遥感数据分发对集中分发服务器构成了巨大压力。充分利用参与下载节点的网络资源,提出并实现了一种支持访问控制的P2P大规模遥感数据分发系统。遥感数据分发系统分为遥感数据管理平台和遥感数据客户端两部分,遥感数据管理平台包含共享分发平台网站、云存储、种子资源服务器和跟踪服务器4个组件,遥感数据各客户端和种子资源服务器构成P2P网络。设计了包括共享分片、分片选择、跟踪器通信等的P2P协议,实现的遥感数据分发系统能够上传遥感数据并自动做种,支持对用户的访问控制。根据用户权限进行下载,各下载节点共享分片,然后基于类Bittorrent协议来加速遥感数据的分发。实验结果表明,实现的大规模遥感数据分发系统的功能完善,在多节点下载时具备良好的并发性能,能够满足大规模遥感数据分发的需要。     

服务级远程灾难恢复系统

设计并实现了一种服务级远程灾难恢复系统。该系统采用逻辑卷数据拦截技术实时监控本地生产服务器的数据变化,将变化的数据通过Internet备份到远程备份服务器。采用基于趋势预测的心跳检测算法实时检测生产服务器的存活状态,当灾难发生时,将生产服务器的应用服务迅速切换到远程备用服务器。实验结果表明,该系统能够高效地实现数据恢复与服务漂移,同时保证了数据的安全性与服务的连续性。     

数据中台三层构架在高校的优化与实践

近年来随着国家对数据的持续关注，大多数高校加强了对数据管理的建设和投入，数据中台与高校教育领域的结合，是国家数字化发展的必然趋势。本文从数据中台本身的数据结构出发，归纳了数据中台建设中常见的问题和需求。针对中台三层数据存储与服务构架进行优化和研究，并在高校中台使用的实际场景下进行了实践。     

面向大量用户的远程备份容灾系统

为应对面向大量用户的数据容灾系统的需求,设计并实现了一个面向大量用户的数据备份容灾系统。在远程容灾服务器建立一个与磁盘分区数据一致的备份磁盘分区,对磁盘分区的数据进行实时监控,将监控到的数据变化通过网络实时传递到远程容灾服务器,并更新磁盘分区,采用epoll与哈希表等技术处理来自多个生成服务器的请求,能够同时为大量用户提供备份服务。当灾难发生时,系统将远程容灾服务器的备份数据恢复到磁盘分区,从而降低数据丢失所带来的损失。