云南省水文大数据资源中心设计与应用

如何有效加强水文数据共享应用,提高水文数据应用深度和水平,加大水文产品的社会共享力度,是新时代水文工作面临的重要问题。针对现代化水文大数据资源中心如何建设提供思路和方法。以云南省水文信息化建设为例,重点介绍云南省水文数据资源面临的数据资源整合缺少,分析应用不足、服务共享不够的现状及问题,针对问题提出水文大数据资源中心构建思路和建设内容和技术方法,从数据汇集管理、质量管理、分析应用、运营服务 4 个层面展开介绍。最后对云南省水文大数据资源中心的应用价值及未来进一步拓展方向进行说明,为其他地区水文大数据资源中心建设提供新的思路。     

基于服务自动化发布技术的数据开放平台设计与实现

在智慧城市建设中,把政府拥有的大数据开放给公众,服务于社会,是充分挖掘大数据价值,实现智慧城市目标的必要手段.在数据开放服务中,如何有效、安全地管理数据,进而运营数据,是一个重要课题.本文提出了一种服务的自动化发布技术,并阐述了基于此技术的数据开放平台的架构和组件,以期能够较好解决这一问题.     

基于非关系型数据库的水文大数据存储方法研究

针对现有的技术架构和主流软件工具存储水文大数据存在的问题,分析非关系型数据库存储水文大数据的优势和技术特点,提出非关系型数据库TRIP存储水文大数据的方法。TRIP数据库管理系统部署在PC机上,水文结构化和非结构化数据存储在与PC机数据连接的磁盘存储装置的数据库文件中,根据水文数据的规模,增加磁盘存储装置的数量和容量。研究结果证明,TRIP数据库能够存储多种类型、格式的水文结构化和非结构化数据,可为水文行业存储水文大数据提供新的技术途径。     

长江水文泥沙信息网络发布与数据可视化研究

长江水文泥沙数据资料对长江河道综合整治、防洪、规划、水利水电工程建设、两岸经济建设、航运管理和水文泥沙研究具有重要的价值,需要实现数据的广泛共享。针对实际需求,研究开发了水文泥沙信息网络发布系统。重点研究了系统体系结构、功能结构和网络结构,采用了先进的数据动态发布和数据可视化技术,实现了长江水文泥沙属性数据,长江水文泥沙二维图形数据,长江三维数据的网络发布与可视化服务等功能。该系统的研发可以推动“数字长江”进程。     

大数据背景下机器学习研究

随着大数据时代的到来,海量数据处理具有复杂性、多样性、高维性等特点,数据挖掘难度大,传统的机器学习算法已无法很好地处理大数据问题,在此背景下机器学习算法研究成为热点。基于此,笔者分析了当前机器学习的关键技术,并运用分治算法、聚类算法、并行计算等技术让数据变得更有条理性,有效降低了数据处理分析的难度,大大提高了机器学习的能力。     

基于云计算架构的水文大数据云平台建设策略

在当今的大数据时代中,水文工作也实现了信息化的发展.为有效提升水文工作的信息化效果,本文特对以云计算框架为基础的水文大数据云平台建设进行分析.希望通过本次的分析,可以对水文大数据储存、处理、管理与应用等工作的信息化提供相应参考.     

基于语义Web和Hadoop的航运数据开放平台设计

大数据背景下,航运数据开放呈现出语义化和海量化的特征。将语义Web与Hadoop相结合,一体化地设计航运数据开放平台,并针对基于Hbase的资源描述框架（RDF）分布式存储和基于MapReduce的SPARQL分布式查询两大核心技术进行讨论,以最大限度地发挥航运数据的潜在价值。     

大数据背景下电子商务专业计算机课程体系研究

以商务理论和计算机技术的融合为目的,研究大数据课程体系,分析电子商务专业计算机能力需求,整合和优化该专业计算机课程,构建以大数据分析为中心的电子商务专业计算机课程体系,建议将大数据分析思维贯穿到电商人才培养的全过程。     

大数据背景下的数据分析

在大数据时代,需要充分挖掘数据的隐藏价值,对数据加强分析.为了完整正确地反映客观情况,就必须在实事求是的原则下,经过对大量的统计资料和数据进行加工制作和分析研究,才能做出科学判断,并编写成数据分析报告.     

大数据背景下电子数据取证规范化研究

随着网络信息技术的拓展和延伸,电子数据已涉及人们生活的各个领域。司法实践中,电子数据作为证据时一般以数字信息编码的形态存在,主要呈现出真实性、混杂性、脆弱性和不稳定性等特点,在取证过程中普遍存在取证制度不够完善、司法取证流程欠规范、证据收集和保全不足、证据审查和运用不到位等突出问题,亟须通过完善电子数据证据的立法保障、健全电子数据证据的取证机制、加强电子数据证实的合法性认定、强化电子数据证据的审查把关等路径强化电子数据的取证规范。     

大数据背景下智慧教育云平台构建研究

基于神经网络教育平台存在资源获取速度慢的缺点,针对该问题,提出了大数据背景下智慧教育云平台构建研究。在大数据支持下,设计智慧教育云平台总体架构,通过物理层、虚拟资源层配置相关硬件设备,经过逻辑层和展现层为用户提供有效服务,利用现有智慧信息,为用户提供个性化服务。优化处理Web端框架代码,降低代码复杂性,注重系统权限管控,科学设计服务功能,完成智慧教育云平台构建。由实验结果可知,该平台资源获取速度最高可达到99.5 MB/s,有效提高了学生学习效率。     

我国水文数据挖掘技术研究的回顾与展望

水文科学研究的领域面临来自许多方面的不确定性和非确知问题。引入数据挖掘的理论与技术,结合水文科学发展的需要,充分应用以计算机技术为基础的现代信息技术,研究水文数据挖掘的理论、技术和方法,为解决水文科学研究面临的问题提供了新的思路。当前,水文数据挖掘研究还处于起步阶段,研究内容多集中在水文数据的单项和局部数据的模拟与处理方面,对基于水文数据库的全局性多因素数据挖掘涉及很少,在数据挖掘技术与水文数据适应性方面所进行的研究也还很不够。为了充分发挥数据挖掘发现知识的作用,需要在水文主题数据库和多维数据立方、水文序列的分类、聚类和关联规则挖掘技术及优化算法以及水文序列的相似性、周期性和其它序列模式挖掘方面开展进一步研究,并向形成水文数据挖掘软件及数据平台方向发展。     

一种工业控制现场数据到开放平台移植的应用

工业控制系统的数据移植问题一直是解决现代工业企业信息化孤岛问题和改善生产自动化水平的热门研究课题。本文通过开放式数据库互联(ODBC)和基于数据对象的现行服务器页(ASP ADO)方法,实现工业控制现场数据到开放平台的移植。这种方法应用于具体工程实例,获得了满意效果。     

大数据智能信息处理实践平台的设计研究

为支撑大数据技术技能人才的培养,改善大数据专业实践教学环境,基于Docker容器技术,设计开发了一套面向高职领域的大数据智能信息处理实践平台。该平台借助沙箱机制,为学生提供了独立的大数据实验环境,并对Docker容器实例进行了有效的全生命周期管理,使得平台底层的计算和存储资源得到充分利用。实验结果表明,实践平台可支撑500人同时在线实训,具有较高的可靠性。     

基于大数据的新兴产业计量校准服务平台研究

针对当前新兴产业计量校准服务资源分散、服务信息不透明、智能化程度偏低等问题,提出一种基于大数据的计量校准服务平台。基于计量校准资源共享和进出机制,整合集成服务主体、服务对象、服务支撑等计量校准资源,建立全国计量校准服务资源池。在给出平台系统架构的基础上,利用智能评估与故障预测技术、大数据挖掘可视化等技术,构建面向新兴产业发展的计量校准服务平台,为产业提供一站式、标准化、可靠、及时的计量校准服务,提升产业服务智能化水平。建立“服务平台+标准体系+技术措施+创新中心”于一体的技术支撑体系,提升计量校准服务效率和竞争力,促进产业计量校准覆盖研制、生产、试验和使用等全过程,实现产品质量提升和全过程安全管控。     

基于组件的大数据分析服务平台

随着数据规模的快速增长,单机的数据分析工具已经无法满足需求。针对大数据的分析问题,设计并实现了一种基于组件的大数据分析服务平台Haflow。Haflow自定义了业务流程模型和可扩展的组件接口,组件接口支持各种异构工具的集成。系统接收用户定义的业务流程,将其翻译成执行流程实例,提交到Hadoop分布式集群上执行。Haflow是一个可扩展的、分布式的、支持异构分析工具的、面向服务的大数据分析服务平台。提出该平台有两重意义:一方面平台将与数据分析业务无关的工作封装起来,支持各种异构组件,以加快分析应用的开发速度;另一方面,平台后端使用Hadoop分布式系统来实现多任务的并发,从而提高应用的平均执行速度。     

融入区块链技术的大数据征信平台的设计与应用研究

信用是一笔无形资产,良好的信用记录不仅可以带来更高的借款成功率和更低的借款利率,还可以让人们享受信用服务带来的便利。未来信用红利将会突显,但也伴随着个人隐私泄露、信用数据篡改、大数据征信商业化的合法边界不明确等问题。为营造一个良性的互联网信用生态环境,首先总结了现有征信平台中存在的问题,探讨并分析了采用新兴技术解决这些问题的可行性;然后融入区块链技术设计了一种辅助未来征信系统的多源数据共享框架;接着以区块链的多源数据共享为基础,应用人工智能、数据挖掘、智能合约等方法建立了多源异构数据融合的大数据征信平台;最后以互联网借贷为例,设计了一款基于大数据征信平台的去中心化借贷应用。     

基于Android系统的大数据推送平台研究

移动互联网与社交网络的兴起将大数据带入新的征程,在大数据时代,移动互联网用户如何及时有效地获取信息也成为一个问题。针对大数据对移动互联网用户的影响,提出一种基于Android系统的消息推送平台,推送平台通过建立数据与用户之间的连接,将经过分析后的优质数据及时的传递给用户,分析推送平台的实现原理,并对其应用场景进行简单的分析。     

大数据背景下的民政公共服务信息平台研究

大数据具有规模大、种类多、生成速度快、价值巨大但密度低的特点。民政大数据应用就是利用数据分析的方法,从大数据中挖掘有效信息,为民政提供辅助决策,实现大数据价值的过程。主要介绍民政公共服务模型、技术框架、大数据的联机分析和大数据挖掘模型,对民政公共服务数据处理具有一定的参考价值。