基于ASP.NET的批量数据导入方法的研究与实现

基于Excel的批量数据导入方法,极大地提高了数据导入的准确性。该文通过与传统的数据导入方法相比较,介绍了两种更为有效的批量数据导入方法,大大提高了数据导入的效率。     

一种大规模数据快速并行导入工具的研究与实现

随着大规模数据的快速增长及高可靠性需求,将本地数据迁移到分布式数据库势在必行。针对这种情况,提出一种基于MapReduce的"快速并行导入"技术,充分利用集群的并行计算能力,直接向HBase底层存储文件HFile写入数据,既可避免上层数据导入时间的浪费,又节省资源开销。有效解决了从单机数据库向HBase分布式数据库导入数据功能低下、效率不高等问题。实验结果表明,在"快速并行导入"技术的基础上设计并实现的快速并行导入工具,支持多列族文本数据的快速导入。与传统使用API导入数据相比,速度提升一倍以上。     

TDM系统中数据导入功能的设计和实现

TDM系统的数据导入功能需要采用三层结构以适应保密需求;数据导入性能是关键指标,而Oracle数据库系统的外部表特性可以大大提高数据导入性能。     

数据仓库中档案数据的并行导入

要在数据仓库中导入档案数据必须考虑导入的速度问题,因此提出了基于客户机/服务器模式的档案数据并行导入的方案。在整个处理流程中,数据整合是实现并行导入的关键步骤,详细描述了历史数据并行整合的方法。最后,通过模拟实验对并行性的性能进行了分析讨论。     

基于动态数据窗口技术的数据导入研究

利用PB的函数或数据管道可以导入外部数据,但当外部数据源结构发生变化并和数据窗口或数据管道原先定义的结构不同时,直接利用上述方法无法成功导入.文章介绍如何通过动态数据窗口技术实现字段一一匹配的导入方法.     

银行业务数据仓库数据导入的分析与设计

本文探讨了银行业务数据仓库数据导入环节的设计,分析了数据导入设计的原则、加载策略与数据质量控制的实现.     

人保财险公司数据仓库数据ETL的设计

本文探讨了人保财险公司建立数据仓库时如何进行数据导入的设计,阐述了数据导入的设计基础和数据加载的策略。     

Excel数据动态导入数据库的设计与实现

本文针对Excel数据与数据库表存在不一致时的数据导入问题,提出了一种从Excel数据动态导入数据库的设计方案。该方案采用建立字段映射的方法实现了Excel到数据库的动态导入,解决了一般导入方案中对Excel数据约束过严的问题,最后给出了该设计方案基于Delphi语言的具体实现。该方案应用于多个信息管理系统,取得了良好的实际使用效果,可供信息管理系统设计开发人员借鉴。     

基于大数据集成平台的物联网信息系统设计

为解决目前物联网信息系统导入精度较低的问题,笔者设计了基于大数据集成平台的物联网信息系统。该系统以系统构架为基础,针对系统硬件进行设计,以此完成数据导入、数据预处理与数据分类等功能,并利用仿真实验对系统导入精度进行验证,从而确保系统设计的有效性。     

基于C#的Excel文档导入技术的研究与实现

随着无纸化办公的普及,现代化的办公环境中Excel文件的广泛使用,对于Excel的数据导入进行统一处理具有很大的需求。本文介绍了COM组件实现Excel数据的导入的原理,并且在Visual C#中实现了数据的导入,为进一步数据的处理打下了很好的基础,具有很强的实用性。     

A high quality interpolation method for colocated polyhedral/polygonal control volume methods

A high quality and efficient interpolation method for polyhedral/polygonal control volume simulation data is presented. The proposed method utilizes a non-ambiguous and efficient mesh decomposition technique. A pseudo-Laplacian is used to solve an optimization problem to approximate the variation between discrete data points in a linear fashion. The interpolation method guarantees continuous interpolation data throughout the control volume mesh topology and faithfully reproduces the input control volume data. The interpolation connectivity is structured to mimic the interpolation methods utilized by the control volume discretization. The method only requires the geometry of the input data to perform interpolations. This allows key interpolation data to be calculated once and stored for efficient interpolations. The benefits of the proposed algorithm are highlighted by an interpolation test case which demonstrates the benefits of the current method compared to a popular interpolation method currently used in industry. Since the proposed method is designed to augment an existing mesh data structure it can be used to update existing control volume software.     

嵌入式Linux导航电子地图数据的组织及应用

为满足嵌入式系统中电子地图显示、导航的需要,研究了电子地图的数据组织与存储,提出采用地理数据分块实现数据的存储,并针对地理数据的存储方法所造成的数据不连贯性,研究了数据断点的处理方法。试验结果表明,研究的数据动态组织方法大大提高了地图显示的速度及数据连贯性。     

基于软件的拓宽数据采集仪动态范围的应用

高采样率和宽动态范围是提高数据采集仪性能的关键指标。对拓宽采集仪的动态范围的方法进行了研究,提出了基于虚拟多核数据采集技术来拓宽低位A/D芯片的动态范围的方法。此方法通过软件对A/D转换的数据进行多次重采样,间接提高了采集仪的动态范围。基于此方法和16位A/D芯片开发出了虚拟3核数据采集仪。测试结果表明此采集仪具有高采样率和宽动态范围的性能,可用于实际测试。     

Data Fusion and Visualization of Multi-time OceanColor Remote Sensing Data

In order to solve the problem that the ocean sensor data such as MODIS and SeaWiFs are easy to emptied,an algorithm combining multi\|time data with multiple fitting methods is proposed.The vacancy value is estimated by the least squares fitting method.To set a threshold named A according to the date of different time in corresponding position.When the effective value is larger than A that the vacancy value is estimated by the method of least squares fitting,when the effective value is smaller than A that the linear interpolation method is used to estimate the vacancy value.There is no valid value the bilinear interpolation method is used for the second repair with the valid data of the adjacent position.The experimental results show that the algorithm has a smooth visual effect when the threshold selection is appropriate,and the error of the data analysis results is relatively small,then the global data can be well restored and the effectiveness of data coverage will be improved.     

图形与图象再现的有限元算法

在计算机视觉以及CAD／CAM等领域都涉及到基于离散观测数据的目标图象或三维曲面图形的重建问题，为此，将最佳逼近与数据平滑理论相结合，提出了一种基于有限元技术的图形与图象重建方法，该方法首先采用Lagrange乘子方法建立正定泛函，进而应用有限元技术及Wewton失代方法求得函极值解，然后通过有限元解的插值计算，重新构造出图形或图象，由于结合了数据平滑处理，因此该方法不仅消除了数据上噪声的影响，而且提高了重建的精度，实验结果证明了方法的有效性和实用性。     

基于Parzen核估计的最大后验概率分类方法

从概率密度函数的角度出发,利用Parzen窗法估计总体样本的概率密度分布,将核方法和Parzen窗法引入最大后验概率方法中,提出一种基于Parzen核估计的最大后验概率的高性能多分类方法。该方法不需要考虑样本数据的具体分布情况,能够得到分类的可信度,给出推理的不确定性依据。在3个国际标准UCI数据集和3个人脸数据集上的实验结果表明,该方法具有较好的分类效果。     

用Delphi实现A／D转换的方法

Delphi是一种优秀的面向对象的编程工具,但Delphi不能直接实现诸如硬件中断等底层操作,硬件中断可采用VxD技术。采用VxD编程是在WIN95下实现时数据采集的关键技术。本文提出了用DLL结合VxD技术,通过中断实现A／D转换的方案,文中阐述了VxD和DLL的设计过程,Delphi九DLL的连接方法。为了保证数据采集的高速有效,文章介绍了一种双缓冲模块交替工作的程序。利用这种方法可以提高数据采集的精度和速度,满足实时性的要求。     

电器试验数据实时采集中的DLL技术

介绍一种在WIN下使用普通数据采集卡实现精确定时数据采集的方法。该方法使用动态连接库机制，实现对数据采集卡的I／O控制，利用WIN多媒体定时器的定时功能，实现准确定时采样。此方法已成功地应用于实际项目中，取得了良好效果。     

基于主分量分析的缺陷识别研究

为了解决传统的人工定义方法和小波包分解方法在超声信号特征提取方面的不足,提出了将主分量分析方法应用于信号的特征提取,并据此进行超声检测的缺陷识别.这种方法不但大大降低了数据量,减少了计算复杂度,同时也能够保证压缩后的数据能够有效的代表原数据特性.通过对提取到的特征建立特征向量,利用模糊模式判别方法进行测试,并和现有的两种方法进行对比.与目前采用的方法相比,该方法在识别效率和准确性上都表现非常优秀,能对各种模式有效识别.     

D-S证据理论在多平台协同数据融合中的应用

为解决多平台协同数据融合问题,采用基于D-S证据理论的数据融合方法,分析了该理论在多平台协同数据融合中的应用原理,并将此方法运用于舰船类型的识别。通过MATLAB仿真计算对D-S方法在多平台协同数据融合和单平台数据融合中的应用进行了比较,验证了该理论在多平台协同数据融合中的有效性和实用性。