Mintegration:一种针对大规模数据的并发数据集成方案

针对现有数据集成方案不能解决有限内存与大规模数据量之间的矛盾,提出一种针对大规模数据的并发数据集成方案,该方案并不一次性将数据读入内存,而是将整个任务分成若干子任务,各子任务并发执行,从而解决了有限内存与大规模数据量之间的矛盾。理论和实验结果表明,这种集成方案能够以可配置的方式进行大规模的数据集成。