并行OLTP系统中增量数据的自动分片技术研究

摘要：

近年来,由于数据规模的急剧增长,越来越多的大型应用系统被部署到分布式环境中,它们需要通过数据分片技术,将原有数据集和新增加的数据审慎地划分到不同的节点上,来优化并行联机事务处理(on-line transaction processing,OLTP)系统的性能.针对系统中已有的静态数据和新生成的增量数据,提出了一种新的数据分片策略——数据表依赖分片策略(table dependency partitioning strategy,TDPS).该策略首先根据数据表之间的相互依赖关系,对初始数据进行划分.当有新的数据到达时,它会自动将每个数据片段分配到最相关的数据分区中.使用TPC-C测试基准进行了一系列的实验,实验结果显示,与以前的方法相比,TDPS策略可以有效地提高系统性能.

关键词：数据划分、联机事务处理(OLTP)、增量数据

所属期刊栏目：7

分类号：TP311(计算技术、计算机技术)

资助基金：The National Natural Science Foundation of China under Grant No.61003086;the Open Fund of State Key Laboratory of Software Development Environment under Grant No.SKLSDE-2012KF-09;the Graduate Student Scientific Research Foundation of Renmin University of China under Grant No.42306176

在线出版日期：2013-10-10（万方平台首次上网日期，不代表论文的发表时间）

页数：共11页

页码：800-810