基于流式计算框架的实时数据库分区系统

摘要：

为实现大数据环境下大规模动态分区信息的高效处理,结合流式计算框架,提出一种实时数据库分区系统.采用大数据环境下的流式计算技术处理大规模动态的工作负载,设计实时数据分区算法实现数据分区的自动与即时生成,并利用流式计算框架的水平扩展机制提高系统扩展性和吞吐量.实验结果表明,该系统可在大数据环境下实现高效、实时的数据库分区,与传统分区算法相比,具有更高的分区质量和更少的分区时间.

关键词：数据库分区、流式计算框架、大数据管理、分布式存储、动态负载

所属期刊栏目：43

分类号：TP39(计算技术、计算机技术)

资助基金：天津市应用基础与前沿技术研究计划项目14JCYBJC15500;高等学校博士学科点专项科研基金20130031120029

在线出版日期：2017-12-14（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：8-15