HBase下的高效时空分类索引

摘要：

海量流数据具有体量大、更新速度快、多维度、多属性等特点,其存储和查询是近年来学术界和工业界的研究热点之一.HB ase系统为海量流数据的存储管理提供了一套具有高可扩展性的技术方法和系统平台.然而HBase仅支持主键索引,导致非主键数据查询效率较低,尤其是对于多维的数据.针对交通流数据场景提出一种具有高插入和查询效率的索引结构TA-in-dex.TA-index考虑数据访问时的时间和空间局部性,从而更准确地获得数据的特征,通过对时间和空间的不同分类索引,减少索引的数据量,提供实时的数据分析能力.实验表明该算法效率比现有算法更优,而且具有高可扩展性,可以同时支持高吞吐量和高效多维查询.

关键词：流数据、HBase、分类、索引

所属期刊栏目：38

分类号：TP311(计算技术、计算机技术)

资助基金：国家自然科学基金项目61373015

在线出版日期：2017-08-04（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：1231-1236