基于协处理器的HBase内存索引机制的研究

摘要：

为了实现对海量数据的高效存储和查询,众多NoSQL数据库被开发出来,HBase是其中之一.但原生的HBase数据库在进行数据查询时只支持主键索引,对非主键数据只能通过全表扫描的方式进行查询,极大降低了HBase的多条件查询速度.为此,提出了基于协处理器的HBase内存索引构建方案,通过协处理器实现对二级索引的快速构建并可根据HBase表的变化自动更新索引.同时,将建立的索引进行持久化操作,在使用时通过内存计算,极大地提高了索引数据检索速度,保证了索引的可用性和容错性.实验结果表明,该方案相比原生数据库的条件检索速度有了极大提升,相比于基于Solr和HiBase的二级索引方案检索速度也有所提升.

关键词：HBase、内存索引、HT树、持久化

所属期刊栏目：56

分类号：TP311(计算技术、计算机技术)

资助基金：2017江苏省博士后科研资助计划;2017江苏省"六大人才高峰"资助项目;中央高校基本业务费

在线出版日期：2020-01-17（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：98-105