基于PC集群的并行数据仓库架构

摘要：

针对数据仓库规模不断增长而导致难以确保即席查询分析性能的问题,提出一种构建在PC集群上的并行数据仓库架构--HDW,采用Google的GFS和Bigtable技术进行分布式存储管理,采用MapReduce技术进行并行联机分析处理,为前台应用程序提供遵循XMLA规范的统一接口.在18个节点的集群上进行实验,结果表明,HDW系统扩展性好,能快速处理至少千万条元组的数据.

关键词：数据仓库、联机分析处理、集群

所属期刊栏目：35

分类号：TP311(计算技术、计算机技术)

资助基金：广东省国际科技合作计划基金资助项目2007A0501000 26;广东省科技计划基金资助项目2006B11301001;广东省工业科技攻关计划基金资助项目2006B80407001

在线出版日期：2009-12-04（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：73-75