分布式ETL负载均衡策略研究

摘要：

在分析分布式ETL中负载均衡重要性的基础上,针对传统ETL应用于分布式数据仓库中效率低的缺陷,提出一种根据ETL节点所抽取的数据类型不同对分布式ETL节点抽取的数据进行分割的策略,以及一种新的负载均衡模型—链网模型和Routers相结合的R-CN模型.在此基础上提出一种基于ETL数据分片和R-CN模型相结合的分布式ETL节点负载调度和均衡策略.此策略使ETL节点的数据处理能力有了很大的提高,有效地提高了分布式ETL的效率.

关键词：分布式数据仓库、ETL、数据分割、负载均衡

分类号：TP311(计算技术、计算机技术)

资助基金：辽宁省自然科学基金资助项目20052007

在线出版日期：2012-01-14（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：201-204