粒子群算法在分布式 ETL 任务调度中的应用

摘要：

随着分布式数据环境越来越复杂,ETL 工具要面临数据源多、分布地域广和海量数据等因素带来的挑战.原有的集中式 ETL 工作流优化理论不能满足现在复杂数据环境的要求.介绍了如何将基于置换的离散型粒子群算法应用到分布式 ETL 任务优化调度问题上,主要工作围绕 ETL 工作调度模型、算法编码设计、目标函数选择等内容来展开,给出了分布式 ETL 工作调度策略的实现过程和伪代码.理论分析和实验证明了实际应用的有效可行性.

关键词：分布式抽取-转换-加载(ETL)、任务调度、基于置换的离散型粒子群算法

分类号：TP311.133.1(计算技术、计算机技术)

在线出版日期：2013-05-13（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：150-155