基于任务分配和数据集副本的科学工作流数据布局

摘要：

云环境下科学工作流的数据布局成为当前工作流研究中的一个热点问题,对科学工作流中任务和数据之间多对多关系进行分析,可以发现不同数据布局方案在数据传输上的费用各不相同,在很大程度上影响工作流的运行成本.为降低科学工作流数据集传输费用,提出一种基于任务分配和数据集副本的科学工作流数据布局方法.该方法从任务分配开始,在定量计算任务依赖度的基础上进行任务分配,根据分配结果给出一个基于数据集副本的两阶段数据布局方法,以实现科学工作流运行中传输费用的优化.实例结果表明,与工作流层方法相比,该方法可以有效降低科学工作流的运行成本.

关键词：云环境、科学工作流、任务分配、数据集副本、数据布局、传输费用

所属期刊栏目：46

分类号：TP391(计算技术、计算机技术)

资助基金：国家自然科学基金61602260

在线出版日期：2020-05-29（万方平台首次上网日期，不代表论文的发表时间）

页数：共10页

页码：122-130,138