数据密集型计算编程模型研究进展

摘要：

作为一种新兴的计算模式,云计算受到了学术界和产业界的广泛关注.云计算以互联网服务和应用为中心,服务提供者需要存储和分析海量数据.为了能够低成本高效率地处理Web量级数据,主要的互联网公司都在由商品化服务器组成的大规模集群系统上研发了分布式编程系统.编程模型可以降低开发人员在大规模集群上编程的难度,并让程序充分利用集群资源,但设计这样的编程模型面临巨大挑战.首先说明了数据密集型计算的特点,并指出了编程模型要解决的基本问题;接着深入介绍了国际上代表性的编程模型,并对这些编程模型的特点进行了比较和分析;最后对当前所面临的问题和今后的发展趋势进行了总结和展望.

关键词：云计算、数据密集型计算、编程模型、数据并行、海量数据处理、MapReduce

所属期刊栏目：47

分类号：TP316.4(计算技术、计算机技术)

资助基金：国家自然科学基金青年科学基金项目61003063,60703020;中国科学院知识创新工程重要方向性基金项目KGCX2-YW-131

在线出版日期：2011-01-28（万方平台首次上网日期，不代表论文的发表时间）

页数：共10页

页码：1993-2002