HDFS访问中间件的事务设计与实现

摘要：

针对Hadoop分布式文件系统(HDFS)不支持事务导致其故障恢复比较复杂的问题,提出一种支持事务的HDFS访问中间件的设计方案.该方案在对HDFS进行数据访问时还能提供事务支持.首先,分析访问HDFS的应用系统的事务需求,从HDFS事务流程、事务日志和事务恢复3个方面进行描述.其次,设计HDFS访问中间件的事务流程和体系架构.再次,根据设计方案,采用J2EE技术进行系统实现.最后,设计一个实例来测试中间件的设计和实现,通过这个实例说明,该中间件能有效地简化HDFS的数据访问和事务故障恢复的过程.

关键词：HDFS、中间件、事务、分布式文件系统、Hadoop

分类号：TP311(计算技术、计算机技术)

资助基金：江苏省科技支撑计划项目BE2014048

在线出版日期：2017-05-16（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：46-50