大数据技术在环境信息中的应用

摘要：

在“辽河流域水环境管理技术综合示范”项目中,随着时间的累积,环境监测数据处理系统采集到的数据量越来越大.然而目前辽宁省环境监测数据处理系统无法有效处理日益增长的海量数据.研究运用大数据技术,改进环境监测数据处理系统中的数据中心.利用HDFS强大的数据存储、管理功能,以应对数据量的增长,利用MapReduce及Hadoop其他相关工具,快速处理海量数据,降低数据规模,最后将数据存储到数据库中.

关键词：大数据、MapReduce、Hadoop、并行计算、分布式

所属期刊栏目：24

资助基金：国家水体污染控制与治理科技重大专项2012ZX07505003

在线出版日期：2015-03-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：60-64