大数据关键处理技术综述

摘要：

大数据是继云计算、物联网之后 IT 产业又一次颠覆性的技术革命，大数据的发展、研究必将改变世界。先简介大数据的概念及其特征、大数据发展历程、大数据与云计算的关系；接着叙述了大数据分析和处理的比较成熟的平台：Spark 和 Hadoop ；然后对大数据处理的若干关键技术：大数据采集、大数据预处理、大数据的存储及管理、大数据的分析和挖掘、大数据的统计分析等进行了较系统的分析、归纳和探讨。

关键词：大数据、Hadoop、数据挖掘、NoSQL 数据库

所属期刊栏目：44

分类号：TP309(计算技术、计算机技术)

资助基金：陕西省教育厅科学基金项目15JK1134资助。

在线出版日期：2016-06-01（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：694-699