|
|
- 2017
基于Hadoop的大数据处理平台研究
|
Abstract:
大数据时代的到来伴随着海量数据，进而使得筛选出具有价值的信息成为大数据被广泛应用的核心步骤.在此情况下Apache Hadoop顺势而生，其通过简化数据密集、高度并行的分布式应用来应对大数据带来的挑战.由于目前基于Hadoop的大数据平台在多领域普遍使用，从而平台搭建成为进行大数据探索的第一步.而很多文章介绍的平台搭建是在虚拟机中完成，与真实情况存在相应差异.本文讨论以真实集群为基础搭建Hadoop平台的原因，Hadoop集群的强大功能，搭建平台所需设备、环境、安装、设置及测试过程.
