Hadoop 是 Apache 软件基金会旗下的一个开源分布式计算平台。
<>Hadoop 的核心子系统说明如下:
* HDFS : 一个高度容错性的分布式文件系统,适合部署在大量廉价的机器上,提供高
吞吐量的数据访问 。
* YARN (Yet Another Resource Negotiator):资源管理器,可为上层应用提供统一的资
游、管理和调度 ,兼容多计算框架 。
* MapReduce : 是一种分布式编程模型,把对大规模数据集的处理分发( Map )给网络
上的多个节点 ,之后收集处理结果进行规约 ( Reduce ) 。
<>使用官方镜像
拉取镜像
docker pull sequenceiq/hadoop -docker:2.7.0
完成镜像拉取后,使用 docker ru口指令运行镜像,同时打开 bash 命令行:
docker run -it sequenceiq/hadoop-docker:2 7.0 /etc/b oots trap.sh -bash
运行案例
bash-4.1# cd $HADOOP_PREFIXbash-4 1# pwd/usr/local/hadoop bin/hadoop jar
share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.0 jar grep input output ’
dfs [a z.] +’