docker安装hadoop
docker为hadoop的云化带来了极大便利,安装和应用也会更快更方便.进入正题:
- docker search hadoop
将会看到如下结果:
- INDEX NAME DESCRIPTION STARS OFFICIAL AUTOMATED
- docker.io docker.io/sequenceiq/hadoop-docker An easy way to try Hadoop [OK]
- docker.io docker.io/sequenceiq/hadoop-ubuntu An easy way to try Hadoop on Ubuntu [OK]
- docker.io docker.io/ruo91/hadoop Apache hadoop .x - Pseudo-Distributed Mode [OK]
- docker.io docker.io/uhopper/hadoop Base Hadoop image with dynamic configurati... [OK]
- docker.io docker.io/gelog/hadoop WORK IN PROGRESS. NOT PRODUCTION READY [OK]
- docker.io docker.io/uhopper/hadoop-resourcemanager Hadoop resourcemanager [OK]
- docker.io docker.io/dockmob/hadoop Docker images for Apache Hadoop (YARN, HDF... [OK]
- docker.io docker.io/lewuathe/hadoop-master Multiple node hadoop cluster on Docker. [OK]
- docker.io docker.io/uhopper/hadoop-datanode Hadoop datanode [OK]
- docker.io docker.io/uhopper/hadoop-namenode Hadoop namenode [OK]
- docker.io docker.io/uhopper/hadoop-nodemanager Hadoop nodemanager [OK]
- docker.io docker.io/falkonry/hadoop Docker config for hadoop image [OK]
- docker.io docker.io/ading1977/hadoop Docker image for multi-node hadoop cluster. [OK]
我们当然选择星最多的.选择第一个:
- docker pull sequenceiq/hadoop-docker
然后等待下载.
下载完毕之后启动docker镜像:
- docker run -it --name hadoop sequenceiq/hadoop-docker /etc/bootstrap.sh -bash
测试运行:
- cd $HADOOP_PREFIX
- # run the mapreduce
- bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7..jar grep input output 'dfs[a-z.]+'
- # check the output
- bin/hdfs dfs -cat output/*
我下载的时候最新的还是这个2.7版本.后来的小伙伴也不一定是2.7呦.可以进入share目录去看一下提供的测试jar包是什么版本然后运行,然后查看输出结果
docker安装hadoop的更多相关文章
- docker安装hadoop集群
docker安装hadoop集群?图啥呢?不图啥,就是图好玩.本篇博客主要是来教大家如何搭建一个docker的hadoop集群.不要问 为什么我要做这么无聊的事情,答案你也许知道,因为没有女票.... ...
- docker 安装hadoop
上一篇文章介绍了一些docker的基本命令,这篇文章来安装一个HADOOP 一.下载hadoop镜像 @~/git/github/docker-ambari (master)$ docker pull ...
- Docker 安装Hadoop集群
资源准备:jdk1.8及hadoop2.7.3 链接:https://pan.baidu.com/s/1x8t1t2iY46jKkvNUBHZlGQ 提取码:g1gm 复制这段内容后打开百度网盘手机A ...
- Docker 安装Hadoop HDFS命令行操作
网上拉取Docker模板,使用singlarities/hadoop镜像 [root@localhost /]# docker pull singularities/hadoop 查看: [root@ ...
- Docker 构建Hadoop环境
参考如下文章: Docker安装Hadoop Docker在本地搭建Hadoop分布式集群 Docker快速搭建Hadoop测试环境 从0开始用docker搭建 hadoop分布式环境 Docker- ...
- HADOOP docker(一):安装hadoop实验集群(略操蛋)
一.环境准备 1.1.机器规划 主机名 别名 IP 角色 9321a27a2b91 hadoop1 172.17.0.10 NN1 ZK RM 7c3a3c9cd595 hadoo ...
- docker安装单机hadoop
安装环境 centos7. docker -ce(这个安装参考我的另外一篇博客 首先关闭防火墙 systemctl stop firewalld.service #停止firewall systemc ...
- Docker部署Hadoop集群
Docker部署Hadoop集群 2016-09-27 杜亦舒 前几天写了文章"Hadoop 集群搭建"之后,一个朋友留言说希望介绍下如何使用Docker部署,这个建议很好,Doc ...
- 使用docker安装部署Spark集群来训练CNN(含Python实例)
使用docker安装部署Spark集群来训练CNN(含Python实例) http://blog.csdn.net/cyh_24/article/details/49683221 实验室有4台神服务器 ...
随机推荐
- The Accomodation of Students(判断二分图以及求二分图最大匹配)
The Accomodation of Students Time Limit:1000MS Memory Limit:32768KB 64bit IO Format:%I64d &a ...
- Sublime 3 and Python
1. 安装Anaconda插件 Ctrl+Shift+P打开控制面板,找到Install Package,回车 在弹出框中输入Anaconda,回车安装即可. 2.配置Anaconda文件 Prefe ...
- HDU 4289 Control
最小割 一个点拆成两个 AddEdge(i,i+N,x); 原图中的每条边这样连 AddEdge(u+N,v,INF); AddEdge(v+N,u,INF); S是源点,t+N是汇点.最大流就是答案 ...
- nefu 753 n!末尾有多少个0
Problem : 753 Time Limit : 1000ms Memory Limit : 65536K description 计算N!末尾有多少个0 input 输入数据有多组,每组1行,每 ...
- philosophy
Even though the UNIX system introduces a number of innovative programs and techniques, no single pro ...
- json解析尖括号<>
如题 rs.getString("HEADLINE").replaceAll("<", " <").replaceAll(&qu ...
- windows下使用git管理github项目
1. 下载安装msysgithttp://code.google.com/p/msysgit/downloads/list2. 注册github账号3. 生成ssh公钥和私钥ssh-keygen -C ...
- linkButton
<?xml version="1.0" encoding="utf-8"?> <s:Application xmlns:fx="ht ...
- make: *** No rule to make target `out
按照google的指引,一路很顺,最后make -j5的时候出现:make: *** No rule to make target `dalvik/vm/mterp/out/InterpAsm-x86 ...
- ANT 配置和安装 1
--"JAVA_HOME" (JDK HOME)C:\Program Files\Java\jdk1.7.0_79 -- "ANT_HOME" (ANT HOM ...