0. 说明

　　Hadoop 命令合集 && Web UI

1. HDFS 命令

　　【1.0 启动所有 && 关闭所有进程】

　　相当于启动 HDFS 和 YARN

  1. # 启动所有
  2. start-all.sh
  3.  
  4. # 关闭所有
  5. stop-all.sh

　　【1.1 NameNode 启动命令】

  1. # 单独启动 NN
  2. hadoop-daemon.sh start namenode
  3.  
  4. hadoop-daemons.sh  --hostnames s101  start namenode
  5.  
  6. # 获取 NN 节点
  7. hdfs getconf -namenodes

　　 【1.2 DataNode 启动命令】

  1. # 启动所有 DN
  2. hadoop-daemons.sh start datanode

　　【1.3 SecondaryNameNode】

  1. # 单独启动
  2. hadoop-daemon.sh start secondarynamenode
  3.  
  4. hadoop-daemons.sh --hostnames 0.0.0.0 start secondarynamenode
  5.  
  6. # 获取2NN节点地址
  7. hdfs getconf -secondarynamenodes >/dev/null

　　【1.4 hadoop-daemon.sh 和 hadoop-daemons.sh 的区别】

  1. hadoop-daemons.sh start datanode = ssh s102 hadoop-daemon.sh start datanode
  2.                        　　　　　　　ssh s104 hadoop-daemon.sh start datanode
  3.                        　　　　　　　ssh s103 hadoop-daemon.sh start datanode

　

2. YARN 命令

　　【2.1 ResourceManager 启动命令】

  1. yarn-daemon.sh start resourcemanager

　　【2.2 NodeManager 启动命令】

  1. yarn-daemons.sh start nodemanager

3. Web UI

　　3.1 HDFS

　　格式：http://hostname:50070

　　http://s101:50070

Hadoop 命令 && Web UI的更多相关文章

  1. Hive 接口介绍（Web UI/JDBC）

    Hive 接口介绍(Web UI/JDBC) 实验简介 本次实验学习 Hive 的两种接口:Web UI 以及 JDBC. 一.实验环境说明 1. 环境登录 无需密码自动登录,系统用户名shiyanl ...

  2. 从零自学Hadoop(13)：Hadoop命令下

    阅读目录 序 MapReduce Commands User Commands Administration Commands YARN Commands User Commands Administ ...

  3. CDH中HDFS的WEB UI外网无法访问的问题

    文章来自:http://www.cnblogs.com/hark0623/p/4177794.html 转载请注明 其实问题很简单,因为在CDH中hdfs-site.xml配置文件中WEB UI配置的 ...

  4. yarn web ui 参数详解

    我们经常使用yarn调度,但是我们是否对调度队列显示参数真正了解呢?   下面我们来一一看看这些参数都是做什么用的,代表什么意思   hadoop是通过队列管理集群资源,翻开集群Web UI,找到Sc ...

  5. 【Robot Framework 项目实战 02】SeleniumLibrary Web UI 自动化

    前言 SeleniumLibrary 是针对 Robot Framework 开发的 Selenium 库.它也 Robot Framework 下面最流程的库之一.主要用于编写 Web UI 自动化 ...

  6. Hadoop命令大全

    Hadoop命令大全 分类: 云计算2011-03-01 15:04 6852人阅读 评论(0) 收藏 举报 hadoop作业任务集群class脚本 1.列出所有Hadoop Shell支持的命令   ...

  7. locust性能测试(无 web ui 模式)

    前言 前面是在web页面操作,需要手动的点start启动,结束的时候也需要手工去点stop,没法自定义运行时间,这就不太方便.locust提供了命令行运行的方法,不启动web页面也能运行,这就是no- ...

  8. spark集群启动步骤及web ui查看

    集群启动步骤:先启动HDFS系统,在启动spark集群,最后提交jar到spark集群执行. 1.hadoop启动cd /home/***/hadoop-2.7.4/sbinstart-all.sh ...

  9. spark调优篇-spark on yarn web UI

    spark on yarn 的执行过程在 yarn RM 上无法直接查看,即 http://192.168.10.10:8088,这对于调试程序很不方便,所以需要手动配置 配置方法 1. 配置 spa ...

随机推荐

  1. DataSet 多表关系

    protected void Page_Load(object sender, EventArgs e) { string connectionString = @"Data Source= ...

  2. 【IT笔试面试题整理】反转链表

    [试题描述]定义一个函数,输入一个链表的头节点,反转该链表并输出反转后链表的头节点 [参考代码] 方法一: public static Link reverseLinkList(Link head) ...

  3. .Net Core vs .Net Framework 如何为一个应用程序选择一个运行时(翻译)

    .Net Core是下一件大事吗?我已经使用了一段时间了,我倾向认为它是.事实上,我们推测,在2018年,对这项技术熟练的开发人员将会有巨大的需求.但是它和.Net Framework的区别是什么?你 ...

  4. UVa 122 Trees on the level（链式二叉树的建立和层次遍历）

    题目链接: https://cn.vjudge.net/problem/UVA-122 /* 问题 给出每个节点的权值和路线,输出该二叉树的层次遍历序列. 解题思路 根据输入构建链式二叉树,再用广度优 ...

  5. Docker镜像的获取和推送

    查找镜像 查找镜像的方法有主要有两种,一种是在Docker Hub官方网站查找,网址为https://hub.docker.com/ 另一种方法是在命令行界面中通过docker serach < ...

  6. VS - 未能找到与解决方案关联的源代码管理提供程序

    今天打开一个解决方案,Visual Studio出现了提示“未能找到与解决方案关联的源代码管理提供程序”,如图1所示:  图1 错误提示 单击“否”,发现解决方案已经不接受TFS的管理了. 注册表中H ...

  7. PCA算法Python实现

    源代码: #-*- coding: UTF-8 -*- from numpy import * import numpy def pca(X,CRate): #矩阵X每行是一个样本 #对样本矩阵进行中 ...

  8. mysql报错1105 -without an explicit primary key with pxc_strict_mode = ENFORCING or MASTER

    mysql报错1105 -without an explicit primary key with pxc_strict_mode = ENFORCING or MASTER. 在本地正常,但是在服务 ...

  9. 什么是Solr

    什么是Solr Lucene复习: 1.什么是lucene:全文检索工具包 2.Lucene的工作原理: 索引数据的创建 从原始文件中提取一些可以用来搜索的数据(封装成各种Field),把各field ...

  10. zookeeper3.4.5+Hbase1.2.6安装教程

    说明:在安装zookeeper+Hbase之前,我们应该已经将hadoop集群搭建好了(三个节点),并且验证启动成功.因为HBase是一种构建在HDFS之上的分布式.面向列的存储系*统. zookee ...