HDFS常用shell命令

【HDFS常用shell命令】的更多相关文章

HDFS 常用Shell命令

HDFS Shell命令概述 HDFS Shell命令允许使用命令行在HDFS存储中进行文件夹和文件操作. 如文件夹的增删改查.文件的增删改查等. 开始练习hadoop时,打开Linux之后要用 start-dfs.sh 启动HDFS. HDFS不是开机启动的常用命令命令格式 hdfs dfs -操作命令参数前面的[hdfs dfs -]部分是固定的,后面的[操作命令参数]部分是变化的命令练习(练习时可结合Hadoop站点观察操作结果) hdfs dfs -mkdir /abc…

注,其实常用命令不用网上搜,和linux下的命令很类似,触类旁通,直接在linux 上 hadoop fs 看一下就行了,不需要刻意去记我把 linux 上的 help 列举下,方便直接看吧,hdfs dfs 与 hadoop fs 效果一样常用的就是hdfs dfs -copyFromLocal /local/data /hdfs/data:将本地文件上传到 hdfs 上(原路径只能是一个文件)hdfs dfs -put /tmp/ /hdfs/ :和 copyFromLocal 区别是,pu…

Hadoop 学习之路（六）—— HDFS 常用 Shell 命令

1. 显示当前目录结构 # 显示当前目录结构 hadoop fs -ls <path> # 递归显示当前目录结构 hadoop fs -ls -R <path> # 显示根目录下内容 hadoop fs -ls / 2. 创建目录 # 创建目录 hadoop fs -mkdir <path> # 递归创建目录 hadoop fs -mkdir -p <path> 3. 删除操作 # 删除文件 hadoop fs -rm <path> # 递归删除…

Hadoop 系列（六）—— HDFS 常用 Shell 命令

一.基本命令打开 Hbase Shell: # hbase shell 1.1 获取帮助 # 获取帮助 help # 获取命令的详细信息 help 'status' 1.2 查看服务器状态 status 1.3 查看版本信息 version 二.关于表的操作 2.1 查看所有表 list 2.2 创建表命令格式: create '表名称', '列族名称 1','列族名称 2','列名称 N' # 创建一张名为Student的表,包含基本信息(baseInfo).学校信息(schoolInfo…

Hadoop HDFS的shell(命令行客户端)操作实例

HDFS的shell(命令行客户端)操作实例 3.2 常用命令参数介绍 -help 功能:输出这个命令参数手册 -ls 功能:显示目录信息示例: hadoop fs -ls hdfs://hadoop-server01:9000/ 备注:这些参数中,所有的hdfs路径都可以简写 -->hadoop fs -ls / 等同于上一条命令的效果 -mkdir 功能:在hdfs上创建目录示例:hadoop fs -mkdir -p …

原 HBase 常用Shell命令

HBase 常用Shell命令 1.进入hbase shell console $HBASE_HOME/bin/hbase shell 如果有kerberos认证,需要事先使用相应的keytab进行一下认证(使用kinit命令),认证成功之后再使用hbase shell进入 2.可以使用whoami命令可查看当前用户 hbase(main):001:0> whoami a6 (auth:SIMPLE) groups: staff, com.apple.sharepoint.group.1, ev…

HBase 安装与配置及常用Shell命令

HBase 安装与配置首要配置配置时间同步(所有节点上执行) yum -y install chrony vi /etc/chrony.conf #写入(7版本用server:8版本用pool): server time1.aliyun.com iburst 或 pool time1.aliyun.com iburst #保存配置并退出 systemctl enable --now chronyd systemctl status chronyd #执行后如果看到running则表示成功步…

Windows常用shell命令大全

Windows常用shell命令大全基于鼠标操作的后果就是OS界面外观发生改变, 就得多花学习成本.更主要的是基于界面引导Path与命令行直达速度是难以比拟的.另外Geek很大一部分是键盘控,而非鼠标流的. 整理Windows的常用Shell命令,一方面帮助深入学习Mysql,另一方面准备尝试过渡到Linux家族来. 一.Windows下Shell命令概述 Windows的Shell命令又是Windows的CMD命令.而cmd命令又是原来MS-DOS系统保留下来. Shell来源路径与配置对…

Linux Shell常用shell命令

Linux Shell常用shell命令一.文件.目录操作命令 1.ls命令功能:显示文件和目录的信息 ls 以默认方式显示当前目录文件列表 ls -a 显示所有文件包括隐藏文件 ls -l 显示文件属性,包括大小,日期,符号连接,是否可读写及是否可执行 ls -lh 显示文件的大小,以容易理解的格式印出文件大小 (例如 1K 234M2G) ls -lt 显示文件,按照修改时间排序 2.cd命令功能:改名目录 cd dir 切换到当前目录下的dir目录 cd / 切换到根目录 cd ..…

Ubuntu常用shell命令

目录 ls cd mkdir mv cp scp rm df du chmod chown chgrp head tail screen apt-get Ubuntu常用shell命令 Ubuntu作为Linux一个发行版,受到了很多用户的喜爱.正如绝大多数Linux发行版一样,shell是Ubuntu使用过程中的一大利器,特别是对于服务器用户来说,没有图形界面,所有的操作都只能依赖于shell指令完成.现在将我平时遇到的一些常见的shell指令总结如下,以备以后查找: ls 这或许是shell…

Windows常用shell命令大全（转）

[Windows常用shell命令大全] 基于鼠标操作的后果就是OS界面外观发生改变, 就得多花学习成本.更主要的是基于界面引导Path与命令行直达速度是难以比拟的.另外Geek很大一部分是键盘控,而非鼠标流的. 一.Windows下Shell命令概述 Windows的Shell命令又是Windows的CMD命令.而cmd命令又是原来MS-DOS系统保留下来. Shell来源路径与配置对应的命令资源配置在windows的环境变量中: Windows Shell命令是基于配置好的Path环境变量…

常用shell命令中你所不熟悉的参数

1. ls: 类似于dos下的dir命令 ls最常用的参数有三个: -a -l -F. ls –a Linux上的文件以.开头的文件被系统视为隐藏文件,仅用ls命令是看不到他们的,而用ls -a除了显示一般文件名外,连隐藏文件也会显示出来. ls –l 该参数显示更详细的文件信息. ls –F 使用这个参数表示在文件的后面多添加表示文件类型的符号,例如*表示可执行,/表示目录,@表示连结文件,这都是因为使用了-F这个参数.但是现在基本上所有的Linux发行版本的ls都已经内建了-F参数,也就…

Android_ADB 常用 shell命令和 sqlite3 简单增删改查

今天学习了一个ADB的常用命令.接下来简单使用几个常用ADB shell 命令. 首先我们得明白什么是adb.exe ADB -Android Debug Bridge, 是 Android sdk 里的一个工具,用这个工具可以直接操作管理 Android 模拟器或者真实的 Android 设备简单来说,ADB 是一个[客户端(pc)-服务器端(android)]程序. 当然,重要的一点是,你的 Android 设备得打开 USB 调试 ADB 的主要功能有: 1.运行设备的 shell(命令…

Mac下的常用Shell命令

今天介绍一下在Mac的终端中一些常用的Shell命令: 1.查看当前工作目录的完整路径 pwd (pwd的原意是:print work directiory,而不是密码password的意思,呵呵) 2.查看命令的详细帮助man 命令名比如要看看 pwd 命令的详细用法,执行 man pwd 3.列出文件ls 参数目录名例: 想看看跟目录下有什么,ls /想看看驱动目录下有什么,ls /System/Library/Extensions参数 -w 显示中文,-l 详细信息, -a 包括隐藏文件…

Windows常用shell命令

一.Windows的Shell命令又是Windows的CMD命令.而cmd命令又是原来MS-DOS系统保留下来二.Windows Shell命令是基于配置好的Path环境变量,对Shell命令在Path路径中依次从前至后搜寻到对应命名的可执行入口三.调出cmd窗口执行(ctrl+R)以下命令四.常用的工具五.常用管理配置工具六.高级配置管理七.网络配置ipconfig命令 1.显示连接配置 ipconfig /all 2.显示DNS缓存内容 ipconfig /displaydns…

Linux中常用Shell命令

本随笔文章,由个人博客(鸟不拉屎)转移至博客园写于:2018 年 05 月 04 日原地址:https://niaobulashi.com/archives/linux-shell.html --- 作为项目工程师,接触Linux还是蛮多的,总结下常用的Shell命令打包与解压项目上需要打包或者解压,常常用于备份或者上版,而打包常见格式为tar包.tar.gz包.war包这三种打.tar包:tar -cvf backup_20180504.tar ./etc ./src .tar包打.…

（转）HBase 常用Shell命令

转自:http://my.oschina.net/u/189445/blog/595232 hbase shell命令描述 alter 修改列族(column family)模式 count 统计表中行的数量 create 创建表 describe 显示表相关的详细信息 delete 删除指定对象的值(可以为表,行,列对应的值,另外也可以指定时间戳的值) deleteall 删除指定行的所有元素值 disable 使表无效 drop 删…

快速掌握mongoDB(一)——mongoDB安装部署和常用shell命令

1.mongoDB简介 mongoDB 是由C++语言编写的,是一种分布式的面向文档存储的开源nosql数据库.nosql是Not Only SQL的缩写,是对不同于传统的关系型数据库的数据库管理系统的统称. mongoDB是无模式的文档数据库,在关系型数据库中,数据表的每一行都拥有一样的字段,字段的名字和数据类型在创建table的时候就基本确定了,如student表的每一行都有学生编号.学生姓名.年龄等字段:而在mongoDB中,存储数据的格式类似于Json(格式为Bson),每一个docum…

数据分析常用shell命令

目录 0.vim编辑器 1.awk命令(重要) 1.1 基本语法 1.2 基本用法 1.3 运算符 1.4 内建变量 1.5 其他 1.6 awk是一门变成语言,支持条件判断.数组.循环等功能.所以我们也可以把awk理解成一个脚本语言解释器. 2.cat命令 3.head命令 4.tail命令 5.sort命令 6.uniq命令 7.wc命令 8.grep命令 9.join命令 10.sed命令 11.set命令 12.find命令 13.Linux下两个文件求交集.并集和差集 14.linux…

mongoDB(一)——mongoDB安装部署和常用shell命令

1.mongoDB简介 mongoDB 是由C++语言编写的,是一种分布式的面向文档存储的开源nosql数据库.nosql是Not Only SQL的缩写,是对不同于传统的关系型数据库的数据库管理系统的统称. mongoDB是无模式的文档数据库,在关系型数据库中,数据表的每一行都拥有一样的字段,字段的名字和数据类型在创建table的时候就基本确定了,如student表的每一行都有学生编号.学生姓名.年龄等字段:而在mongoDB中,存储数据的格式类似于Json(格式为Bson),每一个docum…

009 HDFS的shell命令（里面有一个安全模式）

一:dfs的命令 1.所有的领命 2.解释 -appendToFile <localsrc> ... <dst> :追加文件 -checksum <src> ... :检查HDFS文件是否损坏 -copyFromLocal [-f] [-p] <localsrc> ... <dst> :上传 -copyToLocal [-p] [-ignoreCrc] [-crc] <src> ... <localdst> …

常用shell命令实战

#!/bin/sh ################### #### 环境变量 ### ################### #主程序目录 #APP_HOME=/apps/svr/apache-tomcat-/webapps APP_HOME=/apps/svr/tomcat/webapps #要解析的文件目录 APP_JENKINS_HOME=/apps/$(date +%Y%m%d) APP_ROOT=XX APP_NAME_01=XXX_01 APP_NAME_02=XXX_01 APP…