Hadoop文件系统常用命令】的更多相关文章

1.查看指定目录下内容 hadoop dfs –ls [文件目录] eg: hadoop dfs –ls /user/wangkai.pt 2.打开某个已存在文件 hadoop dfs –cat [file_path] eg:hadoop dfs -cat /user/wangkai.pt/data.txt 3.将本地文件存储至hadoop hadoop fs –put [本地地址] [hadoop目录] hadoop fs –put /home/t/file.txt  /user/t   (f…
FROM : http://www.2cto.com/database/201303/198460.html hadoop hdfs常用命令   hadoop常用命令:  hadoop fs  查看Hadoop HDFS支持的所有命令    hadoop fs –ls  列出目录及文件信息    hadoop fs –lsr  循环列出目录.子目录及文件信息    hadoop fs –put test.txt /user/sunlightcs  将本地文件系统的test.txt复制到HDFS文…
Linux文件系统常用命令 目录 df命令 du命令 fsck命令 dump2fs命令 df命令 df命令 统计文件系统的占有情况,分区用了多少空间,还剩多少空间 df [选项] [挂载点] 选项: -a 显示所有的文件系统信息,包括特殊文件系统,如/proc./sysfs -h 使用习惯单位显示容量,如KB.MB或GB等 -T 显示文件系统类型 -m 以MB为单位显示容量 -k 以KB为单位显示容量.默认就是以KB为单位 du命令 为什么不使用ls查看: ls命令只能查看目录下文件和子目录的文…
引言:我们维护hadoop系统的时候,必不可少需要对HDFS分布式文件系统做操作,例如拷贝一个文件/目录,查看HDFS文件系统目录下的内容,删除HDFS文件系统中的内容(文件/目录),还有HDFS管理信息,单独启动停止 namenode  datanode  jobtracker  tasktracker等等一系列的操作.大家跟着做一遍呢!就会对HDFS的体系架构有更加深入的理解,不多说我们开始吧.环境操作系统:centos 6.0hadoop版本:0.20.2部署目录:/home/grid/h…
通过前面两篇博客,我们介绍了Linux系统的权限管理.Linux权限管理之ACL权限 介绍了通过设定 ACL 权限,我们为某个用户指定某个文件的特定权限,这在Linux只能对于一个文件只能有所有者权限,所属组权限和其他人权限时,设定 ACL 权限,能额外的为某个特定的用户设定权限.然后对于 文件系统系统属性chattr权限和sudo命令 ,chattr 命令能设定文件的系统属性,超级用户也能被限制,这个命令能更好的保护文件和目录不被破坏:而另一个命令 sudo,超级管理员赋予普通用户执行系统命令…
一.硬盘结构 1.硬盘的逻辑结构 硬盘的大小是使用"磁头数×柱面数×扇区数×每个扇区的大小"这样的公式来计算的.其中磁头数(Heads)表示硬盘总共有几个磁头,也可以理解成为硬盘有几个盘面,然后乘以二:柱面数 (Cylinders)表示硬盘每一面盘片有几条磁道:扇区数(Sectors)表示每条磁道上有几个扇区:每个扇区的大小一般为 512Byte.扇区也是磁盘的最小存贮单位. 2.硬盘接口 IDE 硬盘接口(Integrated Drive Electronics,并口,即电子集成驱动…
一.df(文件系统查看命令) [root@localhost ~]# df [选项] [挂载点] 选项: -a 显示所有的文件系统信息,包括特殊文件系统,如 /proc. /sysfs -h 使用习惯单位显示容量,如KB, MB或GB等 -T 显示文件系统类型 -m 以MB为单位显示容量 -k 以KB为单位显示容量.默认就是以KB为单位   二.du(统计目录或文件大小) [root@localhost ~]# du [选项] [目录或文件名] 选项: -a 显示每个子文件的磁盘占用量.默认只统…
文件系统查看命令df df:查看分区,单位默认是KB df -h 统计目录或文件大小du du /etc/:会列出/etc/目录下的所有子目录所占的空间,最后给出/etc/目录的大小,属于高负载命令,在服务器高负载时段慎用 du -h /etc/ du -sh /etc/:只查看目录的大小,而不看子目录的大小 du命令和df命令看到的根分区大小不同,df看到的大,因为df命令是从文件系统考虑的,不光会考虑文件占用的空间,还会统计被命令或程序占用的空间,最常见的就是文件已经删除,但是程序并没有释放…
注:hadoop的使用命令包含 hadoop fs 开头 or hdfs dfs开头 等多种形式来操作. 这里以hadoo fs的形式来介绍在这些命令 1.列出根目录下所有的目录或文件 hadoop fs -ls / 2.列出/user目录下的所有目录和文件 hadoop fs -ls /home 3.列出/user目录及其子目录下的所有文件 hadoop fs -ls -R /home 4.创建/soft目录 hadoop fs -mkdir /soft 5.创建多级目录 hadoop fs…
一.文件系统查看命令df df [选项] [挂载点] -a 查看所有文件系统信息,包括特殊文件系统 -h 使用习惯单位显示容量 -T 显示文件系统类型 -m 以MB为单位显示容量 -k 以KB为单位显示容量 注:df命令是从文件系统考虑的,不光要考虑文件占用的空间,还要统计被命令和程序占用的空间             (最常见的是文件已经被删除,但是程序并没有释放空间) 二.统计目录或文件大小du du [选项] [目录名或文件名] -a 显示每个子文件的池畔占用量 -h 使用习惯单位显示磁盘…