看文件信息 hadoop fsck /user/filename 更详细的 hadoop fsck /user/filename -files  -blocks -locations -racks   -files  文件分块信息, -blocks    在带-files参数后才显示block信息 -locations   在带-blocks参数后才显示block块所在datanode的具体IP位置, -racks       在带-files参数后显示机架位置…
Linux查看目录中的文件 youhaidong@youhaidong-ThinkPad-Edge-E545:~$ ls examples.desktop jdk 公共的 视频 文档 音乐 java workspace 模板 图片 下载 桌面 youhaidong@youhaidong-ThinkPad-Edge-E545:~$ ls -F examples.desktop jdk/ 公共的/ 视频/ 文档/ 音乐/ java/ workspace/ 模板/ 图片/ 下载/ 桌面/…
题目是这样的,Linux中一个文件10行内容,如何输出5-8内容到屏幕首先我们模拟一下这样的环境: [root@localhost question]# pwd /root/question [root@localhost question]# seq > q.txt [root@localhost question]# cat q.txt 我们的任务是取5-8行输出: 第一种方法: [root@localhost question]# sed -n '5,8p' q.txt 第二种方法: [r…
lsof | grep /lib64/libc-2.12.so | wc   == 查看打开了一个文件的有哪些进程 lsof | awk '{print $2,$1}' | sort | uniq -c | sort -rn | less  == 统计那个进程打开的文件最多…
如果你使用Linux比较长时间了,那你就知道,在对待设备文件这块,Linux改变了几次策略.在Linux早期,设备文件仅仅是是一些带有适当的属性集的普通文件,它由mknod命令创建,文件存放在/dev目录下.后来,采用了devfs, 一个基于内核的动态设备文件系统,他首次出现在2.3.46内核中.Mandrake,Gentoo等Linux分发版本采用了这种方式.devfs创建 的设备文件是动态的.但是devfs有一些严重的限制,从2.6.13版本后移走了.目前取代他的便是文本要提到的udev--…
查看文件状态 stat ls 命令能够查看文件的类型.时间.属主.属组,大小以及最近的修改时间等信息,但是还有一些文件的扩展属性,是使用 ls 命令无法查看到的 stat 命令则用于显示文件的详细属性 面试题:linux操作系统中,一个文件的MAC time代表什么意思,如何查看一个文件的MAC time? access time:表示我们最后一次访问(仅仅是访问,没有改动)文件的时间 modify time:表示我们最后一次修改文件的时间 change time:表示我们最后一次对文件属性改变…
出现这个问题, 我首先去找了一下几个问题: 1.文件是否是utf-8 2.上传到Linux中的hadoop, 在Linux下去查看是否乱码 3.上面都没有问题, 就去检查eclipse,将项目工程改成了utf-8, 发现不行 4.看了一下的介绍, 将eclipse的系统设置改成了uft-8, 就可以了 eclipse中UTF-8设置 1.windows->Preferences   打开"首选项"对话框: 2.然后,general->Workspace,右侧Text fil…
ls -l --block-size=M   #就把目录下的所有文件按M单位呈现…
1,文件结构 · bin:脚本和命令目录. · etc:配置文件目录. · sbin:命令目录,主要包含HDFS和YARN中各类服务的启动和关闭,依赖于bin中的脚本. · share:各个模块编译后的jar包,和示例代码. · libexec:各个服务的shell配置文件目录,比如配置日志输出目录.启动参数等. · include:对外提供的头文件,由C++定义. · lib:对外的动态库,与include 对应.   2,core-default.xml ··· hadoop的默认配置文件,…
我的hadoop集群部署在自己电脑虚拟机上,有时候我是挂起虚拟机,第二天再打开发现有些线程就挂了,比如namenode,好奇怪,当时看了一些帖子说是和pid存储有关,找到log看到找不到pid.因为基于java开发的程序,想要停止程序,必须通过进程pid来确定,而hadoop和hbase默认的情况下,会把pid文件存储在Linux上的/tmp目录的某个目录,进程名命令规则一般是框架名-用户名-角色名.pid,而默认情况下,linux的tmp里面的东西,一天会删除一次. 其实每次不用的时候挂壁,用…