Linux配置Hadoop 常用的命令】的更多相关文章

uname -a 看主机位数 ip a 看IP地址 vi /etc/sysconfig/network 改主机的名字 vi /etc/hosts 改映射关系 vi /etc/sysconfig/network-scripts/ifcfg-eth0 改网卡配置 vi /etc/profile 改环境变量配置 scp -r /cloud/hadoop-2.2.0 root@192.168.231.139:/cloud/hadoop-2.2.0   传递文件…
linux配置网卡IP地址命令详细介绍及一些常用网络配置命令2010-- 个评论 收藏 我要投稿 Linux命令行下配置IP地址不像图形界面下那么方 便,完全需要我们手动配置,下面就给大家介绍几种配置的方法: 即时生效(重启后失效): ifconfig eth0 192.168.1.102 netmask 255.255.255.0 //添加IP地址 route add default gw 192.168.1.1 //添加网关 启动生效: vim /etc/sysconfig/network-…
HBase 安装与配置 首要配置 配置时间同步(所有节点上执行) yum -y install chrony vi /etc/chrony.conf #写入(7版本用server:8版本用pool): server time1.aliyun.com iburst 或 pool time1.aliyun.com iburst #保存配置并退出 systemctl enable --now chronyd systemctl status chronyd #执行后如果看到running则表示成功 步…
日常开发,上线的服务器系统一般都是Linux系统,所以,熟练的掌握常用的命令操作就尤其的重要了 1) 查看某个服务的运行情况 (例如Redis) ps -ef | grep redis //e-显示程序使用的环境变量 f-显示UID,PPIP,C与STIME栏位 2) 查看某个端口是否在监听 netstat -lntp | grep 6379 //查看监听的端口的程序 netstat -anp | grep 9501 Redis (1) 开启客户端连接Redis redis-cli (2) 退出…
(一)常用压缩命令 (1)gzip命令 (2)gunzip命令 (3)tar命令 (4)zip命令 (5)unzip命令 (6)bzip2命令 (7)bunzip2命令 (一)常用压缩命令 (1)gzip命令 命令名称:gzip命令英文原意:GNU zip命令所在路径:/bin/gzip执行权限:所有用户语法:gzip 选项  [文件]功能描述:压缩文件压缩后文件格式: .gz 例子:gzip  file1 1.只能压缩文件,不能压缩目录2.不保留原文件 (2)gunzip命令 命令名称:gun…
Hadoop常用启停命令 最近在装大数据环境,不知由于年纪大的问题还是笨的缘故,老师记不住一些常用命令,在这里就单独记一下Hadoop常用的启停命令.Hadoop常用的启停命令都在hadoop/sbin/ 目录中,可以将这个目录添加到环境变量中,后面就可以直接在任意路径下运行启停命令.下面就具体说说这些命令: start-all.sh 启动所有的Hadoop守护进程.包括NameNode. Secondary NameNode.DataNode.JobTracker. TaskTrackstop…
(一)常用网络通信命令 (1)ping命令 (2)write命令 (3)wall命令 (4)ifconfig命令 (5)shutdown命令 (6)reboot命令 (二)shell简单应用技巧 (1)命令补齐 (2)命令历史 (3)命令别名 (4)输入/输出重定向 (5)管道 (6)命令连接符 (7)命令替换符 (一)常用网络通信命令 (1)ping命令 网络通信指令:ping指令所在路径:/usr/sbin/ping执行权限:root语法:ping 选项 ip地址-c 指定ping的次数-s…
①安装虚拟机 ②为虚拟机添加共享文件 右击已经安装好的虚拟机 设置—>选项—>共享文件 ③配置映射 sudo nano /etc/network/interfaces   重启网络:sudo /etc/init.d/networking restart(如果网络重启失败则重启虚拟机:sudo reboot) sudo nano /etc/hostname s100 sudo nano /etc/hosts 192.168.154.100 s100 在windows下c:/windows/sys…
配置和管理msyql: 1. 修改mysql最大连接数:cp support-files/my-mediuf,vim my.cnf,增加或修改max_connections=1024 关于my.cnf:mysql按照下列顺序搜索my.cnf:/etc,mysql安装目录,安装目录下的data./etc下的是全局设置. 2. 启动mysql:/usr/local/mysql/bin/mysqld_safe --user=mysql & 查看mysql版本:mysqladmin -u root -p…
1.日志查询: 用户可使用以下命令在指定路径下查看历史日志汇总$ bin/hadoop job -history output-dir 这条命令会显示作业的细节信息,失败和终止的任务细节. 关于作业的更多细节,比如成功的任务,以及对每个任务的所做的尝试次数等可以用下面的命令查看$ bin/hadoop job -history all output-dir…
注意 ubuntukylin-14.04.2-desktop-amd64 自带python2.7.6 这个说的比较详细 http://wenku.baidu.com/link?url=gaeFcQrc0puJjy7krNcq0Nbp5lmeEZbAlMW82Br6GRRdvYTRx_TlFwlCfBqKE95dIh-x1jn0h8XQS3irlNhegnpAwiciSd8UZnUHBaEZZ8q(Linux下安装python) ----------------------------------…
1. 查看系统内核版本 [root@funsion geekxa]# cat /etc/issue CentOS release 6.5 (Final) Kernel \r on an \m 显示了系统名称(CentOS)和内核版本(release 6.5)The file /etc/issue is a text file which contains a message or system identification to be printed before the login promp…
列出一些手头分分钟要用到的命令. 1.df -h 用来查看各个分区的大小 2.du -h --max-depth=0 /data2/xijun.gong/tt_data 用来查看文件夹的大小,并指定递归的深度. 同时也可以对目录进行排序,比如:du -hs * | sort -h 按大小排序 3. chmod u+wr,g+r,o=r  data.txt  对文件进行权限修改,用户增加读写权限,群组增加读权限,其他指定读权限.详细介绍可以看看这里:http://www.chinaunix.net…
1)linux命令太多,有时候记不起来是哪个,为了方便大家查询,自己吐血整理了以下这些,转载时请标明出处,珍惜原创成果 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜) 吐血自己整理,且用且珍惜)…
虚拟机版本默认用户root 密码toor ls:显示当前目录包含的文件及文件夹 ls -l:以常规格式显示当前目录包含的文件及文件夹(开头字母解释:d:目录 -:文件 c:设备文件 l:链接 b:块设备,如硬盘分区) ls -a:显示隐藏文件(以.开头) ls-lh:以适合阅读的常规格式显示当前目录包含的文件及文件夹 ls -lh --sort=size:按照文件大小排序(=time:时间) cd /media:进入media目录(.:当前目录 ..:上级目录  直接使用cd进入用户主目录~#)…
1)关闭禁用防火墙: /etc/init.d/iptables status 会得到一系列信息,说明防火墙开着. /etc/rc.d/init.d/iptables stop 关闭防火墙 2)禁用SELinux: 查看SELinux状态: 1./usr/sbin/sestatus -v      ##如果SELinux status参数为enabled即为开启状态 SELinux status:                 enabled 2.getenforce              …
date:时间管理,可以显示.修改系统时间.  设定时间:格式:MMDDhhmm[[cc]yy][.ss]其中MM为月分,DD为日期,hh为小时,mm为分钟,CC为年的前两位 YY为年分的后两位,.ss为秒.  选项:   -d:后面跟string类型的字符串,必须用双引号括起来.   -r:显示文件最后修改的时间   -s:设置指定的时间.后面跟string类型字符串.   -f:对文件的每一行做date -d操作.   -u:输出或设置utc时间.  格式:   %a:缩写的星期名   %A…
hadoop job -list 列出正在运行的job hadoop job -kill kill掉job hadoop fsck 检查HDFS坏快 hadoop dfsadmin -report检查HDFS状态包括NN信息 hadoop dfsadmin -safemode enter|leave 安全模式的进出 hadoop distcp URL 集群之间的拷贝 ./bin/start-balancer.sh 平衡集群文件…
查看当前系统JAVA的安装路径: echo $JAVA_HOME: 查看内核版本: uname -a ubuntu的防火墙 关闭:ufw disable开启:ufw enable 卸载了 iptables apt-get remove iptables 关闭ubuntu中的防火墙的其余命令 iptables -P INPUT ACCEPT iptables -P FORWARD ACCEPT iptables -P OUTPUT ACCEPT iptables -F ubuntu安装 ssh 服…
1.在内核或uboot目录下搜索相关内容/文件名时:grep "USB" * -nR find -name "*USB*" 2.查看系统中设备 cat  /proc/devices 3.查看系统时间(RTC) date /* 显示系统时间 */ date 123015402011.30 /* 设置系统时间 date [MMDDhhmm[[CC]YY][.ss]] */ hwclock -w /* 把系统时间写入RTC */ 短电,重启,执行date ( 参考RTC驱…
一.文件管理命令 1.cp命令,copy a.单源复制,cp [OPTION]... [-T] SOURCE DEST 如果DEST不存在:则事先创建此文件,并复制源文件的数据流至DEST中. 如果DEST存在: 如果DEST是非目录文件则覆盖目标文件,如果DEST是目录文件则先在DEST目录下创建一个与源文件同名的文件,并复制其数据流至目标文件. b.多源复制 cp [OPTION]... SOURCE... DIRECTORY cp [OPTION]... -t DIRECTORY SOUR…
1.时时查看tomcat启动信息,首先切换到tomcat的logs目录下 tail -f catalina.out 2.在tomcat的bin目录下启动无权限,需要赋权 chmod 777 *.sh 3.查看tomcat启动的信息 ps -ef|grep tomcat 4.PID杀死进程 kill -9 pid 5.开放端口 iptables -I INPUT -p tcp --dport 8080 -j ACCEPT 6.关闭端口 iptables -A OUTPUT -p tcp --dpo…
mv : 用于移动文件或目录,  也可以用于重名文件和目录 touch : 创建新文件, 也可以修改文件的时间标签 mkdir :  创建目录 rm : 删除文件或目录 cd : 切换到指定的目录 ls : 显示指定目录(没指定路径就是当前目录)中的文件及目录…
1): 查询目录下的文件 查询根目录: 查询文件夹下的文件: 2):创建文件夹 3):上传本地文件到HDFS中 上传多个文件: 4):删除文件 5):删除文件夹 6):从HDFS中复制文件到本地 7):查询文件内容 8):移动HDFS中的文件 9):检查文件系统健康情况 10):复制HDFS中的文件 11):显示目录文件大小 如果是目录,则显示总大小: 12):清空回收站…
linux系统中常用的命令如下(以后经常补充): cd ..   返回上一级 cd use  进入use目录…
cd命令 功能是切换到指定的目录:命令格式:cd [目录名]有几个符号作为目录名有特殊的含义:"/"代表根目录.".."代表上一级目录."~"代表HOME目录."-"代表前一目录 实例跳到 /usr/bin/ :cd /usr/bin跳到自己的 home 目录 :cd ~跳到目前目录的上上两层 :cd ../.. ls命令 是Linux下最常用的命令之一,ls跟dos下的dir命令是一样的都是用来列出目录下的文件,下面我们就来…
本文主要介绍 Hadoop 常用的命令. test命令 用于检测文件或目录是否存在,判断文件或目录大小. -test -[defsz] <path> : Answer various questions about <path>, with result via exit status. -d return if <path> is a directory. -e return if <path> exists. -f return if <path&…
1, mkdir命令 mkdir用来创建指定名称的目录,要求创建目录的用户在当前目录中具有写权限,并且指定的目录名不能是当前目录中已有的目录. (1)     命令格式:mkdir [选项] 目录 (2)     命令功能:在指定位置创建指定文件名命名的文件夹或目录,要创建文件夹或目录的用户必须对所创建的文件夹的父文件夹具有写权限,且同一个目录下不能有重名的. (3)     命令参数: -m,--mode模式 设定权限<模式>(类似chmod),而不是rwxrwxrwx -p,--paren…
作为程序猿,熟悉一些unix/linux命令行是非常必要的,因为部署服务的服务器现在基本上用的都是unix/linux系统,很少在windows上部署服务的. 今天我们就介绍一些在linux上的文件系统结构和基本操作命令. 命令:ls/chmod/chown/rm/find/ln/cat/mount/mkdir/tar/gzip 好了,开始吧. 1.ls命令 ls == list,根据不同的选项,列举指定目录或文件的相关信息,是Unix/Linux下最常用的命令之一,cd到某一目录下后执行的第一…