《OD学hadoop》第一周0625
一、实用网站
1. linux内核版本 www.kernel.org
2. 查看网站服务器使用的系统 www.netcraft.com
二、推荐书籍
1. 《Hadoop权威指南》
1-3版: Hadoop1系列
4版(目前仅有英文原版):Hadoop2系列
yarn高可用性,HA
2. 《Hive权威指南》
3. 《MapReduce设计模式》
4. 《HBase权威指南》
5. 《鸟哥的Linux私房菜》
6. 《Vim使用技巧》、《学习vi和Vim编辑器》
三、Linux基础
无线网密码: kang1234
1. centos用户名密码 root 123456
2. 常用命令
1)ifconfig查看网络信息
清屏 clear 或者ctrl+l
2)Linux系统下设置静态IP或自动获取动态IP的简单方法
vi /etc/sysoconfig/network-scripts/ifcfg-eth0
DNS1=192.168.189.2(网关地址)
service network restart
more /etc/resolv.conf
mac中的linux需要修改mac地址
vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=bigdata-senior01.ibeifeng.com
ping通外网需要增加DNS
3)copy的Linux虚拟机网卡问题
http://www.dabu.info/vmware-clone-or-copy-the-linux-virtual-machine-eth0-not-find-the-solution-vmware-copy-copy-or-clone-clone-no-card-rpm.html
http://www.cnblogs.com/yiru/archive/2012/12/03/2799079.html
4)远程连接
SecurityCRT,xshell,xmanager, filezilla, notepad++
5)linux一切皆文件,目录也是文件
6)etc目录
ls -la /etc/
more
ONBOOT=yes
BOOTPROTO=none、DHCP、static(实际工作用的较多)
7)root目录
root用户的主目录(家目录)
8)home目录
9)bin sbin
10)boot 系统启动时加载的文件
11)ls命令
ls -l (long)
ls -a (all)
ls -la
ls -d 查看目录本身属性
ls -ld
12)mkdir
mkdir -p 级联创建目录
13)touch
touch "program files" 创建带空格的文件
14)rmdir
rmdir 删除空的目录
15)
rm 删除一个文件
rm -r 删除一个目录,有提示
rm -rf 删除非空目录,无提示
16)cp
cp -r
17)mv
18)
增:
删:
改:
cat:
more: 分页显示 空格分页查看,回车逐行查看
head: 查看文件开始行 head -n
tail:查看文件末尾行 tail -n
find: 查找
第一种:根据文件名来查找
在搜索的时候,尽量缩小搜索的范围,减少搜索的时间和资源消耗。
* 代表任意字符
? 代表任意单个字符
find / -name init
find /etc/ -name init
find /etc/ -name *init*
find /etc/ -name init*
find /etc/ -name init???
-i 不区分大小写
find /etc/ -iname init???
第二种,根据文件的大小来查找
find / -size
+ 表示大小
- 表示小于
不加 表示等于
-size 后面跟的大小是按照数据块的大小来进行缓存的
Linux中数据块大小是512字节,0.5K
100MB, 1MB = 1024KB, 100MB = 102400 KB
find / -size +204800
第三种,根据文件所有者查找
find /root/ -user root
第四种,根据文件所有组查找
find /root/ -group root
-a and
-o or
-type f d
大于80M且小于100M
find /etc/ -size +163860 -a -size -204800
小于80M或者大于100M
find /etc/ -size -163860 -o -size +204800
find /etc/ -name init* -a -type f
19) Linux权限
drwxr-xr-x
d 代表data,表示目录,可以理解为一个占位符
rwx: 所有者(user,u)
r-x:所属组(group, g)
r-x: 其他人(other, o)
r: 读 cat、head、more、tail
w: 写 mkdir、touch、vi、rm、cp、mv
x:执行 cd
第一种用字母表示: u,g,o
第二种用数字表示:
r:4
w:2
x: 1
-rwxr-xr-x 755
-rw-r--r-- 644
示例:
(1)用字母赋予权限
修改权限命令:chmod
赋予权限用加号+表示:chmod u+x program
同时赋予权限 chmod g+x,o+x program
撤销权限chmod g-x progam
(2)用数字赋予权限(工作中用数字较多)
chmod 777 program
(3)目录有权限,则目录中的文件也会有文件
20)
root:x:0:0:root:/root:/bin/bash
每一列以冒号隔开,其中第三列和第四列:UID和GID
组:teacher组中t1,t2,t3...
cat /etc/passwd
cat /etc/group
创建用户: user add xxx
创建组: groupadd xxx
设置密码:
第一种设置密码方式 passwd username
第二种设置密码方式 echo 'beifeng' | passwd --stdin username
不仅切换了用户而且联通shell环境也一起切换: su - username
切换的仅仅是用户: su username
id root
uid=0(root) gid=0(root) groups=0(root)
uid=500(beifeng) gid=500(beifeng) groups=500(beifeng)
删除用户:
userdel username
userdel -r username
sudo username
21)man
man visudo
man 5 sudoers
四、VI编辑器
1. VI的三种模式
(1)命令模式
esc 进入命令模式
(2)插入模式
(3)最后行模式
shift + :
w 写入保存
q 退出
wq 保存并退出
! 强制操作
q! 不保存修改直接退出
2. 快捷键
(1)光标快速移动到最后一行 大写G
(2)显示行数 shift + : set nu
(3)光标快速移动到第一行 小写gg
(4)删除光标所在行 小写dd
(5)删除多行,比如三行,小写3dd
(6)撤回修改 小写u
(7)粘贴 小写p
(8)赋值,复制yy
(9)替换,:1$s/nologin/88888/g
1代表第一行
$代表最后一行
s代表替换
/nologin 被替换内容
/88888 替换内容
g代表通行替换
1,$ 就是一个范围,
《OD学hadoop》第一周0625的更多相关文章
- 《OD学hadoop》第一周0625 LINUX作业一:Linux系统基本命令(一)
1. 1) vim /etc/udev/rules.d/-persistent-net.rules vi /etc/sysconfig/network-scripts/ifcfg-eth0 TYPE= ...
- 《OD学hadoop》第一周0626 作业二:Linux基础
一.打包压缩 知识点: tar -zxvf -C PATH tar -jxvf tar -zcvf tar -jcvf tar:打包命令 -z 打包同时gzip压缩 -j 打包同时bzip2 -c 打 ...
- 《OD学hadoop》第一周0626
一.磁盘管理 Linux添加新硬盘.分区.格式化.自动挂载 http://lxsym.blog.51cto.com/1364623/321643 给Linux系统新增加一块硬盘 http://www. ...
- 《OD学hadoop》第二周0703
hdfs可视化界面: http://beifeng-hadoop-01:50070/dfshealth.html#tab-overview yarn可视化界面: http://beifeng-hado ...
- 《OD学hadoop》第二周0702
大数据离线计算hadoop2.x 三周(6天) markdown文本剪辑器 罗振宇--跨年演讲,时间的朋友 http://tech.163.com/16/0101/11/BC87H8DF000915B ...
- 《OD学hadoop》第三周0710
一.分布式集群安装1. Hadoop模式本地模式.伪分布模式.集群模式datanode 使用的机器上的磁盘,存储空间nodemanager使用的机器上的内存和CPU(计算和分析数据) 2. 搭建环境准 ...
- 《OD学hadoop》第三周0709
一.MapReduce编程模型1. 中心思想: 分而治之2. map(映射)3. 分布式计算模型,处理海量数据4. 一个简单的MR程序需要制定map().reduce().input.output5. ...
- 《OD学hadoop》第四周0716
7.16 一.回顾 二.HDFS Federation(联盟) Hadoop 2.2.0发布新特性 很多的大公司都在使用:BAT HDFS Federation + HDFS HA架构 互相隔开,但是 ...
- 2017-2018-1 我爱学Java 第一周 作业
构建之法 成员及分工 内容简介 作者简介 分章学习及问题 第一章 概论 第二章 个人技术和流程 第三章 软件工程师的成长 第四章 两人合作 第五章 团队和流程 第六章 敏捷流程 第七章 实战中的软件工 ...
随机推荐
- 查看Centos系统信息命令
linux命令行具有强大的功能,我们安装vps后,首先应该知道系统信息,查看这些信息,你会发现Linux命令很简单,你可以按照下面的命令练习. linux系统信息 # uname -a # 查看内核/ ...
- Hello world,Hello 2015,Bye 2014
序 在我写下“在”这个字的时候已经是2014-12-31 19:59,14年最后一天了,总觉得不写点东西祭奠一下那些被自己虐死的脑细胞,心里就不舒服. 那就从生活,工作,学习三个方面,总结一下吧. 生 ...
- JS This关键字
http://www.ruanyifeng.com/blog/2010/04/using_this_keyword_in_javascript.html http://www.cnblogs.com/ ...
- 还原TexturePacker plist 文件以及图片的方法 (切开各小图片)
原地址:http://blog.csdn.net/linuxchen/article/details/16865645 Python 脚本:(来自网络) unpack_plist.py 命令行: py ...
- uva 11090
I I U P C 2 0 0 6 Problem G: Going in Cycle!! Input: standard input Output: standard output You are ...
- (0)图像处理opengl 写在前面的话
项目2,终于要开始了 很多波折,都不想说了 开始吧 以下内容参考网上资料 OpenGL(Open Graphics Library)是一个跨编程语言.跨平台的专业图形程序接口. OpenGL是SGI公 ...
- C++ std命名空间
1.命名空间是一种特殊的作用域,它包含了处于该作用域中所有标示符.命名空间使用namespace 来声明,并使用{}来界定命名空间的作用域,例如: namespace func{ int val=0; ...
- hdu 4112 Break the Chocolate(ceil floor)
规律题: #include<stdio.h> #include<math.h> #define eps 1e-8 int main() { int _case; int n,m ...
- IIS7 ASP.NET 未被授权访问所请求的资源
IIS7 ASP.NET 未被授权访问所请求的资源 ASP.NET 未被授权访问所请求的资源.请考虑授予 ASP.NET 请求标识访问此资源的权限. ASP.NET 有一个在应用程序没有模拟时使用的基 ...
- android-exploitme(八):内存保护
如果一个手机被锁屏了,但是有个app还在后台运行,这个时候你想知道些app的信息,需要分析他的内存状态. 1. 首先运行模拟器,打开emm,使得模拟器返回锁屏状态 2. 打开ddms,下载内存文件