hadoop01
RPC:异步系统的调用,webservice是RPC的一种。webservice用于不在同一个公司的系统调用,同一个公司用socket调用。就是RPC。
Dubbo淘宝的RPC框架。
Hadoop rpc是hadoop自带的RPC框架。 阿里云就是虚拟机。虚拟机可以安装linux,unix,macos系统。 虚拟机网络连接方式不用桥接用NAT,桥接的时候在不同的地方需要更改虚拟机的地址,NAT不用更改虚拟机地址。 Linux的分区不像windows一样,分区之后就可以看到盘,linux分区之后是/里面的文件夹指向不同的盘。Boot分区指向的就是一块硬盘,linux所有的盘都是挂载在文件夹下面的。/bin是一些可执行的命令,windows的cmd、dir是命令也是程序exe文件。/boot是启动的一些相关。/dev是设备硬件。/etc是配置文件,都是约定俗称的,当然也可以改。 Linux里面的配置是文本文件,windows里面还要改注册表。 /home是用户目录,比如windows的我的文档。里面有用户名的文件夹。/lib是库文件,Linux是c语言开发的,里面都是C语言的头文件和动态链接库。Yum跟maven一样会自动下载,不用maven找不到包就报错而maven会去下载。/media是外置媒体,U盘光盘光驱挂载到media里面,linuc没有光驱这个盘都要挂载到文件系统里面去,也可以挂载到别的地方。/usr是不同的人都需要用的软件就装到这个里面。/sbin是系统管理的命令,跟bin差不多。/temp程序在工作的时候会生成临时数据。 路由器、交换机、网桥都是网络设备,路由器的功能是最强的。IP的配置是由网关决定的,路由器交换机是网关,网关有IP地址,网关ip是192.168.33.1,电脑的IP是192.168.33.2-254,255是广播地址,0-255是因为是8位2的8次方。子网掩码是看属于那个网段的,子网掩码和IP地址进行与操作出来的是网段192.168.33.0,不同电脑网段相同则是同一个网段。 DNS是域名解析服务器。DNS在每个省都有的。虚拟机里面的虚礼网卡对于linux系统而言是真实的网卡。
用SCR用SSH协议连接linux的时候,linux上面有sshd的服务端才可以连接,默认linux就有这个服务。
1. 修改Linux的基本配置
**IP地址配置,最简单的一种,在命令运行 setup,带提示,按照提示修改即可
1.修改主机名
vi /etc/sysconfig/network
NETWORKING=yes HOSTNAME=server1.itcast.cn |
2.修改ip地址
vi /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0 TYPE=Ethernet ONBOOT=yes #是否开机启用 BOOTPROTO=static #ip地址设置为静态 IPADDR=192.168.0.101 NETMASK=255.255.255.0 |
service network restart
3.修改ip地址和主机名的映射关系
vi /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 ::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 192.168.0.101 server1.itcast.cn |
4.关闭iptables并设置其开机启动/不启动
service iptables stop
chkconfig iptables on
chkconfig iptables off
1. 安装JDK
1.上传jdk-7u45-linux-x64.tar.gz到Linux上
2.解压jdk到/usr/local目录
tar -zxvf jdk-7u45-linux-x64.tar.gz -C /usr/local/
3.设置环境变量,在/etc/profile文件最后追加相关内容
vi /etc/profile
export JAVA_HOME=/usr/local/jdk1.7.0_45 export PATH=$PATH:$JAVA_HOME/bin |
4.刷新环境变量
source /etc/profile
5.测试java命令是否可用
java -version
1. 安装Tomcat
1.上传apache-tomcat-7.0.68.tar.gz到Linux上
2.解压tomcat
tar -zxvf apache-tomcat-7.0.68.tar.gz -C /usr/local/
3.启动tomcat
/usr/local/apache-tomcat-7.0.68/bin/startup.sh
4.查看tomcat进程是否启动
jps
5.查看tomcat进程端口
netstat -anpt | grep 2465
6.通过浏览器访问tomcat
SSH免密登陆:ssh是远程登陆协议,
公钥和私钥是2个文件,公钥要A的身份验证信息,把公钥复制一个给B,B给A的公钥加入授权列表(也是一个文件)。别人可以把A的公钥拿过去冒充,B用A的公钥把随机字符串加密发送给A,A用私钥解密,解密完了之后把明文发给B,B进行验证之后成功就登陆了。
hadoop01的更多相关文章
- Hadoop01的主要总结
Hadoop (离线) 分布式的计算框架 scala---spark(实时计算框架)
- Hadoop-01 搭建hadoop伪分布式运行环境
Linux中配置Hadoop运行环境 程序清单 VMware Workstation 11.0.0 build-2305329 centos6.5 64bit jdk-7u80-linux-x64.r ...
- hadoop2.7.1 HA安装部署(转)
hadoop集群规划 目标:创建2个NameNode,做高可用,一个NameNode挂掉,另一个能够启动:一个运行Yarn,3台DataNode,3台Zookeeper集群,做高可用. 在 hadoo ...
- Liunx下配置DNS服务
当Ping 主机名时可以映射出该主机的IP地址,反之亦然.配置并指定DNS服务器可以快速部署集群,不需要每台主机都去修改HOSTS文件即可实现IP与主机名的相互解析.而在Linux下的DNS是用bin ...
- 记录centos6.8安装Oracle10.2.0.1过程中的错误解决
[root@hadoop01 database]# ./runInstaller ./runInstaller: /opt/database/install/.oui: /lib/ld-linux.s ...
- 内网配置DNS服务器,无域名,只有主机名
Hadoop集群中,使用DNS而不是hosts来访问服务器. 1. 安装bind软件 用root用户运行: yum -y install bind* 2. 配置named.conf文件 vi /etc ...
- Hadoop HDFS编程 API入门系列之HDFS_HA(五)
不多说,直接上代码. 代码 package zhouls.bigdata.myWholeHadoop.HDFS.hdfs3; import java.io.FileInputStream;import ...
- Hive安装与部署集成mysql
前提条件: 1.一台配置好hadoop环境的虚拟机.hadoop环境搭建教程:稍后补充 2.存在hadoop账户.不存在的可以新建hadoop账户安装配置hadoop. 安装教程: 一.Mysql安装 ...
- Hadoop2.4.x 实例测试 WordCount程序
在实例测试前先确保hadoop 启动正确 Master.Hadoop: word 1[hadoop@Master input]$ jps6736 Jps6036 NameNode4697 Secon ...
随机推荐
- Html--判断客户端类型
公司安排做一个html的app下载页面,需要检测客户端,走不同的css布局,于是从网上搜点资料,简单汇总下,方便日后查阅. 1) 响应式布局设置--@media only screen and onl ...
- 【matlab】绘制双三次插值函数曲线
想要的效果: 编程时要用到分段函数曲线的绘制方法:..+.*(分段条件). 需要注意的是:函数表达式中的乘除和乘方都要加“.”.因为一般的函数都是数在乘变量运算. x=-:; a=-0.5; w=ab ...
- hdu 3622(二分+2-sat判断可行性)
题目链接:http://acm.hdu.edu.cn/showproblem.php?pid=3622 思路:二分是容易想到的,由于题目中有明显的矛盾关系,因此可以用2-sat来验证其可行性.关键是如 ...
- Caffe机器学习框架
Caffe是一个常用的卷积神经网络框架,在视频.图像处理方面应用较多. 官网:http://caffe.berkeleyvision.org/ 演示:http://demo.caffe.berkele ...
- JS原生追加子节点
var fragment = document.createDocumentFragment(); li = document.createElement('li'); li.className = ...
- python使用电子邮件模块smtplib的方法(发送图片 附件)实用可行
Smptp类定义:smtplib.SMTP(host[,port[,local_hostname[,,timeout]]]),作为SMTP的构造函数,功能是与smtp服务器建立连接,在连接成功后,就可 ...
- Log4j 使用
源博客 http://www.cnblogs.com/alipayhutu/archive/2012/06/21/2558249.html#3159794 [1]从零开始 a). 新建Java Pro ...
- [读书笔记]JavaScript 闭包(Closures)
1. 什么是闭包? 参考MDN. 2. 闭包的使用示例 2.1 示例1 <div>1</div> <div>2</div> <div>3&l ...
- 三、docker官网注册docker id
docker官网注册docker ID 电脑注册docker没有成功,网上有人说用手机注册,试了一下确实可以注册. 1.下载蓝灯软件开启FQ代理. 2.登录网站,按照提示注册.
- 《挑战程序设计竞赛》1.6 轻松热身 POJ1852
Ants Time Limit: 1000MS Memory Limit: 30000K Total Submissions: 12782 Accepted: 5596 Description ...