准备工作 下载jdk8和hadoop2.7.2 使用sftp的方式传到hadoop100上的/opt/software目录中 配置环境 如果安装虚拟机时选择了open java,请先卸载 rpm -qa | grep java sudo rpm -e 软件包 which java 安装jdk cd /opt/software/ 解压jdk /opt/module tar -zxvf jdk-8u144-linux-x64.tar.gz -C /opt/module/ 解压hadoop .tar.

CentOS下安装hadoop 用户配置 添加用户 adduser hadoop passwd hadoop 权限配置 chmod u+w /etc/sudoers vi /etc/sudoers 在 root ALL=(ALL) ALL 下添加 hadoop ALL=(ALL) ALL chmod u-w /etc/sudoers 关闭防火墙 查看防火墙状态 service iptables status 关闭防火墙 service iptables stop 查看防火墙开机启动状态 chkc

最近在学习大数据,需要安装Hadoop,自己弄了好久,最后终于弄好了.网上也有很多文章关于安装Hadoop的,但总会遇到一些问题,所以把在CentOS 7安装Hadoop 3.0.0的整个过程记录下来,有什么不对的地方大家可以留言更正. 一.ssh免密登录 1.测试是否能免密登录 # ssh localhost The authenticity of host 'localhost (::1)' can't be established. 2.设置免密登录 1).去掉 /etc/ssh/sshd

1.安装环境 本教程使用 CentOS 8 64位 作为系统环境,请自行安装系统. 本教程基于原生 Hadoop 2,在 Hadoop 2.8.5 版本下验证通过,可适合任何 Hadoop 2.x.y 版本,例如 Hadoop 2.7.1, Hadoop 2.4.1等. ------------------------------------------------------------------------------------------------------------------

1.下载linux版的JDk 2.cd /usr/local 目录下,上传刚刚下载jdk文件 3.rpm -ivh jdk-8u111-linux-x64.rpm 4.设置环境变量 找到profile文件,添加环境变量: #vi /etc/profile 在profile文件下面追加写入下面信息: export JAVA_HOME=/usr/java/jdk1..0_111 export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/d

第一篇博客,最近公司要用java和jsp开发新的项目,第一次使用Intellij idea 2017,有很多地方需要一步步配置,有些按照网上的教程很快就配置好了,有的还是琢磨了一会儿,在这里做一个记录,希望可以帮助到有需要的人 一 jdk,tomcat,Intellij idea 2017的下载与安装 jdk下载地址: http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html tomca

准备三台虚拟机,ip分别为192.168.220.10(master).192.168.220.11(slave1).192.168.220.12(slave2) 准备好jdk-6u45-linux-x64.bin和hadoop-1.2.1-bin.tar.gz,放在/usr/local/src/目录下 安装JDK(每台虚拟机都安装) 1.进入到/usr/local/src/目录,执行./jdk-6u45-linux-x64.bin 2.修改~/.bashrc,在文件末尾增加三行 export

grafana的官网下载:https://grafana.com/grafana/download 一.安装服务端图像呈现组件 # yum install -y fontconfig freetype* urw-fonts 二.下载安装rpm包# rpm -ivh https://dl.grafana.com/oss/release/grafana-6.1.4-1.x86_64.rpm# systemctl start grafana-server // 启动服务# systemctl enab

  一.  在CentOS中只需要先移除自带的OpenJava,再安装原生的Java SDK.   <1> rpm -qa | grep jdk: 也就是query all npm 包,找到jdk开头的安装包. [root@localhost ~]# rpm -qa | grep jdk java-1.7.0-openjdk-1.7.0.91-2.6.2.3.el7.x86_64 java-1.8.0-openjdk-headless-1.8.0.65-3.b17.el7.x86_64 jav

jdk的安装及环境变量的配置 1.安装JDK开发环境 附上jdk安装包的百度云链接 链接:http://pan.baidu.com/s/1mh6QTs8 密码:jkb6(当然自行去官网下载最好哒,可以下载到最新版) 正规安装下载流程见下面操作: 百度搜索:jdk 你将看到以下界面: 下载网站:http://www.oracle.com/ 开始安装JDK: 修改安装目录如下: 确定之后,单击“下一步”. 注:当提示安装JRE时,可以选择不要安装. 2.配置环境变量: 对于Java程序开发而言,主要

1.ESC后安全设置(管理控制台->本实例安全组->配置规则->添加安全组规则->3306.80端口配置) 2.nginx  安装,首先安装三大件  PCRE.zlib.openssl  参考: http://www.cnblogs.com/wyd168/p/6636529.html 安装nginx后出现 [root@zxc sbin]# nginx -s reload -bash: nginx: command not found 解决方案:http://blog.csdn.ne

hadoop2.6.4安装包(链接:https://pan.baidu.com/s/15qHpdoLBQHP4HdxOJzNcsg 密码:5hel) 1.准备Linux环境 1.0先将虚拟机的网络模式选为NA 1.1修改主机名 vi /etc/sysconfig/network                  NETWORKING=yes         HOSTNAME=mini1    ### 1.2修改IP 两种方式:         第一种:通过Linux图形界面进行修改(强烈推荐) 

思路 获取安装文件→配置好路径→安装→设置权限→处理常见的问题. 1.下载 先建议去官网看看https://dev.mysql.com/,然后根据自己的常识找到下载路径.同时也找到最新版本. 下载方式有两种 a.系统下载wget+下载链接. b.外部下载然后拷贝进去. 如果是玩虚机学习的,建议采用第二种方式. 2.配置好路径 路径有两个,第一个是安装路径,第二个是配置路径. a.安装路径 程序要运行,都需要有对应的路径,也就是程序的位置.linux的路径也很复杂,如果采用yum安装好像什么问题都

1. 查看libtiff 可安装列表: [root@e952aff59318 lib]# yum list | grep "libtiff" libtiff.i686 4.0.9-13.el8 AppStream libtiff.x86_64 4.0.9-13.el8 AppStream libtiff-devel.i686 4.0.9-13.el8 AppStream libtiff-devel.x86_64 4.0.9-13.el8 AppStream 查看libgcc可安装列表:

第一次接触Linux也难免有些懵逼,因为公司项目必须用.Net Core 开发一个后端服务应用:第一次用Linux给我的感觉就像在用2000年的手机一样:没用智能的操作:让人崩溃的用户体验.说多了都是泪,将正事吧. 第一点:下载Linux镜像,Linux服务器有很多种操作系统(RHEL.Ubuntu,Mint.Debian.Fedora.CentOS,Oracle.openSUSE)我自己安装的Linux镜像是Ubuntukylin-16.04-desktop-amd64(官方麒麟版下载地址:h

Eclipse下载安装并运行第一个Hello world(详细) 1.下载安装和配置JDK JDK详细的安装教程参考:https://www.cnblogs.com/mxxbc/p/11845150.html 因为eclipse需要依赖于JDK环境才能运行,所以在使用eclipse之前需要安装JDK. JDK下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html 安装过程分为两次.第一次安装jdk,目录为D:

在CentOS 6.7 x64上搭建Hadoop 2.6.3完全分布式环境,并在DigitalOcean上测试成功. 本文假设: 主节点(NameNode)域名(主机名):m.fredlab.org 子节点(DataNode)域名(主机名):s1.fredlab.org s2.fredlab.org s3.fredlab.org Tip:单个NameNode或DataNode内存大于1G,在512MB内存的VPS上测试不成功. 一.配置SSH互信 1.master机上生成公私钥:id_rsa和i

centos 7 下Hadoop 2.7.2 伪分布式安装,安装jdk,免密匙登录,配置mapreduce,配置YARN.详细步骤如下: 1.0 安装JDK 1.1 查看是否安装了openjdk [lei@bogon ~]$ java -version openjdk version "1.8.0_65" OpenJDK Runtime Environment (build 1.8.0_65-b17) OpenJDK 64-Bit Server VM (build 25.65-b01,

近期给一个项目搭建linux下的大数据处理环境,系统是CentOS 6.3.主要是配置JDK.安装Tomcat,Hadoop.HBase和Zookeeper软件.博主在Hadoop这方面也是新手.配置这个环境遇到过很多问题.查了很多资料.这里做一个总结.以便日后回想. 首先是账户权限的改动,安装软件环境须要上传文件和一些系统文件的改动权限,所以最好设置成root权限 权限改动方法:http://www.linuxidc.com/Linux/2012-03/55629.htm 软件的安装.网上有很

安装JDK 下载jdk https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 选择最新版本:   下载hadoop 官网:https://hadoop.apache.org/releases.html 当前时间最新版本:https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.1.2/hadoop-3.1.2.tar.

centos下卸载OpenJDK 并安装sun的jdk 第一步:查看并卸载CentOS自带的OpenJDK 安装好的CentOS会自带OpenJdk,用命令 java -version ,我这里显示下面的信息: java version "1.6.0"   OpenJDK Runtime Environment (build 1.6.0-b09)   OpenJDK 64-Bit Server VM (build 1.6.0-b09, mixed mode) 最好还是先卸载掉openj