第二周之Hadoop学习(二)
这篇博客根据http://dblab.xmu.edu.cn/blog/install-hadoop-in-centos/中的教程进行学习;
首先按照教程的操作的第一步的时候,电脑直接蓝屏了。
但是依然没有打击到我想学习hadoop的热情。继续启动centos
根据教程,我刚刚创建了一个自己名称的用户,因此在这里需要继续创建一个hadoop的账户
添加一个hadoop的用户并且设置密码,同时修改好权限,退出登录
切换成hadoop账号
接着进入安装SSH的操作,首先打开终端,检验系统是否已经安装ssh
检测到已经安装进入下一步,安装Java环境,则需要通过yum命令在linux中安装Java jdk的环境
输入命令等待一段时间,安装过程:
接着配置系统JAVA_HOME环境变量,同时检测是否安装成功
进入配置文件中末尾添加其值,输入命令让文件生效
检验环境变量配置及其java环境是否被正确安装
可以看到系统提示并没有这个文件夹,我们去那个盘符看看究竟是否有相应的文件夹来查找环境变量设置错误的地方
根据路径一路查找到最终的盘符,发现有相应的文件。查找是否中途有任何字符输入错误的地方
usr没错
lib没错
jvm没错
java-1.7.0-openjdk错误;并没有这个文件夹,但是存在一个java-1.7.0和java-openjdk的两个文件夹
要判断哪个文件夹是正确的环境变量的话,要进入其中查看是否有相应的文件,java-openjdk没有问题,接着查看java-1.7.0同样存在相应的文件,则选择接近的java-1.7.0为优先对象进行测试
1.7.0作为环境失败,则将openjdk作为环境再次尝试。
相同的错误。
经过不断的尝试后,最终定位到一个文件中和之前的版本号一致,但是环境变量和教程中的不一样。
JAVA环境大致上已经安装好了
紧接着进入Hadoop2的安装,通过火狐浏览器下载相应的hadoop2的版本
好了吃了个苹果后下载完成了,接着进入下一步的操作
解压hadoop同时安装hadoop后查看hadoop的版本信息
hadoop已经被成功安装了
首先初始尝试运行hadoop中的例子,发现出现错误,则使用需要修改其中的hostname映射
进入hostname中填写127.0.0.1的映射,再次运行实例成功运行。
输出结果:
清空output文件夹
第二周之Hadoop学习(二)的更多相关文章
- 大二暑假第二周总结--开始学习Hadoop基础(一)
一.简单视频学习Hadoop的处理架构 二.简单视频学习分布式文件系统HDFS并进行简单的实践操作 简单操作教程:http://dblab.xmu.edu.cn/blog/290-2/ 注意:在建立H ...
- 2019暑假第二周(hadoop在个人电脑上的搭建)
一,Hadoop和NoSQL数据库的学习,大多需要Linux环境. 搭建Linux环境可以分为两种方式: (1)在电脑上安装双操作系统,即同时安装Linux和Windows操作系统,在电脑启动的时候, ...
- hadoop学习(二)----HDFS简介及原理
前面简单介绍了hadoop生态圈,大致了解hadoop是什么.能做什么.带着这些目的我们深入的去学习他.今天一起看一下hadoop的基石--文件存储.因为hadoop是运行与集群之上,处于分布式环境之 ...
- 20175215 2018-2019-2 第二周java课程学习总结
一.学生免费申请使用IDEA 下载好IDEA后,设置到最后有一个界面, 我们需要到IDEA官网进行IDEA免费试用权的申请,如果有学校的邮箱,使用学校的邮箱注册并证明是自己的就可以直接通过申请.如下图 ...
- 第六周之Hadoop学习(六)
继续上周开启telnet的过程,这个过程发现win10上运行不了telnet的命令 原因大概在于没有开启telnet服务,从网上下载好telent服务端,安装后继续尝试是否能在win10上使用hado ...
- 第五周之Hadoop学习(五)
在上周已经完成Hadoop的Java编程环境下的配置,这周则是通过对Eclipse的环境编程对Hadoop的API进行简单的调用 参考地址:https://blog.csdn.net/u0105237 ...
- 补交第二周作业:学习ka li
在老师给的虚拟机上安装,试了n次都没有安装成功,百度上的说法也是众说纷纭. 之后重新安装了另一个版本的虚拟机,按照教程成功装上了ka li. 一. 安装VMtools:是为了方便宿主机与虚拟机间的文件 ...
- 第二周 day2 python学习笔记
1. python中的三元运算: result=value1 if 条件 else value2 如果条件成立,result=value1 如果条件不成立,result=value2 2. pytho ...
- hadoop学习二:hadoop基本架构与shell操作
1.hadoop1.0与hadoop2.0的区别:
随机推荐
- js 判断数组中是否包含某个元素
vuex中结合使用v-if: 链接:https://www.cnblogs.com/hao-1234-1234/p/10980102.html
- 微信个人支付接口---YunGouOS 1.1.3 版本发布,新增个人微信/支付宝收款接口
软件接口 https://www.oschina.net/news/113305/yungouos-1-1-3-released 文档说明 https://www.oschina.net/p/Yu ...
- 转载:ADTS header
转自:http://blog.csdn.net/tx3344/article/details/7414543 1.ADTS是个啥 ADTS全称是(Audio Data Transport Stream ...
- 【读书笔记】--《编写高质量iOS与OS X代码的52个有效方法》
1.Objective-C 起源: 在 C 语言基础上添加了面向对象特性,是 C 语言的超集.Objective-C 由 SmallTalk 语言演变过来,使用消息结构,运行环境由运行环境决定. OC ...
- MySQL存储引擎优化
如何在两种存储引擎中进行选择? ① 是否有事务操作?有,InnoDB. ②是否存储并发修改?有,InnoDB. ③是否追求快速查询,且数据修改较少?是,MyISAM. ④是否使用全文索引?如果不引用第 ...
- .net core IIS 发布
发布时注意事项: 1.本机安装.net core SDK 2.启动项目预加载 3.应用池配置为 无托管代码 4.设置应用池-->高级设置-->启动模式为:AlwaysRunning 5.在 ...
- queue 官方运用
import threading import random,time import queue q_init = queue.Queue(maxsize=5) import logging logg ...
- Dockerfile文档编写
图片显示问题,附上有道云笔记中链接:http://note.youdao.com/noteshare?id=fba6d2f53fd6447ba32c3b7accfeb89b&sub=B36B5 ...
- Foreach报错
List<String> a = new ArrayList<String>(); 2 a.add("1"); 3 a.add("2") ...
- 一些封装的php函数
swoole群中奥总共享的创建文件夹: function make_dir($folder){ $reval = false; if (!file_exists($folder)){ /* 如果目录不 ...