环境:

win10

jdk1.7

hadoop2.6.0

linux虚拟机 Ubuntu14.04

首先把安装在Ubuntu上的hadoop2.6.0.tar.gz复制到windows系统上,解压到任意目录下,如我就放在了D:\Hadoop目录下。

1 下载并且配置Ant

下载apache-ant-1.9.9-bin.zip,解压到任意目录下,我还是解压到了D:\Hadoop下,就是为了把hadoop用到的相关配置文件都放在一起,以后好找。之后就配置ant的环境变量

  新建ANT_HOME=D:\Hadoop\apache-ant-1.9.9

  在PATH后面加%ANT_HOME%\bin

通过ant -version测试一下,如下图,则说明ant已经配置完成。

2 下载hadoop2x-eclipse-plugin-master.zip,解压到任意目录,比如我还是放在了D:\Hadoop下。

3 编辑产生hadoop-eclipse-plugin-2.6.0.jar

执行如下命令(这里的路径全是我自己电脑上的,大家灵活改变)

antjar -Dversion=2.6.0 -Declipse.home=D:\eclipse -Dhadoop.home=D:\Hadoop\hadoop-2.6.0

(antjar -Dversion=2.6.0 -Declipse.home=(eclipse安装目录) -Dhadoop.home=(hadoop解压目录))如图所示(这里我盗图了,所以路径和我以上说的不一样,反正都能懂,跪求原谅):

注意啊,看上图红色框框那,表示产生这个jar文件的时间还是挺长的,大家耐心等待就好了,如果电脑速度不快的话,等十多分钟也是有可能的。

编译生成的hadoop-eclipse-plugin-2.6.0.jar在D:\Hadoop\hadoop2x-eclipse-plugin-master\build\contrib\eclipse-plugin目录下。

4 eclipse上进行hadoop配置

把上边产生的hadoop-eclipse-plugin-2.6.0.jar复制到D:\eclipse\plugins目录下,重启eclipse就看到了DFSLocations如下图

打开windows-->preference,就看到如下图,点击左边的Hadoop Map/Reduce,右边找到hadoop的解压路径,然后apply,并且OK

1)点击Window-->Show View -->MapReduce Tools 点击Map/ReduceLocation
2)点击Map/ReduceLocation选项卡,点击右边小象图标,打开Hadoop Location配置窗口: 输入Location Name,任意名称即可.配置Map/Reduce Master和DFS Mastrer,Host和Port配置成hdfs-site.xml与core-site.xml的设置一致即可。

完成之后点击finish,看到如下显示就大功告成了

windows下eclipse连接ubuntu伪分布式hadoop2.6.0的更多相关文章

  1. Windows下Eclipse连接hadoop

    2015-3-27 参考: http://www.cnblogs.com/baixl/p/4154429.html http://blog.csdn.net/u010911997/article/de ...

  2. 论在Windows下远程连接Ubuntu

       Ubuntu下1:下载xrdp   sudo apt-get install xrdp 2: urs/share/applications 下找到  远程桌面 设置成这样 Windows下 1; ...

  3. [原创] Windows下Eclipse连接hadoop

    1 下载hadoop-eclipse-plugin :我用的是hadoop-eclipse-plugin1.2.1 ,百度自行下载 2 配置插件:将下载的插件解压,把插件放到..\eclipse\pl ...

  4. ubuntu搭建分布式hadoop-2.6.0概略和错误

    详细配置:http://blog.csdn.net/ggz631047367/article/details/42426391 1.修改机器/etc/hostname分别为   master    s ...

  5. 解决windows下Eclipse连接远程Hadoop报错

    Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.N ...

  6. windows下winscp连接ubuntu

    在ubuntu下安装ssh: sudo apt-get install openssh-server 即可解决.

  7. windows下eclipse远程连接hadoop集群开发mapreduce

    转载请注明出处,谢谢 2017-10-22 17:14:09  之前都是用python开发maprduce程序的,今天试了在windows下通过eclipse java开发,在开发前先搭建开发环境.在 ...

  8. windows下eclipse+hadoop2

    windows下eclipse+hadoop2.4开发手册 1.解压下载的hadoop2.4,到任意盘符,例如D:\hadoop-2.4.0. 2.设置环境变量 ①新建系统变量,如下所示. ②将新建的 ...

  9. [b0007] windows 下 eclipse 开发 hdfs程序样例

    目的: 学习使用hdfs 的java命令操作 相关: 进化: [b0010] windows 下 eclipse 开发 hdfs程序样例 (二) [b0011] windows 下 eclipse 开 ...

随机推荐

  1. swap, 不用临时变量如何做到交换a与b

    固定思维通常是需要一个临时变量temp,如果没有这个临时变量呢,其实也不复杂,:) inline void swap(int &a, int &b) /*C用指针吧*/ { a = a ...

  2. 05 shell编程之正则表达式

    正则表达式&&文本处理利器 学习目标: l  掌握正则表达式的运用 l  掌握sed.awk文本处理工具的使用 目录结构:   正则表达式 正则表达式概述 l  正则表达式:使用单个字 ...

  3. PHPPCRE正则解析

    一.前言 前面的博客里,有对字符集的解析.这里就不是字符集的事儿了,在PHP中很多函数的处理默认是unicode中的UTF-8编码格式.那么废话不多说,直接开始正题. 二.PHP函数mb_split解 ...

  4. Hadoop(24)-Hadoop优化

    1. MapReduce 跑得慢的原因 优化方法 MapReduce优化方法主要从六个方面考虑:数据输入.Map阶段.Reduce阶段.IO传输.数据倾斜问题和常用的调优参数. 数据输入 Map阶段 ...

  5. python mac下安装虚拟环境

    Mac 下 Flask 框架 workon命令找不到 ---- 最终解决方案(详解具体实现操作过程中遇到的坑) Mac 下 Flask 的 全网最详细搭建 1.安装virtualenv和virtual ...

  6. 第一个python代码

    # -*- coding:utf-8 -*- user = raw_input("请输入用户名") passwd = raw_input("请输入密码") if ...

  7. idea添加源代码目录,编译代码出现时钟样式

    项目结构需要有一个target目录,需要一个src目录,

  8. go学习笔记-Data类型(Arrays, Slices and Maps)

    Data类型(Arrays, Slices and Maps) array array就是数组,定义方式如下: var arr [n]type 在[n]type中,n表示数组的长度,type表示存储元 ...

  9. ansible结合SHELL搭建自己的CD持续交付系统

    一. 设计出发点 因公司业务面临频繁的迭代上线,一日数次.仅仅依靠手工效率过低且易出错. 考虑搭建一套可以满足现有场景的上线系统. 二 .为何采用ansible+shell方式 1.可控性(完全自主拥 ...

  10. P2419 [USACO08JAN]牛大赛Cow Contest

    P2419 [USACO08JAN]牛大赛Cow Contest 题目背景 [Usaco2008 Jan] 题目描述 N (1 ≤ N ≤ 100) cows, conveniently number ...