Hadoop windows 环境配置】的更多相关文章

下载 winutils 点击 这里下载 winutils 包,并解压缩. 此处解压缩后目录位置为 D:\software\hadoop2.6 配置环境变量 变量名 变量值 HADOOP_USER_NAME hadoop HADOOP_HOME D:\software\hadoop2.6 Path ;%HADOOP_HOME%\bin (这里是追加) 注意: HADOOP_USER_NAME 的变量值就是访问的 hadoop 用户,这里用户一样,值也不一样. 配置 host 名称 在 C:\Win…
一.Ant 概要基础知识 Apache Ant 是一个将软件编译.测试.部署等步骤联系在一起加以自动化的一个工具,大多用于Java环境中的软件开发,用以构建应用,或结合其他开源测试工具例如 git.TestNG等搭建持续集成测试开发环境,从而高效.高质量的构建产品. Ant 有以下一些优点: 跨平台,可移植.Ant 是 Java 语言编写的,所以有很好的跨平台性和可移植性,无论是在 windows.Linux,还是 mac. 操作简单. Ant 是由一个内置任务和可选任务组成的,运行时需要一个构…
此文主要介绍 Selenium2 WebUI自动化Java开发 Windows 环境配置,供各位亲们参考,若有不足之处,敬请各位大神指正,非常感谢! 所需软件列表如下所示: 所属分类 具体名称 备注 Selenium selenium-java-2.42.2.jar jar包 Selenium selenium-server-standalone-2.42.2.jar jar包 chromedriver chromedriver.exe driver chrome 推荐执行用例的浏览器 Fire…
cocos2d-x3.0 windows 环境配置 参考Oo泡泡糖oO的CSDN博文 :http://blog.csdn.net/u010296979/article/details/24273393 和 http://blog.csdn.net/u010296979/article/details/24316393 配置须要三个文件: 本人配置环境:win7 32位 Android-NDK:  http://dl.google.com/android/ndk/android-ndk-r9d-w…
抄一个可行的Hadoop Yarn环境配置.用的官方的2.2.0版本. http://www.jdon.com/bigdata/yarn.html Hadoop 2.2新特性 将Mapreduce框架升级到Apache YARN,YARN将Map reduce工作区分为两个:JobTracker组件:实现资源管理和任务JOB:计划/监视组件:划分到单独应用中. 使用MapReduce的2.0,开发人员现在可以直接Hadoop内部基于构建应用程序.Hadoop2.2也已经在微软widnows上支持…
原文:ASP.NET Core Windows 环境配置 - ASP.NET Core 基础教程 - 简单教程,简单编程 ASP.NET Core Windows 环境配置 ASP.NET Core 是对 ASP.NET 有重大意义的一次重新设计.本章节我们将介绍 ASP.NET Core 中的一些新的概念和它们是如何帮助我们开发现代化的 Web 应用程序 尽管 ASP.NET Core 是跨平台的,但主力开发者几乎都使用 Windows ,因此我们接下来将讲解如何在 Windows 上配置 A…
CDH 5.x搭建请参考CentOS 7离线安装CDH 5.16.1完全指南(含各种错误处理). 如果使用的是cloudera quickstart vm,则只能在linux服务器中使用eclipse提交,无法远程访问(主要是quickstart绑定的所有ip都是localhost所致,所以最好还是自己搭建一个单机的hadoop环境). 安装包下载 hadoop-2.6.5.tar.gz(最好是和服务器版本保持一致,避免出现各种版本不匹配导致的接口不匹配问题) 解压 hadoop.dll-and…
PS:注意事项 一些坑在此声明: 1.安装Eclipse后,记得设置各项编码格式为utf-8 请移步:http://www.blogjava.net/xiaomage234/archive/2014/05/13/413626.html(我也是网上查阅的~~) 2.下载Android SDK时需要FQ 请移步:http://laod.cn/hosts/2016-google-hosts.html(按照里面的方法添加映射) 3.以下所有下载的文件,建议存放目录不要用中文.目录不要用中文.目录不要用中…
前言:以前觉得机器学习要应用于游戏AI,还远得很. 最近看到一些资料后,突发兴致试着玩了玩Unity机器学习,才发觉机器学习占领游戏AI的可能性和趋势. Unity训练可爱柯基犬Puppo 机器学习训练出的游戏AI,模型可能数据庞大,但是这完全可以部署于服务器. 目前绝大部分游戏AI都是人工制作,工作量庞大.机器学习可以解放生产力,放台主机训练让其自己培养出更实的AI. ml-agents介绍 Unity Machine Learning Agents (ML-Agents) 是一款开源的 Un…
ASP.NET Core 是对 ASP.NET 有重大意义的一次重新设计.本章节我们将介绍 ASP.NET Core 中的一些新的概念和它们是如何帮助我们开发现代化的 Web 应用程序 尽管 ASP.NET Core 是跨平台的,但主力开发者几乎都使用 Windows ,因此我们接下来将讲解如何在 Windows 上配置 ASP.NET Core 在使用 ASP.NET Core 开发应用程序之前,我们必须先安装一些必要的软件和配置一些环境 Visual Studio Community 201…
参照GEE开发大神的一篇文章GEE学习笔记 三十五:windows下配置本地开发环境 - 无形的风的文章 - 知乎. 按他的顺序下来还是出了点问题,再整理一下自己遇到的问题. 1.安装Google的 python API 的客户端 pip install google-api-python-client 2.安装鉴权验证依赖库 pip install pyCrypto(我运行后发现之前已经装过了,所以没有实际效果) 3.安装GEE的python库 pip install earthengine-…
案例说明: 目前KingbaseES V8R6的Windows版本不支持数据库sys_rman的物理备份,可以考虑通过建立主备流复制实现数据库的异机物理备份.本案例详细介绍了,在Windows环境下建立流复制的过程,备库的创建可以在同一节点完成,也可以异机创建流复制. Tips: 异机构建主备流复制步骤和以上同一主机构建基本一致. 主机节点使用相同的操作系统版本和数据库版本. 检查主机之间的网络连通性,注意防火墙的配置. 适用版本: Windows KingbaseES V8R6 系统环境: 节…
案例说明: 目前KingbaseES V8R6的Windows版本不支持数据库sys_rman的物理备份,可以考虑通过建立主备流复制实现数据库的异机物理备份.本案例详细介绍了,在Windows环境下建立流复制的过程,备库的创建可以在同一主机完成,也可以异机创建流复制. 适用版本: Windows KingbaseES V8R6 系统环境: 主备节点数据存储结构: # 主库: Data目录: D:\Program Files\Kingbase\ES\V8\data archive目录:d:\\ke…
续上篇 对于想用cocos2dx来开发Android游戏的人来说,最痛苦的莫过于配置Android环境和之后的奇奇怪怪的编译失败问题.这是经历了多次成功与失败之后,血与泪的经验包,大家请收好.如果你有更便捷的方法,请一定要指教我,感谢! android环境搭建由于中国长城的原因,你需要借助一些外界的帮助,比如VPN,又或者是这个网站:AndroidDevTools,里面包含android开发需要的绝大部分东西. 对于android环境如何搭建,由于时间比较紧,我就不图文并茂了,本篇我来简单描述就…
一.安装node.js 1:先找到对于电脑合适的node版本进行下载. 我的云盘node版本是7.8.0.地址如下:https://pan.baidu.com/s/19kcpXhCN1AuJAT9CBIjSXA 2::安装选择路径. 1)我将其安装在在d:\appium\node.js文件夹下 2)验证node是否安装成功: 在cmd中输入node -v 若出现以下结果说明安装成功可进行二步骤 若出现以下结果则需要去环境变量path处添加node的安装路径,如下所示(环境变量位置:右键点击计算机…
刘勇    Email: lyssym@sina.com 本博客记录作者在工作与研究中所经历的点滴,一方面给自己的工作与生活留下印记,另一方面若是能对大家有所帮助,则幸甚至哉矣! 简介 鉴于最近在研究Hadoop编程时,为考虑编程的方便,在Windows本地编译源程序,然后直接访问Hadoop集群,这样给广大编程人员提供了极大的便利.在这个过程中积累了一些实际经验,并针对在该过程中(初级阶段)可能会遇到的问题,提供一些解决方案,希望对大家有所帮助. 环境介绍 Hadoop 集群:hadoop 2…
一.安装配置Apache2.4.7(httpd-2.4.7-win64-VC11.zip ) 1.解压下载的安装包:httpd-2.4.7-win64-VC11.zip将其放到自己的安装目录(我的目录D:\phpEnv\Apache24) 2 2.然后对http.conf(D:\phpEnv\Apache24\conf\http.conf)配置文件进行修改-使用记事本打开就行 (1)修改ServerRoot Apache的根路径: (37行)ServerRoot"c:/Apache24"…
cocos2dx升级之旅,请多指教~ 本篇是本人搭建cocos2dx-Windows 64位环境的配置说明,仅供参考. 开发准备 搭建环境肯定需要准备好所有工具,只有把工具都准备好了,才能撸起袖子干活,但是肯定被cocos官网提供的软件数目和分布的零散不堪的开发环境准备文档整的没有头绪.下面我们来理清一下思路. 1.python 2.7.X环境 cocos2dx的许多配置都是通过python来使用,因此万分紧急的是搭好python环境,而且cocos2d-x目前来说只支持到Py2.X版本(本人使…
一.开发环境 Win8.1 64位.VS2013.MySQL5.5.3764位 MySQL安装目录为:C:\Program Files\MySQL\MySQL Server 5.5 二.配置工程环境 首先创建一个控制台空项目,打开VS2013,文件--> 新建项目 --> 常规 --> 选择"空项目"       因为我们要使用MySQL数据库的API接口编程,所以需要将工程的附加头文件搜索目录和附件库文件搜索目录,指向MySQL安装目录对应的位置,下面是我机子上my…
        个人比较追求高效.效率.以下是我常用的windows配置希望对大家有帮助.(身为程序员,我特别喜欢mac pro的retina屏,在那编程简直是一种享受.等我买了mac pro在发一篇mac下的) Alt+space快捷操作         这个是我最爱的操作,特别高效,摆脱键盘.大三实习的时候,还懵懵懂懂,那时候看到公司的技术总监在操作电脑,瞬间惊呆了,速度特别快.百度还查不到,然后看了几次后终于看懂了.然后就用到现在.真是windows高效操作的利器,之前用过一段时间乌邦图好…
虚拟机以及Linux系统安装在之前的两篇分享中已经详细的介绍了方法,并且每一步的都配图了.如果有朋友还是看不懂,那我也爱莫能助了.本篇主要就hadoop服务器操作系统配置进行详细说明,hadoop安装会在下一篇文章中详细的介绍. hadoop安装包用的是大快DKHadoop发行版,个人觉得DKHadoop的安装过程是比较简单,关于dkhadoop的安装在下一次的分享中再详细介绍吧.下面进入到本篇的主题——服务器操作系统配置教程  一.安装包准备 1.虚拟机分布式安装(三台及以上虚拟机) 若是个人…
1.配置一台linux服务器(当前使用CentOS7)及一些基本设置 1.1在wmware下制作一台centos服务器(桥接模式)         并设置静态ip (编辑/etc/sysmconfig/network-scripts/ifcfg-ens33为如下内容,然后service network restart)         HWADDR="00:0C:29:76:12:2A"         Type="Ethernet"         BOOTPRO…
一.配置 1.Java配置:JAVA_HOME路径不要有空格 2.下载/kafka_2.11-1.1.0,地址是https://www.apache.org/dyn/closer.cgi?path=/kafka/1.1.0/kafka_2.11-1.1.0.tgz,并解压缩至C:\1000_Study\3000_Java\kafka_2.11-1.1.0 3.配置kafka的path环境 二.命令行测试 cd C:\1000_Study\3000_Java\kafka_2.11-1.1.0 bi…
Cygwin工具编译Redis Redis6.x版本是未编译版本(官方很调皮,所以没办法,咱只好帮他们编译一下了),所以咱们先下载一个Cygwin,用它来对Redis进行编译. Cygwin下载地址: https://cygwin.com/setup-x86_64.exe 下面是安装Cywin的一些注意事项说明: 1.前面可以自己默认或者自由选择,到达下图所示内容以后,添加阿里云镜像.不然可能会下载失败. 阿里云镜像地址: http://mirrors.aliyun.com/cygwin/ 2.…
1.安装WampServer 2.管理HTTP服务 任务图标绿色为正常启动状态 注意事项:1.检查网络是不是通的 ping 对方IP2.检查防火墙是否开启,如果开启将不能正常被访问3.检查访问权限 Allow from all4.确保端口没有被其它程序占用 3. 配置根目录: 网站根目录是Web服务器上存放网站程序的空间 3.1打开配置文件,控制台选择或者 wampserver安装目录下bin\apache\Apache2.2.21\conf\httpd.conf 3.2.设定根目录,查找并修改…
准备脚本 注意如果weblogic在D盘,那么以下cmd中的所有C:都要替换成D: , 因为windows需要切盘符. 启动weblogic管理服务adminServer 的文件: startAdminServer.cmd @ECHO OFF @REM WARNING: This file is created by the Configuration Wizard. @REM Any changes to this script may be lost when adding extensio…
1.下载maven安装包:apache-maven-3.3.9-bin.zip 下载地址: http://archive.apache.org/dist/maven/maven-3/3.3.9/binaries/apache-maven-3.3.9-bin.zip 2.解压缩maven安装文件到D盘下,并且重命名文件夹maven-3.3.9,最终路径为:D:\maven-3.3.9 3.配置环境变量: 将D:\maven-3.3.9\bin添加到系统path变量中,通过mvn -version验…
一.下载安装Python2.7和Python3.6 安装包下载地址:https://www.python.org/downloads/ 二.配置系统环境变量 在环境变量中添加 1.安装目录\Python27 2.安装目录\Python27\Scripts 3.安装目录\Python36 4.安装目录\Python36\Scripts 三.在安装目录中修改可执行文件 找到python2和python3的安装目录,修改python2.7和python3.6中python.exe和pythonw.ex…
一.apaceh2.4配置 (一).修改apache2.4.29的httpd.conf安装目录文件,第38行 原Define SRVROOT "/Apache24" 修改为(你自己Apache的文件目录)Define SRVROOT "D:/Program Files/Apache24" (二).修改apache2.4.25的httpd.conf源文件存放路径,第247行和248行 原 DocumentRoot "${SRVROOT}/htdocs&quo…
1.下载,安装,配置好Hadoop 2.在IDEA中执行MapReduc 配置: 这里将JAR包加入: JAR包是:/usr/local2/hadoop/share/hadoop 目录下:直接右边+以下几个文件夹 common,common->lib, hdfs,mapreduce,yarn 3.配置完成:…