最近在研究数据挖掘相关的东西,在本地 Mac 环境搭建了一套伪分布式的 hadoop 开发环境,采用CDH发行版本,省时省心. 参考来源 How-to: Install CDH on Mac OSX 10.9 Mavericks 官网这篇文章有的地方格式不对,部分链接也失效,运行时还会有一些问题,所以这里重新记录如下. 安装 JDK JDK 1.8 下载地址 安装完成后路径应该是 /Library/Java/JavaVirtualMachines/jdk1.8.x_xx.jdk/Contents

关于CDH和Cloudera Manager CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境. Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件,对集群中主机.Hadoop.Hive.Spark等服务的安装配置管理做了极大简化. 系统环

CDH构建大数据平台-使用自建的镜像地址安装Cloudera Manager 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任.   一.搭建CM私有仓库 详情请参考我的笔记: https://www.cnblogs.com/yinzhengjie/p/10412455.html. 1>.安装web服务器并启动  [root@node105 ~]# yum -y install httpd Loaded plugins: fastestmirror Loading mirror s

问题:mac安装tensorflow过程中,爆出oserror:permission denied 解决方案:关闭mac的sip,然后sudo安装 关闭sip的方法:重启mac,按住command+R,进入命令行,输入csrutil disable,重启电脑

Mac 安装activate-power-mode atom 标签: atommac 2015-12-02 14:53 308人阅读 评论(0) 收藏 举报  分类: git(2)  版权声明:本文为博主原创文章,未经博主允许不得转载. 先不废话,上效果图  最近被这个atom的效果图刷屏了,所以自己也跃跃欲试来尝试一下,我的操作系统是mac OS X El Caption,版本10.11.1,陈述一下这个过程中遇到的一些问题. 安装atom.第一步当然是要安装atom了,附上mac版下载地址A

Mac安装ctags mac 系统有自带的ctags,但是不支持"ctags -R"指令,需要自己在安装Exuberant Ctags 1.下载ctags 2. 安装 ./configure --prefix=$HOME //指定安装路径 make make install 3. 设置路径 在.profile文件中导入新安装的ctags的路径 export PAHT="$HOME/bin:$PATH"

ubuntu php 安装swoole 比较容易 1. 从git下载源码 2. 下载pcre http://sourceforge.net/projects/pcre/files/pcre/8.36/ ./configure make &make install 3. 进入swoole 源码 phpize ./cofigure make &make install 编辑php.ini 添加extension = swoole.so 重启apache 生效 mac 安装swoole 我的ma

Mac安装Scrapy Mac版本 10.11 El Captain. 前一段想在Mac上用Scrapy,各种问题.有一个不错的工具:Anaconda. 安装Anaconda 下载地址 我还是下python2_7版本的,Scrapy在这个版本是最稳定的. bash Anaconda2-4.1.1-MacOSX-x86_64.sh 换更新源 默认的源在国外,国内使用的时候速度不是很快,可以换成清华TUNA的源: conda config --add channels 'https://mirror

1.brew search nginx 2.brew install nginx 启动nginx ,sudo nginx ;访问localhost:8080 发现已出现nginx的欢迎页面了. 备注: ln -s  /usr/local/sbin/nginx /usr/bin/nginx 做个软连接.[——根据具体目录而定]常用的指令有: nginx -V 查看版本,以及配置文件地址nginx -v 查看版本nginx -c filename 指定配置文件nginx -h 帮助 #重新加载配置|

一.安装mongo数据库 下载链接https://www.mongodb.org/downloads, 在执行如下命令的时候事先按照目录新建如下的目录:(如果数据库安装在D盘就在D盘的根目录下建)"C:\data\dbConf\mongodb.log""C:\data\db" 为了从命令提示符下运行MongoDB服务器,你必须从MongoDB目录的bin目录中执行mongod.exe文件:mongod.exe --bind_ip 127.0.0.1 --logpat

记得2015年在mac系统上安装过一次caffe,非常顺利,但是最近群里许多同学反映mac安装caffe出现了各种问题,同时我也在帮助别人安装caffe的时候也遇到了一些坑,不再像以前这么顺利了.估计与操作系统,caffe升级有关.今晚我重新装了一遍caffe,记录下了整个安装过程,希望对各位同学有用.mac os 版本:10.11.4xcode 版本: 7.2 1. 安装Homebrew homebrew是一个包管理器,是用来安装各种包的安装器.安装方法也很简单,直接看主页吧.http://b

Cloudera Manager Server和Agent所有后发先至.也能够进行CDH5的安装和配置. 然后,主节点可以通过浏览器访问7180port测试(因为CM Server需要花时间来启动,可能要等待一会才干訪问),默认的username和password均为admin. 制作本地源 先下载CDH到本地http://archive-primary.cloudera.com/cdh5/parcels/5.3.4/, 这里须要下载三样东西. 首先是与自己系统版本号相相应的parcel包,然后

mac安装linux 安装linux,分为两步: 1. 制作linux启动U盘 2. 通过启动U盘,安装Ubuntu系统 Mac OS X下创建USB启动盘 格式化USB驱动盘 下载Ubuntu桌面版本,Ubuntu有mac版本 ISO转成IMG格式 hdiutil convert -format UDRW -o ~/Path-to-IMG-file ~/Path-to-ISO-file 获得USB盘设备号 Mac OS X中创建可启动的USB驱动盘 完成可启动USB驱动盘处理 注意:上面,我只

Mac安装的Mysql5.7.10 执行mysql -u root -p 就要求输入密码,但是新安装是没密码的.然后就会报错. ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO) 百度Google很久才把问题解决,下面是解决方法: 1.关闭MySQL服务: 执行sudo /usr/local/mysql/support-files/mysql.server stop或者在系统偏好设置

MAC 安装Ruby On Rails 对于新入门的开发者,如何安装 Ruby, Ruby Gems 和 Rails 的运行环境可能会是个问题,本页主要介绍如何用一条靠谱的路子快速安装 Ruby 开发环境. 次安装方法同样适用于产品环境! 1. 安装系统必备开发组件XCODE 打开AppStore,搜索XCODE,下载安装. 2.打开终端,安装Homebrew. ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/in

mac安装GNU命令行工具 2.添加的repo     tap home/dupes        brew install coreutils  binutils  diffutils  ed --default-names  findutils --default-names  gawk  gnu-indent --default-names  gnu-sed --default-names  gnu-tar --default-names  gnu-which --default-name

linux有命令行工具 apt-get ,Mac 下也有类似的brew 也就是HomeBrew 网址:http://brew.sh/index_zh-cn.html 可以看到mac安装的时候只需要执行一条命令即可: ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)" 之后如图所示: 之后在安装brew 的套件 brew install wget 等待安装完成后

MAC安装Securecrt破解(复制自:http://www.cnblogs.com/wulaoer/p/5538721.html)   在使用mac的时候有点不太习惯,主要原因是因为在用windows的时候有很多的软件都用习惯了一下改变有点适应不了.所以有很多朋友使用mac本儿使用window系统,这事有点..........我感觉我自己做不出来,呵呵. 我先说一下我在网上找到的安装方式,其实都差不多,只是比别人的详细,最起码你按照我的方法可以按照好,因为我按照别人的方法都没有按照好.下面开

1,mac安装homebrew,注意不能用root权限安装 #ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)" 2,在github注册一个账号,https://github.com/settings/applications#personal-access-tokens 创建一个token 3,在#cd  ~/ #vi .bash_profile 输入内容:

关于CDH和Cloudera Manager CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境. Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件,对集群中主机.Hadoop.Hive.Spark等服务的安装配置管理做了极大简化. 环境说

因公司接口协议是PB文件,需要将 PB 编译成JAVA文件,且MAC 电脑,故整理并分享MAC安装 google 下的protobuf 文件   MAC 安装protobuf 流程 1.下载 https://pan.baidu.com/s/1skOyblb 提取码: dmjs     2.编译 #cd protobuf (切换到protobuf 目录) #./autogen.sh #./configure   3.安装 #make install 4.查看 #protoc --version