cdh6.2.1搭建安装
1、为CM安装mysql驱动
4台服务器
将mysql-connector-java-5.1.27-bin.jar拷贝到/usr/share/java路径下,并重命名
mv mysql-connector-java-5.1.27-bin.jar mysql-connector-java.jar
2、CM安装
yct40安装:cloudera-scm-server,cloudera-scm-agent
yct41 安装:cloudera-scm-agent
yct42 安装:cloudera-scm-agent
yct43 安装:cloudera-scm-agent
搭建本地yum源
将压缩包cloudera-repos.tar.gz拷贝到yct40中的一台节点,/home/download
解压到/var/www/html路径下
tar -zxvf cloudera-repos.tar.gz -C /var/www/html
cd /var/www/html/
python -m SimpleHTTPServer 8900
浏览器访问http://192.168.10.40:8900
vim /etc/yum.repos.d/cloudera-manager.repo
输入:
[cloudera-manager]
name=cloudera-manager
baseurl=http://yct40:8900/cloudera-repos/cm6/6.2.1/redhat7/yum/
enabled=1
gpgcheck=0
分发
xsync /etc/yum.repos.d/cloudera-manager.repo
yct40:
yum -y install cloudera-manager-daemons cloudera-manager-agent cloudera-manager-server
yct41:
yum -y install cloudera-manager-agent cloudera-manager-daemons
yct42:
yum -y install cloudera-manager-agent cloudera-manager-daemons
yct43:
yum -y install cloudera-manager-agent cloudera-manager-daemons
修改yct40上CM的配置文件(不用xsync同步)
vim /etc/cloudera-scm-agent/config.ini
server_host=yct40
server_port=7182
3、在mysql中建库
CREATE DATABASE scm DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE amon DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE hue DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE hive DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE sentry DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE oozie DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
为CM配置数据库(cm自带脚本)
/opt/cloudera/cm/schema/scm_prepare_database.sh mysql scm root ycT_big@!123!com
4、启动CM服务
yct40:
systemctl start cloudera-scm-server
systemctl start cloudera-scm-agent
yct41:
systemctl start cloudera-scm-agent
yct42:
systemctl start cloudera-scm-agent
yct43:
systemctl start cloudera-scm-agent
yct40上可通过tail查看日志,出现started jetty server即安装成功
tail -f /var/log/cloudera-scm-server/cloudera-scm-server.log
浏览器访问:http://192.168.10.40:7180
用户名和密码都是admin/admin
5、关闭CM服务
关闭工作节点
43:systemctl stop cloudera-scm-agent
42:systemctl stop cloudera-scm-agent
41:systemctl stop cloudera-scm-agent
40:systemctl stop cloudera-scm-agent
40:systemctl stop cloudera-scm-server
关闭服务节点
40:systemctl stop cloudera-scm-server
6、登录成功以后
欢迎页面
协议页面,选同意
选择免费
到达集群安装页面
给集群命名:yctcluder
选择物理节点:
添加本地parcel库
等待parcel的下载、分配、解压和激活
检查集群网络环境
选择要安装的CDH组件,选择自定义安装
选择需要安装的组件
各组件角色分配
数据库链接测试
各组件基本设置,使用默认
等待安装部署和启动
cdh6.2.1搭建安装的更多相关文章
- 史上最全Windows版本搭建安装React Native环境配置
史上最全Windows版本搭建安装React Native环境配置 配置过React Native 环境的都知道,在Windows React Native环境配置有很多坑要跳,为了帮助新手快速无误的 ...
- Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!) 一.JDK的安装 安装位置都在同一位置(/usr/tools/jdk1.8.0_73) jdk的安装在克隆三台机器的时候可以提前安装 ...
- Hadoop集群搭建安装过程(二)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(二)(配置SSH免密登录)(图文详解---尽情点击!!!) 一.配置ssh无密码访问 ®生成公钥密钥对 1.在每个节点上分别执行: ssh-keygen -t rsa(一 ...
- 史上最详细Windows版本搭建安装React Native环境配置 转载,比官网的靠谱亲测可用
史上最详细Windows版本搭建安装React Native环境配置 2016/01/29 | React Native技术文章 | Sky丶清| 95条评论 | 33530 views ...
- 【转】android 最新 NDK r8 在window下开发环境搭建 安装配置与使用 详细图文讲解,完整实际配置过程记录(原创)
原文网址:http://www.cnblogs.com/zdz8207/archive/2012/11/27/android-ndk-install.html android 最新 NDK r8 在w ...
- android 最新 NDK r8 在window下开发环境搭建 安装配置与使用 详细图文讲解,完整实际配置过程记录(原创)
android 最新 NDK r8 在window下开发环境搭建 安装配置与使用 详细图文讲解,完整实际配置过程记录(原创) 一直想搞NDK开发却一直给其他事情耽搁了,参考了些网上的资料今天终于把 ...
- Android NDK r8 Cygwin CDT 在window下开发环境搭建 安装配置与使用 具体图文解说
版权声明:本博客全部文章均为原创.欢迎交流.欢迎转载:转载请勿篡改内容,而且注明出处,谢谢! https://blog.csdn.net/waldmer/article/details/3272500 ...
- bay——vSphere Oracle12cR2的RAC搭建安装之配置共享存储 - 副本
vSphere Oracle12cR2的RAC搭建安装之配置共享存储 https://blog.csdn.net/yuzifen/article/details/82496503 一.第一台机器添加两 ...
- CDH6.1.0离线安装——笔记
一. 概述 该文档主要记录大数据平台的搭建CDH版的部署过程,以供后续部署环境提供技术参考. 1.1 主流大数据部署方法 目前主流的hadoop平台部署方法主要有以下三种: Apache hadoop ...
随机推荐
- 基于Scrapy的B站爬虫
基于Scrapy的B站爬虫 最近又被叫去做爬虫了,不得不拾起两年前搞的东西. 说起来那时也是突发奇想,想到做一个B站的爬虫,然后用的都是最基本的Python的各种库. 不过确实,实现起来还是有点麻烦的 ...
- Delphi获取文件名、不带扩展名文件名、文件所在路径、上级文件夹路径的方法
1.获取不带扩展名的文件名方法,利用ChangeFileExt函数修改传入参数的扩展为空,并不会对文件本身产生变更. ChangeFileExt(ExtractFileName('D:\KK\Test ...
- CS231n 斯坦福李飞飞视觉识别课程
本文是个人在学习<CS231n 斯坦福李飞飞视觉识别课程>的学习笔记. 第一讲:课程简介 课时1 计算机视觉概述 课时2 计算机视觉历史背景 课时3 课程后勤 选读书籍<DeepLe ...
- ls -bash: ls: command not found
ls -bash: ls: command not found原因:在设置环境变量时,编辑profile文件没有写正确,导致在命令行下 ls等命令不能够识别.解决方案: export PATH=/us ...
- math库常用函数
- Flutter中的绘图(Canvas&CustomPaint)API
本文是Flutter中Canvas和CustomPaint API的使用实例. 首先看一下我们要实现的效果: 结合动图演示,列出最终目标如下: 在程序运行后,显示一个小球: 每次程序启动后,小球的样式 ...
- 如何验证 names(名称), e-mails(邮件), 和 URLs
PHP 表单 - 验证邮件和URL 本章节我们将介绍如何验证 names(名称), e-mails(邮件), 和 URLs. PHP - 验证名称 以下代码将通过简单的方式来检测 name 字段是否包 ...
- PHP is_string() 函数
is_string() 函数用于检测变量是否是字符串. PHP 版本要求: PHP 4, PHP 5, PHP 7高佣联盟 www.cgewang.com 语法 bool is_string ( mi ...
- PHP convert_uuencode() 函数
实例 编码字符串: <?php$str = "Hello world!";echo convert_uuencode($str);?>高佣联盟 www.cgewang. ...
- linux的文件系统管理(ext4-tune2fs-e2fsck-xfs文件系统)
文件系统管理 文件系统是Linux系统存放文件的空间.文件系统的类型有很多种,CentOS支持多种文件系统,目前常用的是ext4和xfs文件系统.我们以ext4文件系统为例来说明对文件系统的管理. U ...