环境: CentOS7安装两个节点:master.slave1.并配置ssh无密码登录. 步骤: 获取 Ambari 的公共库文件(public repository): wget http://public-repo-1.hortonworks.com/ambari/centos6/2.x/updates/2.0.1/ambari.repo 将下载的 ambari.repo 文件拷贝到 Linux 的系统目录/etc/yum.repos.d/.拷贝完后,我们需要获取该公共库的所有的源文件列表.…

ambari版本 :2.4.2 (不过各版本安装过程没啥差异) 目录: 为什么要用Ambari 概念概述 版本信息 原理简介 安装 创建集群 创建集群 手动修改配置 NameNode HA 安装SmartSense 二次开发 Ambari的升级 相关错误 为什么要用Ambari Ambari 是 Apache Software Foundation 中的一个顶级项目.就 Ambari 的作用来说,就是创建.管理.监视 Hadoop 的整个生态圈产品(例如 Hive,Hbase,Sqoop,Zoo…

一.集群软硬件环境准备: 操作系统:  centos 7 x86_64.1804 Ambari版本:2.7.0 HDP版本:3.0.0 HAWQ版本:2.3.05台PC作为工作站: ep-bd01 ep-bd02 ep-bd03 ep-bd04 ep-bd05 其中ep-bd01作为主节点,用于安装ambari-server. 二.配置操作系统,安装必备软件 1,安装CentOS 7操作系统:环境配置,安装必备软件. 2,安装配置NTP服务,保证集群时间保持同步,以防止由于时间不同而造成掉线故障…

安装步骤总体说明 1.安装以前需要先规划服务器,一台主机多台从机.主从需要设置时间同步和免密. 2.建立离线源,因在线安装速度很慢,所以需要建立离线源. 3.在主机上安装Ambari,进入系统后,挂接从机安装软件. 可以先在主机上建立离线源,安装ambari后,再配置从机也可以.但是域名最好先规划好. 规划服务器(这里用四台服务器来进行配置) 在每台服务器上配置域名访问 vi /etc/hosts    添加以下内容 172.18.100.71 master1 172.18.100.70 age…

准备工作: 新下载的centos7 安装 createrepo,用于制作源 yum install createrepo 安装java (推荐 java 1.7以上版本,如果有,则跳过此步骤) yum install java 安装高版本的openssl(各个host都需要安装,否则在ambari中安装服务的时候,会注册失败) yum install openssl 安装nc和redhat-lsb(hadoop和hbase都有依赖) yum install nc yum install redh…

1. 参考说明 参考文档: https://docs.hortonworks.com/HDPDocuments/Ambari-2.6.1.5/bk_ambari-installation/content/ch_Getting_Ready.html 2. 安装环境说明 2.1. 环境说明   主控终端 计算终端1 计算终端2 计算终端2 主机名 master.smartmap.com server1.smartmap.com server2.smartmap.com server3.smartma…

之前安装大数据组件都是一个一个手动安装的,最多弄一个脚本自动安装.手动安装麻烦不说,还没有可以监控集群的可视化界面,而且组件的稳定性也是个问题. 所以我们应该试一试HDP和CDH这种企业级的hadoop技术栈. CDH用的人最多,我本来想安装一个社区版的CDH,可惜社区版的官网打开之后样式乱了,根本没法儿看.所以我选择了HDP.HDP是完全免费的,而且基本上跟apache的hadoop保持同步.HDP使用ambari来安装,ambari虽然功能相对弱了一些,不过我感觉基本够用了.可以安装各种服务…

安装ambari有两种方式,一是自己下载源码编译,另外一个是使用公共仓库 1 使用Public Respositories Step1: Download the Ambari repository on the Ambari Server host For Redhat/CentOS/Oracle:   cd /etc/yum.repos.d/   wget <ambari-repo-url>   For SUSE:   cd /etc/zypp/repos.d   wget <amb…

制作本地yum源 安装步骤: 先建立本地yum源(Ambari和HDP的) 1. 先安装 ambari 然后http://localhost:8080 登录进去,设置 hdp的源链接. 2. 安装HDP 注意一定要对应好版本 以下是 tar.gz的下载地址. ambari安装包 Ambari Repositories http://docs.hortonworks.com/HDPDocuments/Ambari-2.1.0.0/bk_Installing_HDP_AMB/content/_hdp…

安装 Ambari,最后是为了用它部署 hadoop 集群.安装时默认使用的是 hortonworks 远程的资源,用它部署集群时,需要下载 Hadoop.Hive.HBase 的安装包,速度很慢.我部署时,老是失败.所以按照官方文档,建一个本地资源库.预先下载好包,放在一台电脑上,然后把这台电脑配置成 repository. 1. 下载下面的包 wget http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.7.3.…