HDP2.4安装(六)：小结与回顾

【HDP2.4安装(六)：小结与回顾】的更多相关文章

HDP2.4安装(六)：小结与回顾

基于Centos7安装过程中常用工具及操作技术总结回顾. 操作技巧: tab键,命令自动补全 xshell 默认: Ctrl + Insert (复制) Shift + Insert (粘贴) systemctl 服务操作命令: systemctl start postfix.service 启动一个服务 systemctl stop postfix.service 关闭一个服务 systemctl restart postfix.servi…

Diskpart命令安装系统小结

<diskpart命令安装系统小结> 今天给同学安装系统,win8改win7.同学是预装了win8的联想y480,分区表采用的是GPT格式,捣鼓了半天才知道.GPT格式是新式的分区格式,相对于传统的MBR分区格式来说他的优点有:支持2T以上磁盘容量,MBR最多支持到2T:最多支持128个主分区,MBR只支持4个.总的来说,是一项新技术.但是我认为不好的地方在于,GPT是基于EFI(可扩展固件接口)的,所以要用它必须要换支持EFI的主板.而且貌似只能安装64的系统.而对于广大的使用电脑的老百姓来…

u-boot(六)小结

目录 u-boot(六)小结概述内存分布内核交互参数 title: u-boot(六)小结 tags: linux date: 2018-09-27 23:23:05 --- u-boot(六)小结概述 uboot 进行硬件的初始化,复制内核,将内核移动到加载地址,跳转到内核code的入口点(广义的main函数),这个函数接受机器ID用来判断是否支持启动该单板,接受一个参数地址用来得知内存大小,根文件系统位置,内核打印信息在哪个串口输出等.并且得到该运行的第一个应用程序. 命令搜索cm…

ubuntu 安装jdk7小结（转载）

ubuntu 安装jdk7小结目录(?)[+] ubuntu 安装jdk7,现在来总结一下:第一步:下载jdk-7-linux-i586.tar.gz直接在ORACLE的官网中下载就可以:http://www.oracle.com/technetwork/java/javase/downloads/java-se-jdk-7-download-432154.htmlPS:要注意系统版本的选择,32位还是 64位,uname -a 命令即可知道答案.第二步:解压安装接着就是解压tar.gz的文…

HDP2.4安装(五)：集群及组件安装

HDP(Hortonworks Data Platform)是hortworks推出的100%开源的hadoop发行版本,以YARN 作为其架构中心,包含pig.hive.phoniex.hbase.storm.spark等大量组件,在最新的2.4版本,监控UI实现与grafana集成,包含组件版本对应图如下:(图片来自hortonwork官网) 安装过程: 集群规划环境准备软件包下载: (HDP2.4的安装包过大,推荐离线安装) HDP安装部署集群规划: 192.168.2.89 …

HDP2.4安装(四)：ambari安装

ambari是apache基金会的开源项目,它的优势在于巧妙溶合已有的开源软件,提供集群自动化安装.中心化管理.集群监控.报警等功能.据Hortonwork官方资料介绍,不同的HDP版本,对ambari的版本也有不同的要求(如下图,来源于hortonwork官网),在安装HDP2.4的过程中,选择的ambari版本为2.2.2.0 安装过程: 软件包下载 (ambari-2.2.2.0-centos7.tar.gz) 本地源制作 (ambari.repo) ambari安装数据库配置…

HDP2.4安装(二)：Centos7配置

Centos7 Minimal Install 安装完成后是不支持上网的,并且大部分常用的软件也未安装,首先要解决的问题就是网络配置.当网络配通后,即可通过Xshell或其它工具来远程进行操作与管理,推荐工具 XShell (可在window下远程操作和控制linux主机).winSCP(windows与linux系统之间文件上传与下载), 虽然也可以在xshell中执行xz.rz命令完成上面的操作,但对于比较大的文件,winSCP工具传送的速度比较快. 配置步骤: 网络配置常用软件安装配置…

HDP2.4安装(一)：Centos7安装

在进入大数据领域来,一直使用微软的Azure HDInsight,当前在中国区仅支持在Windows系统上部署集群,虽然创建的过程很简单,但对于开发人员来说,就是一个黑盒子,在更深入的研究和开发扩展的过程中,遇到了不少麻烦.因此准备在本地手工搭建自己的HDP2.4集群进行研究和学习, 第一步通过VMWare创建虚拟机节点,安装操作系统,通过对比选择Centos7. 安装过程: 软件下载创建虚拟机 Centos配置下载软件包: 虚拟机工具软件: VMware-workstation-full…

Linux软件安装方法小结（附：rpm详解）（转载）

在使用Linux系统的过程中,软件包的安装是避免不了的,在Linux下,软件安装程序的种类很多,安装方法也各式各样,(舒适性自然比不上windows :-))不过我们常见的软件包有两种: 1)含有软件的源代码的压缩包,解压后需要手动编译.这种软件安装包通常是用gzip压缩过的tar包(后缀为.tar.gz). ./configure (配置) make (编译)make install (安装)make clean (卸载) 注:典型的源代码包可以这样安装,但不都是这样,如webmin要执行其目…

SVN安装使用小结

SVN在实际的项目开发中有很广泛的用途.一开始接触SVN(Subversion),思路并不清楚,现在总算理清了. 声明:本文并不是系统地对SVN做介绍,而是笔者的使用总结,个人认为的一些要点,可能对初学者更加有用. 1.SVN结构 SVN其实也是一种C/S结构,我们的电脑一般是客户端,当然也可以作为服务端. 这里需要声明,B/S结构本质上也是一种特殊的C/S结构,所以如果你知道你的SVN服务器地址,用浏览器也可以访问. 我们为什么要用SVN呢?我认为有两方面的作用: 版本控制. 文档共享,不需要…

CentOS下Redis安装配置小结

Redis是REmote DIctionary Server的缩写. 是一个使用 C 语言写成的,开源的 key-value 非关系型数据库.跟memcached类似,不过数据可以持久化. Redis的所有数据都保存在内存中,然后不定期的通过异步方式保存到磁盘上(称为“半持久化模式”):也可以把每一次数据变化都写入到一个append only file(aof)里面(称为“全持久化模式”). 要想成功使用一种产品,我们需要先深入了解它的特性. 安装下载源码: $ #当有10条Keys数据被改变…

cloudera manager安装步骤小结

1.准备三台虚拟机,系统是centos 7,IP分别是: 192.168.254.110 master 192.168.254.111 slave1 192.168.254.112 slave2 2.如果没有httpd服务的话需要在master上安装一个httpd: 1) yum install httpd #(安装) 2) systemctl start httpd.service #(启动) 3.配置ssh免密码登录: 具体操作请见我的另一篇文章<Hadoop2.6.0在CentOS 7中…

Hadoop-1.2.1 安装步骤小结（ubuntu）

1.安装ubuntu系统如果不使用云服务器,可以使用虚拟机WmWare安装,具体安装步骤这里就不讲了,ubuntu系统下载地址:http://www.ubuntu.com/download/desktop 2.修改源列表(非必要步骤) ubuntu的源列表默认是欧洲服务器,下载JDK之类的开源工具比较慢,建议大家修改下: 备份源列表,并修改文件: sudo cp /etc/apt/sources.list /etc/apt/sources.list_backup gedit /etc/apt/…

HDP2.4安装(三)：MySql安装

在安装Ambari时,Ambari默认的数据库是ProstgreSQL,对ProstgreSQL不太熟悉,选择使用MySql. 但Centos 7 默认支持的是MariaDB数据库. MariaDB是MySQL的一个分支,主要由开源社区在维护.安装过程中先将Centos7默认安装的MariaDB数据库删除,再重新安装MySql. 安装步骤: 软件下载 (mysql的rpm包有很多文件,只需要安装Server 和 Client) 数据库安装用户权限配置安装目录及功能常用创建用户方法客户端…

Centos安装软件小结-20160325

三种安装包 bin包 rpm包源码包 1.bin包 1.先赋予权限: chmod 777 *.bin 2.开始安装: ./.bin 2.rpm包(以jdk为例)\ yum search jdk\ yum -y install jdk\ 2.rpm包(以jdk为例) yum search jdk\ yum -y install jdk\ 3.源码包(以Nginx例) 安装源码的编译环境(一般是rpm包) 解决依赖关系 make(编译) make install(安装) 来自为知笔记(Wiz)…

log4c 编译安装简单小结（ubuntu12）

1 下载源码,解压 (假定解压到了当前用户的根目录下,位置是~/log4c-1.2.3) 2 编译安装log4c(指定--prefix极其重要,如果没有指定到/usr下会有一堆麻烦事,还有,不能按照他的README里说的,指定到/path/of/installation,因为这样真的会在根目录下建立这样的目录) cd ~ .tar.gz mkdir build; cd build ../log4c-/configure --prefix=/usr/local/log4c make make in…

WPF安装部署小结

开机启动右击"MySetup">>"视图">>"注册表",在"HKEY_LOCAL-MACHINE"文件夹下新建键"Software">>"Microsoft">>"Windows">>"CurrentVersion">>"Run",在"Run&…

Scrapy框架安装配置小结

Windows 平台: 系统是 Win7 Python 2.7.7版本官网文档:http://doc.scrapy.org/en/latest/intro/install.html 1.安装Python 电脑中安装好 Python 2.7.7 版本,安装完之后需要配置环境变量,比如我的安装在D盘,D:\python2.7.7,就把以下两个路径添加到Path变量中 1 D:\python2.7.7;D:\python2.7.7\Scripts 配置好了之后,在命令行中输入 python –…

Mac安装 Storm 小结

Strom 安装&部署本地执行:Storm Topology是可进行本地运行的, 必须在发布前进行本地测试, 以确保代码本身业务逻辑没有问题( Windows也可执行, 但是由于权限等原因, 执行时可能会报错, 但不影响执行结果). 本地集群执行: Storm的本地集群搭建只能在UNIX架构的系统上执行, 相对于本地测试来说, 本地集群测试可以暴露更多的问题(比如文件路径, 权限等), 像是真正的将Topology提交到生产集群一样. Storm 相关网站: 并发编程网-Storm, 官网St…

Python安装、配置图文详解(转载)

Python安装.配置图文详解目录: 一. Python简介二. 安装python 1. 在windows下安装 2. 在Linux下安装三. 在windows下配置python集成开发环境(IDE) 1. 在Eclipse中安装PyDev插件 2. 配置Python Interpreters 四. 创建Python Project 五. 编写HelloWorld 六. 小结一. Python简介: Python在Linux.windows.Mac os等操作系统下都有相应的版本,不管在…

hadoop(二):hdfs HA原理及安装

早期的hadoop版本,NN是HDFS集群的单点故障点,每一个集群只有一个NN,如果这个机器或进程不可用,整个集群就无法使用.为了解决这个问题,出现了一堆针对HDFS HA的解决方案(如:Linux HA, VMware FT, shared NAS+NFS, BookKeeper, QJM/Quorum Journal Manager, BackupNode等); 在HA具体实现方法不同的情况下,HA框架的流程是一致的, 不一致的就是如何存储和管理日志.在Active NN和Standby N…

【和我一起学python吧】Python安装、配置图文详解

Python安装.配置图文详解目录: 一. Python简介二. 安装python 1. 在windows下安装 2. 在Linux下安装三. 在windows下配置python集成开发环境(IDE) 1. 在Eclipse中安装PyDev插件 2. 配置Python Interpreters 四. 创建Python Project 五. 编写HelloWorld 六. 小结一. Python简介: Python在Linux.windows.Mac os等操作系统下都有相应的版本,不管…

在Ubuntu 12.10 上安装部署Openstack

OpenStack系统有几个关键的项目,它们能够独立地安装但是能够在你的云计算中共同工作.这些项目包括:OpenStack Compute,OpenStack Object Storage,OpenStack Identity Service,以及OpenStack Image Service.你可以独立地安装这些项目中的任何一个,然后即可以独立也可以把它们作为一个联合体来配置.这个指导手册指导用有用的包(packages)在ubuntu12.10上的一个安装.这个手册也提供了一个与给出的配置文…