之前已经完成了Hadoop集群.Hbase集群.Hive的搭建, 这次来安装一下flume-1.9.0 安装过程 将tar包上传并解压到指定目录, 并修改名称 tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /opt/ronnie cd /opt/ronnie/ mv apache-flume-1.9.0-bin/ flume-1.9.0 进入flume配置文件目录, 拷贝一份环境配置文件并修改 cd flume-1.9.0/conf/ cp flume-e…

ZooKeeper介绍 ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件.它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护.域名服务.分布式同步.组服务等. ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效.功能稳定的系统提供给用户. ZooKeeper包含一个简单的原语集, [1] 提供Java和C的接口. 官网:https://zookeep…

下载解压到/usr/local/flume 配置环境变量 export FLUME_HOME=/usr/local/flume export FLUME_CONF_DIR=$FLUME_HOME/conf export PATH=.:$PATH::$FLUME_HOME/bin 在conf里配置flume-env.sh  添加jdk路径 export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 flume-ng version 验证是否安装成功 roo…

1.RabbitMQ安装 1.1下载并安装Erlang https://www.erlang.org/downloads 一直点next就安装好了.我直接使用了默认的安装目录.否则的话,应该需要配置一下环境变量吧. 1.2下载并安装RabbitMQ https://www.rabbitmq.com/download.html 也是一直点next,同样使用了默认的安装目录. 2.配置RabbitMQ 2.1激活RabbitMQ's Management Plugin 打开命令提示符,按下图输入 这…

折腾了这么久,hbase终于装好了 ------------------------- 上篇: Hadoop3集群搭建之——虚拟机安装 Hadoop3集群搭建之——安装hadoop,配置环境 Hadoop3集群搭建之——配置ntp服务 Hadoop3集群搭建之——hive安装 在安装之前,查了一下资料,关于hbase与hadoop兼容性的. 最开始看hadoop的时候,在好像慕课网上看的,hadoop全家桶之间的兼容性问题(以前被java web的各种jar包坑坏了的Java菜鸟,心理有点小阴影…

storm的安装比较简单,下面以storm的单节点为例说明storm的安装步骤. 1.storm的下载 进入storm的官方网站http://storm.apache.org/,点击download按钮,进入下载页面. 选择并下载apache-storm-0.9.6.tar.gz 2.安装 1.解压安装文件到制定的目录,并把storm加入到环境变量 .tar.gz -C /opt/ cd /opt storm sudo vi /etc/profile export STORM_HOME=/opt…

和安装其他软件一样,安装Docker也需要一些基本的前提条件.Docker要求的条件具体如下: 运行64位CPU构架的计算机(目前只能是x86_64和amd64),Docker目前不支持32位CPU. 运行Linux3.8或更高版本的内核. 内核必须支持一种适合的存储驱动(storage driver),例如: Device Manager: AUFS: vfs: btrfs: 默认存储驱动通常是Device Manager. 内核必须支持并开启cgroup和命名空间(namespace)功能.…

MySQL数据库安装与配置详解 MySQL的安装请参考下面这篇博客,讲述的非常详细,各种截图也很清晰.http://www.cnblogs.com/sshoub/p/4321640.html MySQL简单操作 大家可以安装下面的这个博客来进行一些简单的MySQL的操作,讲得非常详细,有语法和具体实例.http://www.runoob.com/mysql/mysql-tutorial.html 创建一个表书名 出版社CREATE TABLE runoob_tbl( runoob_id INT…

红帽企业或CentOS的Linux上安装MongoDB的社区版: https://docs.mongodb.com/manual/tutorial/install-mongodb-on-red-hat/ 一.安装 1.配置yum源,在yum源目录下创建一个文件 mongodb-org-4.0.repo vi /etc/yum.repos.d/mongodb-org-4.0.repo 2.编辑文件:把下面内容复制进去 [mongodb-org-4.0] name=MongoDB Repositor…

python支持对mysql的操作 已经安装配置成功python.mysql 之后根据各自电脑配置选择对应系统的MySQL-python 文件是EXE格式.打开下一步即可 下载地址博主分享下: http://pan.baidu.com/s/1c2uhVwc 安装成功.在IDLE中输入: import MySQLdb 查看是否安装成功 下面是一些简单的使用代码: #!/usr/bin/env python # -*- coding: utf_8 -*- import MySQLdb import…