CentOS7安装配置redis5集群

一.服务器准备本文准备了3台服务器 , 分别是 172.18.0.231 172.18.0.232 172.18.0.233 每台运行2个redis实例, 端口分别为7000 7001 ,即总共6个redis节点二.安装必要包并配置环境 yum install gcc 调整服务器参数 , 以得到最大性能 1.调整服务器最大文件打开数打开文件 /etc/security/limits.conf 在最后加入以下文件 , 并保存 * 代表所有方式 - 代表 both hard and soft…

Linux中安装配置spark集群

一. Spark简介 Spark是一个通用的并行计算框架,由UCBerkeley的AMP实验室开发.Spark基于map reduce 算法模式实现的分布式计算,拥有Hadoop MapReduce所具有的优点:但不同于Hadoop MapReduce的是Job中间输出和结果可以保存在内存中,从而不再需要读写HDFS,节省了磁盘IO耗时,性能比Hadoop更快. 所以,相对来说Hadoop更适合做批处理,而Spark更适合做需要反复迭代的机器学习.下面是我在ubuntu14.04中配置Spark…

Linux中安装配置hadoop集群

一. 简介参考了网上许多教程,最终把hadoop在ubuntu14.04中安装配置成功.下面就把详细的安装步骤叙述一下.我所使用的环境:两台ubuntu 14.04 64位的台式机,hadoop选择2.7.1版本.(前边主要介绍单机版的配置,集群版是在单机版的基础上,主要是配置文件有所不同,后边会有详细说明) 二. 准备工作 2.1 创建用户创建用户,并为其添加root权限,经过亲自验证下面这种方法比较好. sudo adduser hadoop sudo vim /etc/sudoers…

CentOS7 安装Redis Cluster集群

上一篇中已经讲到了如何安装单击版Redis,这一篇我们来说下如何安装Cluster,关于哨兵模式这里我就不写文章安装了,有兴趣的同学可以自己去研究,哨兵模式可以在主从模式下在创建三台机器的哨兵集群监控redis主从集群即可. 本文由于我是在windows上创建的虚拟机,所以是每台机器上部署2个实例,一共三台机器6个实例.生产环境中建议都是说在6台机器上去搭建,至少3台机器,保证,每个master都跟自己的slave不在同一台机器上,如果是6台自然更好. 1,准备条件首先需要在三台机器上分别安装…

安装配置Spark集群

首先准备3台电脑或虚拟机,分别是Master,Worker1,Worker2,安装操作系统(本文中使用CentOS7). 1.配置集群,以下步骤在Master机器上执行 1.1.关闭防火墙:systemctl stop firewalld.service 1.2.设置机器ip为静态ip 1.2.1.修改配置 cd /etc/sysconfig/network-scripts/ vim ifcfg-eno16777736 更改内容如下: BOOTPROTO=static #配置静态IP,网关,子网…

离线环境下使用二进制方式安装配置Kubernetes集群

本文环境 Redhat Linux 7.3,操作系统采用的最小安装方式. Kubernetes的版本为 V1.10. Docker版本为18.03.1-ce. etcd 版本为 V3.3.8. 1. 准备规划 1.1 Node 规划主机名地址角色 devops-101 192.168.0.101 k8s master devops-102 192.168.0.102 k8s node 1.2 Network 网络 1.3 安装文件 Kubernetes安装需要以下二进制文件: etcd d…

hadoop集群环境搭建之安装配置hadoop集群

在安装hadoop集群之前,需要先进行zookeeper的安装,请参照hadoop集群环境搭建之zookeeper集群的安装部署 1 将hadoop安装包解压到 /itcast/ (如果没有这个目录可以先自行创建之) tar -zxvf hadoop-2.6.4.tar.gz -C /itcast 2 配置HDFS(hadoop2所有的配置文件都在$HADOOP_HOME/etc/hadoop目录下) 2.1将hadoop添加到环境变量中,可以在一台机器上添加,然后发送给其他节点 vim /e…

架构（三）MongoDB安装配置以及集群搭建

一安装 1.1 下载MongoDB 我个人不太喜欢用wget url, 之前出现过wget下载的包有问题的情况 https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-3.4.7.tgz 1.2 上传服务器并解压 tar -zxvf mongodb-linux-x86_64-3.4.7.tgz 1.3 移动到/data/program/software/mongodb mv mongodb-linux-x86_64-3.4.7/ /data/…

elasticsearch安装与使用（2）-- centos7 安装测试的集群工具elasticsearch head

elasticsearch-head是elasticsearch(下面称ES)比较普遍使用的可监控.测试等功能的集群管理工具,是由H5编写的单独的网页程序.使用方法网上很多,这里教大家一个超简单安装head的方法. 只用一个命令即可安装: 进入elasticsearch的安装目录,我的是在/usr/share/elasticsearch目录下 cd /usr/share/elasticsearch 安装:bin/plugin install mobz/elasticsearch-head 卸载:…

Hadoop2.2集群安装配置-Spark集群安装部署

配置安装Hadoop2.2.0 部署spark 1.0的流程一.环境描写叙述本实验在一台Windows7-64下安装Vmware.在Vmware里安装两虚拟机分别例如以下主机名spark1(192.168.232.147),RHEL6.2-64 操作系统,usernameRoot 从机名spark2(192.168.232.152).RHEL6.2-64 操作系统,usernameRoot 二.环境准备 1.防火墙禁用.SSH服务设置为开机启动.并关闭SELINUX 2.改动hosts文件…

linux(centos8):安装配置consul集群(consul 1.8.4 | centos 8.2.2004)

一,什么是consul? 1,Consul 是 HashiCorp 公司推出的开源软件,用于实现分布式系统的服务发现与配置. Consul 是分布式的.高可用的. 可横向扩展的 2,官方网站: https://www.consul.io/ 3,Consul 集群间使用了 Gossip 协议通信和 raft 一致性算法 4,Consul和Eureka的不同之处: Eureka只需要在项目中加入服务端依赖,就可以作为服务端使用: Consul需要从官网下载,并单独安装 5,本…

CentOS7安装配置redis5.0.5

一.安装必需包gcc yum install gcc 二.下载redis,并解压 wget http://download.redis.io/releases/redis-5.0.5.tar.gz tar zxvf redis-5.0.5.tar.gz 三.进入redis解压目录,编译安装 cd redis- #如果不加参数,linux下会报错 make MALLOC=libc 四.将/usr/local/redis-5.0.5/src目录下的文件加到/usr/local/bin目录在解压目录…

原创：centos7.1下 ZooKeeper 集群安装配置+Python实战范例

centos7.1下 ZooKeeper 集群安装配置+Python实战范例下载:http://apache.fayea.com/zookeeper/zookeeper-3.4.9/zookeeper-3.4.9.tar.gz 解压: tar zxvf zookeeper-3.4.9.tar.gz -C /opt/ 改名:cd /opt/ && mv zookeeper-3.4.9 zookeeper && cd zookeeper 建立 data目录 mkdir d…

centos7配置fastdfs集群(5.09)

centos7配置fastdfs集群(5.09) 2017年03月10日 23:34:26 带鱼兄阅读数 1564 版权声明:本文为博主原创文章,转载请注明出处. https://blog.csdn.net/daiyudong2020/article/details/61210303 简介: FastDFS是一个开源的轻量级分布式文件系统,它的特性在这里略过几千字. 基础环境准备: centos7虚拟机2台,暂时关闭机器的防火墙,iptables -F. 机器A: 192.168.1.1…

centos7.8 安装部署 k8s 集群

centos7.8 安装部署 k8s 集群目录 centos7.8 安装部署 k8s 集群环境说明 Docker 安装 k8s 安装准备工作 Master 节点安装 k8s 版本查看安装 kubelet,kubeadm,kubectl 下载镜像初始化 Master 启动测试参考文章刚接触 k8s,配置环境折腾了一天,感觉有很多坑,网上很多教程已经不靠谱了,自己记录下安装部署 k8s 的全过程. 环境说明 software version OS CentOS Linux release…

Redis 安装、配置、集群

1. Redis的安装 1.1. Redis的安装 Redis是c语言开发的. 安装redis需要c语言的编译环境.如果没有gcc需要在线安装.yum install gcc-c++ 安装步骤: 第一步:redis的源码包上传到linux系统. 第二步:解压缩redis. 第三步:编译.进入redis源码目录.make 第四步:安装.make install PREFIX=/usr/local/redis PREFIX参数指定redis的安装目录.一般软件安装到/usr目录下 1.2. 连接…

Centos6 安装 Redis 和集群配置

Redis安装先确认gcc和tcl已经安装 sudo yum install gcc-c++ sudo yum install tcl 解压, 编译和安装 .tar.gz /usr/src/ cd /usr/src/redis-/ sudo make sudo make test sudo make install # 如果不想安装到 /usr/local//bin下, 然后再到/usr/bin去建好软链 install 安装很自由, 在哪里编译都可以, 有用的就是最后生成的那几个binary…

【DevOps】在CentOS中安装Rancher2，并配置kubernetes集群

准备一台CentOS主机,安装DockerCE,用于安装Rancher2 一台CentOS主机,安装DockerCE,用于安装kubernetes集群管理主机多台CentOS主机,安装DockerCE,用于运行kubernetes工作节点,工作节点需要与集群管理主机在同一个子网中掌握Docker常用操作,了解K8s基本原理安装Rancher2 第一步:执行命令,运行Rancher2,绑定主机端口80和443. docker run -d --restart=unless-stopped…

zookeeper之一安装和配置(单机+集群)

这里我以zookeeper3.4.10.tar.gz来演示安装,安装到/usr/local/soft目录下. 一.单机版配置 1.安装和配置 #.下载 wget http://apache.fayea.com/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz #.解压 tar -zxvf zookeeper3.4.10.tar.gz #.在zookeeper-/conf目录下创建目录: mkdir data mkdir logs #.将zook…

centos8安装fastdfs6.06集群方式三之：storage的安装/配置/运行

一,查看本地centos的版本 [root@localhost lib]# cat /etc/redhat-release CentOS Linux release 8.1.1911 (Core) 说明:架构森林是一个专注架构的博客,地址:https://www.cnblogs.com/architectforest 对应的源码可以访问这里获取: https://github.com/liuhongdi/ 说明:作者:刘宏缔邮箱: 371125307@qq.com 二,fastdfs的下载与安…

centos8安装fastdfs6.06集群方式二之：tracker的安装/配置/运行

centos7下安装部署mongodb集群（副本集模式）

环境需求:Mongodb集群有三种模式: Replica Set, Sharding,Master-Slaver. 这里部署的是Replica Set模式. 测试环境: 这里副本集(Replica Set)采用一主一备一仲裁模型: 配置步骤: 1.下载mongodb MongoDB官网下载中心:MongoDB Download Center mongodb 3.4.10下载地址:https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhe…

HDP2.4安装(五)：集群及组件安装

HDP(Hortonworks Data Platform)是hortworks推出的100%开源的hadoop发行版本,以YARN 作为其架构中心,包含pig.hive.phoniex.hbase.storm.spark等大量组件,在最新的2.4版本,监控UI实现与grafana集成,包含组件版本对应图如下:(图片来自hortonwork官网) 安装过程: 集群规划环境准备软件包下载: (HDP2.4的安装包过大,推荐离线安装) HDP安装部署集群规划: 192.168.2.89 …

MariaDB配置、集群

MariaDB在centos 7.3的安装,配置和集群搭配阿里云最新选配系统中,只有centos7.3可选,因此,基于centos 7的MariaDB的安装,配置... 全部删除MySQL/MariaDB MySQL 已经不再包含在 CentOS 7 的源中,而改用了 MariaDB; 1.使用rpm -qa | grep mariadb搜索 MariaDB 现有的包: [root@localhost ~]# rpm -qa | grep mariadb mariadb-server-5.5.…

centos7搭建ELK Cluster集群日志分析平台（三）：Kibana

续 centos7搭建ELK Cluster集群日志分析平台(一) 续 centos7搭建ELK Cluster集群日志分析平台(二) 已经安装好elasticsearch 5.4集群和logstash 5.4 安装kibana步骤 1.下载安装Kibana ~]#wget https://artifacts.elastic.co/downloads/kibana/kibana-5.4.0-x86_64.rpm 如果链接失效,官网下载:https://www.elastic.co/down…

centos7搭建ELK Cluster集群日志分析平台（二）：Logstash

续 centos7搭建ELK Cluster集群日志分析平台(一) 已经安装完Elasticsearch 5.4 集群. 安装Logstash步骤 . 安装Java 8 官方说明:需要安装Java 8 ,不支持Java 9... //自行安装,略过 . 安装Logstash 可以同elasticsearch一样建立repo文件通过yum安装,也可以去官网直接下载rpm包进行本地安装: ~]# rpm -ivh logstash-.rpm //这里直接下载好进行本地安装 3. 添加配置文件…

centos7搭建ELK Cluster集群日志分析平台（一）：Elasticsearch

应用场景: ELK实际上是三个工具的集合,ElasticSearch + Logstash + Kibana,这三个工具组合形成了一套实用.易用的监控架构, 很多公司利用它来搭建可视化的海量日志分析平台. 官网下载地址:https://www.elastic.co/downloads Elasticsearch: 是一个基于Lucene的搜索服务器.它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口.Elasticsearch是用Java 开发的,并作为Apache许可条…