Kafka 集群安装

  环境:

    Linux 7.X

    kafka_2.x

  

   在linux操作系统中,kafka安装在 /u04/app目录中

  

  1. 下载

    # wget https://mirrors.cnnic.cn/apache/kafka/2.1.1/kafka_2.11-2.1.1.tgz

  2. 解压 & 重命令 & copy

    # tar -zxf kafka_2.11-2.1.1.tgz -C /u04/app

    # cd /u04/app/

    # mv kafka_2.11-2.1.1 kafka01

    # cp -a kafka01 kafka02

    # cp -a kafka01 kafka03

  3. 创建kafka数据目录.

    # mkdir ./kafka01/datas

    # mkdir ./kafka02/datas

    # mkdir ./kafka03/datas

  4. 修改配置文件(此处以kafka01配置修改,02、03的配置修改操作步骤一样.)

    # cd ./kafka01/config

    # vim server.properties

    4.1 修改broker编号

      broker.id=1 (第1个kafka配置文件中修改为1)

      broker.id=2 (第2个kafka配置文件中修改为2)

      broker.id=3 (第3个kafka置文件中修改为3)

    4.2 修改数据目录

      log.dir=/u04/app/kafka01/datas

    4.3 修改了zookeeper链接地址

      zookeeper.connect=192.168.43.145:2181,192.168.43.145:2182,192.168.43.145:2183

    4.4 修改备份因子配置:

      default.replication.factor=2

    4.5 配置检查IP和端口.

      listeners=PLAINTEXT://192.168.43.145:9091(第1个kafka配置文件)

      listeners=PLAINTEXT://192.168.43.145:9092(第2个kafka配置文件)

      listeners=PLAINTEXT://192.168.43.145:9093(第3个kafka配置文件)

  5. 启动kafka (此处以kafka01进行启动,02、03的启动时一样的.)

    # cd /u04/app/kafka01/bin

    # nohup sh kafka-server-start.sh ./../config/server.properties &

    注意:

      在启动时候,需要先启动zookeeper,zookeeper的安装参见:《Zookeeper 集群安装

Kafka 集群安装的更多相关文章

  1. kafka集群安装部署

    kafka集群安装 使用的版本 系统:centos6.5 centos6.7 jdk:1.7.0_79 zookeeper:3.4.9 kafka:2.10-0.10.1.0 一.环境准备[只列,不具 ...

  2. zookeeper+kafka集群安装之二

    zookeeper+kafka集群安装之二 此为上一篇文章的续篇, kafka安装需要依赖zookeeper, 本文与上一篇文章都是真正分布式安装配置, 可以直接用于生产环境. zookeeper安装 ...

  3. zookeeper+kafka集群安装之一

    zookeeper+kafka集群安装之一 准备3台虚拟机, 系统是RHEL64服务版. 1) 每台机器配置如下: $ cat /etc/hosts ... # zookeeper hostnames ...

  4. zookeeper+kafka集群安装之中的一个

    版权声明:本文为博主原创文章.未经博主同意不得转载. https://blog.csdn.net/cheungmine/article/details/26678877 zookeeper+kafka ...

  5. KafKa集群安装详细步骤

    最近在使用Spring Cloud进行分布式微服务搭建,顺便对集成KafKa的方案做了一些总结,今天详细介绍一下KafKa集群安装过程: 1. 在根目录创建kafka文件夹(service1.serv ...

  6. KafKa集群安装、配置

    一.事前准备 1.kafka官网:http://kafka.apache.org/downloads. 2.选择使用版本下载. 3.kafka集群环境准备:(linux) 192.168.145.12 ...

  7. Centos7.4 kafka集群安装与kafka-eagle1.3.9的安装

    Centos7.4 kafka集群安装与kafka-eagle1.3.9的安装 集群规划: hostname Zookeeper Kafka kafka-eagle kafka01 √ √ √ kaf ...

  8. (Linux环境Kafka集群安装配置及常用命令

    Linux环境Kafka集群安装配置及常用命令 Kafka 消息队列内部实现原理 Kafka架构 一.下载Kafka安装包 二.Kafka安装包的解压 三.设置环境变量 四.配置kafka文件 4.1 ...

  9. Kafka集群安装Version1.0.1(自带Zookeeper)

    1.说明 Kafka集群安装,基于版本1.0.1, 使用kafka_2.12-1.0.1.tgz安装包, 其中2.12是编译工具Scala的版本. 而且不需要另外安装Zookeeper服务, 使用Ka ...

随机推荐

  1. JZOJ5870 【NOIP2018模拟9.15】地图

    题目描述 Description

  2. Mysql8+mybatisGenerator (mysql 8的逆向工程)

    最近试了一下mysql8的逆向工程工具 1.xml <?xml version="1.0" encoding="UTF-8" ?> <!DOC ...

  3. string主要操作函数

    参考博客:http://blog.csdn.net/zhenyusoso/article/details/7286456 std::string illegal(" \t\f\v\n\r\\ ...

  4. 搭建Angular环境

    一.安装nodejs 登录nodejs官网,下载对应系统版本:安装,只要一直下一步即可. 在nodejs中自带了npm,不需要独立安装npm. 输入node -v /npm -v  查看node和np ...

  5. [Day5] Nginx 变量

    一. Nginx中的变量原理 提供变量的模块和使用变量的模块 nginx启动,提供变量的模块会在一个回调函数中定义新的变量名和解析出变量的方法. 请求来了以后,使用变量的模块会根据变量名,去调用解析变 ...

  6. 洛谷P2827 蚯蚓

    传送门 pts85/90(90应该是个意外,第一次交是90之后都是85了): 优先队列模拟题意 #include<iostream> #include<cstdio> #inc ...

  7. oracle数据导入/导出(2)

    Oracle数据导入导出imp/exp 功能:Oracle数据导入导出imp/exp就相当与oracle数据还原与备份. 大多情况都可以用Oracle数据导入导出完成数据的备份和还原(不会造成数据的丢 ...

  8. hive作业的优化策略

    Mapreduce自身的特点: 1.IO和网络负载大:优化策略:减少IO和网络负载. 2.内存负载不大.优化策略:增大内存使用率: 3.CPU负载不大.优化策略:增大CPU使用率: (hive的优化应 ...

  9. 关于mapreduce 开发环境部署和jar包拷贝问题

    1.mapreduce开发应当在linux里面的eclipse不然容易出现问题. 2.把eclipse拷贝到linux环境中,然后需要拷贝hadoop-eclipse-plugin-2.3.0.jar ...

  10. SQLSTATE[HY000] [2002] 乱码

    string(59) "SQLSTATE[HY000] [2002] ����Ŀ����������ܾ����޷����ӡ� " 实际意思是:SQLSTATE[HY000] [20 ...