ELK学习笔记之Kibana权限控制和集群监控

详细请参考如下四篇博客,注意ELK6中移除了Xpack的默认账户和密码,需要手动设置 Kibana安全特性之权限控制 ELK 集群 Kibana 使用 X-Pack 权限控制,监控集群状态,警报,监视,cpu,内存,磁盘空间,报告和的可视化图形 Kibana中的X-Pack设置解释生产环境中使用 Kibana…

ELK学习笔记之简单适用的ES集群监控工具cerebro安装使用

安装指导及使用简介 1. 下载安装包: https://github.com/lmenezes/cerebro/releases/download/v0.7.3/cerebro-0.7.3.tgz 2. 将安装包copy到ECS节点,该节点网络和待监控的ES集群在同一VPC,网络互通 3. 解压安装包,参考README.md文件启动服务 4. 指定IP和端口号启动: 启动方式一: bin/cerebro -Dhttp.port=1234 -Dh…

【K8S学习笔记】Part2：获取K8S集群中运行的所有容器镜像

本文将介绍如何使用kubectl列举K8S集群中运行的Pod内的容器镜像. 注意:本文针对K8S的版本号为v1.9,其他版本可能会有少许不同. 0x00 准备工作需要有一个K8S集群,并且配置好了kubectl命令行工具来与集群通信.如果未准备好集群,那么你可以使用Minikube创建一个K8S集群,或者你也可以使用下面K8S环境二者之一: Katacoda Play with Kubernetes 如果需要查看K8S版本信息,可以输入指令kubectl version. 在本练习中,我们将使…

Dubbo入门到精通学习笔记（十七）：FastDFS集群的安装、FastDFS集群的配置

文章目录 FastDFS集群的安装 FastDFS 介绍(参考:http://www.oschina.net/p/fastdfs) FastDFS 上传文件交互过程: FastDFS 下载文件交互过程: FastDFS 集群规划: 一.FastDFS 的安装(所有跟踪服务器和存储服务器均执行如下操作) 二.配置 FastDFS 跟踪器 Tracker (192.168.1.131 .192.168.1.132) 三.配置 FastDFS 存储 ( 192.168.1.135 .192.168.1…

Dubbo入门到精通学习笔记（十三）：ZooKeeper集群的安装、配置、高可用测试、升级、迁移

文章目录 ZooKeeper集群的安装.配置.高可用测试 ZooKeeper 与 Dubbo 服务集群架构图 1. 修改操作系统的/etc/hosts 文件,添加 IP 与主机名映射: 2. 下载或上传 zookeeper-3.4.6.tar.gz 到/home/wusc/zookeeper 目录: 3. 解压 zookeeper 安装包,并按节点号对 zookeeper 目录重命名: 4. 在各 zookeeper 节点目录下创建以下目录: 5. 将 zookeeper/node-0X/con…

Docker 与 K8S学习笔记（二十三）—— Kubernetes集群搭建

小伙伴们,好久不见,这几个月实在太忙,所以一直没有更新,今天刚好有空,咱们继续k8s的学习,由于我们后面需要深入学习Pod的调度,所以我们原先使用MiniKube搭建的实验环境就不能满足我们的需求了,我们这一节将使用kubeadm搭建Kubernets集群. 一.虚拟机创建我们的集群包含三个节点kubevm1.kubevm2.kubevm3,其中kubevm1作为Master 我们首先需要使用Virtualbox创建一个虚拟机,步骤如下: 1.新建虚拟机我们设置内存2G,硬盘20G,CPU…

ELK学习笔记之Kibana查询和使用说明

0x00 概述 elasticsearch构建在Lucene之上,过滤器语法和Lucene相同 Kibana接口概述 Kibana接口分为四个主要部分: 发现可视化仪表板设置我们将按照列出的顺序浏览每个部分的基础知识,并演示如何使用每个接口. 0x01 Kibana探索当您第一次连接到Kibana 4时,您将进入发现页面. 默认情况下,此页面将显示您的所有ELK的最近接收的日志. 在这里,你可以根据搜索查询通过筛选,找到特定的日志消息,则缩小搜索结果与时间过滤器一个特定的时间范围. 以…

ELK学习笔记之Kibana安装配置

Kibana 是一个开源的分析和可视化平台,是ELK的重要部分.Kibana提供搜索.查看和与存储在 Elasticsearch 索引中的数据进行交互的功能.开发者或运维人员可以轻松地执行高级数据分析,并在各种图表.表格和地图中可视化数据. 系统:CentOS7.2 官网地址:https://www.elastic.co/guide/en/kibana/current/rpm.html 这次还是使用yum安装了 1.在/etc/yum.repos.d/下新建kibana.repo 配置YUM源…

ELK学习笔记之kibana关闭和进程查找

启动kibana : nohup ./kibana & 查看启动日志 : tail -f nohup kibana 使用 ps -ef|grep kibana 是查不到进程的,主要原因大概是因为 kibana 是node 写的.所以kibana 运行的时候是运行在node 里面. 所以可以使用 ps -ef|grep kibana 查看到进程. 我们知道 kibana 是 5601 对外的 tcp 端口, 所以使用 netstat -tunlp|grep 5601 就可以查…

ELK 学习笔记之 Kibana入门使用

Kibana入门使用: 第一次导入索引: 修改展示时间,不然查不到数据: 点Discover,查阅数据: 如果要添加新的index: 点击Visualize, 创建chart: 点击Dashboard, 布局: DashBoard完工啦!!!嘿嘿嘿…

ELK 学习笔记之 Kibana安装

Kibana安装: 安装地址: https://www.elastic.co/downloads/kibana 安装: tar -zxvf kibana-5.6.1-linux-x86_64.tar.gz 非常不开心的是,安装报错: 只能重新下载安装5.5.2版本: https://www.elastic.co/downloads/past-releases/kibana-5-5-2 安装运行Kibana: tar -zxvf kibana-5.5.2-linux-x86_64.tar.gz 修…

Solr学习笔记(3) —— SolrJ管理索引库&集群

一.什么是SolrJ solrj是访问Solr服务的java客户端,提供索引和搜索的请求方法,SolrJ通常嵌入在业务系统中,通过SolrJ的API接口操作Solr服务,如下图: 二.SolrJ的基本操作 2.1 添加文档实现步骤: 第一步:创建一个java工程第二步:导入相关jar包第三步:和Solr服务器建立连接.HttpSolrServer对象建立连接第四步:创建一个SolrInputDocument对象,然后添加域第五步:将SolrInputDocument添加到索引库第…

RocketMQ学习笔记（2）----Broker的集群四种方式

RocketMQ推荐了几种Broker集群方式,这里的Slave不可写,但可读,类似于Mysql主备方式 1. 单个Master 这是一种风险比较大的集群方式,因为一旦Borker重启或宕机期间,将会导致这个服务不可用,因此是不建议线上环境去使用的. 2. 多个Master 一个集群全部都是Master,没有Slave,它的优点和缺点如下: 优点:配置简单,单个Master宕机或者是重启维护对应用没有什么影响的,在磁盘配置为RAID10时,即使机器宕机不可恢复的情况下,消息也不会丢失(异步刷盘丢…

ActiveMQ学习笔记（12）----ActiveMQ的集群

1. Queue consumer cluster ActiveMQ支持Consumer对消息的高可靠性的负载均衡消费,如果一个Consumer死掉,该消息会转发到其他的Consumer消费的Queue.如果一个Consumer获得消息比其他Consumer快,那么他将获得更多的消息.因此推荐ActiveMQ的Broker和Client使用failover://transport的方式来配置连接 2. Broker clusters 大部分情况下是使用一系列的Broker和Client连接到一起…

Flume 学习笔记之 Flume NG高可用集群搭建

Flume NG高可用集群搭建: 架构总图: 架构分配: 角色 Host 端口 agent1 hadoop3 52020 collector1 hadoop1 52020 collector2 hadoop2 52020 agent1配置(flume-client.conf): #agent1 name agent1.channels = c1 agent1.sources = r1 agent1.sinks = k1 k2 #set gruop agent1.sinkgroups = g1 #…

java 学习笔记（五） Zookeeper的集群配置和Java测试程序

参考博客 http://blog.csdn.net/catoop/article/details/50848555 http://blog.csdn.net/randompeople/article/details/70500076…

Nginx网络架构实战学习笔记（六）：服务器集群搭建、集群性能测试

文章目录服务器集群搭建 Nginx---->php-fpm之间的优化 302机器 202机器压力测试搭建memcached.mysql(数据准备) 今晚就动手-.- 集群性能测试服务器集群搭建 fpm是一个独立的进程,独立进程是由父进程管理子进程,子进程没人用就回收了,对于高并发网站,几乎每时每刻都有人用,所以不让回收 Nginx---->php-fpm之间的优化如上图,在很多个nginx来访问fpm时, fpm的进程要是不够用, 会生成子进程. 生成子进程需要内核来调度,比较耗时,…

【Kubernetes学习笔记】-kubeadm 手动搭建kubernetes 集群

目录 K8S 组件构成环境准备 (以ubuntu系统为例) 1. kubernetes集群机器 2. 安装 docker. kubeadm.kubelet.kubectl 2.1 在每台机器上安装 docker 2.2 每台机器上安装 kubelet .kubeadm .kubectl 创建 kubernetes 集群 kubeadm 在 master 节点 init 集群在worker 节点执行命令 join 到集群安装 Pod Network (在 master 节点 flannel/…

.NET MVC 学习笔记（七）— 控制input控件

.NET MVC 学习笔记(七)— 控制input控件画面中有时候需要输入数字,这时就需要控制input的输入.以下为保留两位有效数字. /* * 初始化数字输入 */ function initDigitInput(className) { /* * 1.先把非数字的都替换掉 * 2.由于IE浏览器对于change事件存在兼容问题,改用focus和blur事件代替. * */ $(className).on("keyup", formatMN); $(className).on({…

Liunx学习笔记(三) 文件权限

一.文件权限 1.查看文件权限 (1)文件权限在 Linux 中对于文件有四种访问权限,列举如下: 可读取:r,Readable 可写入:w,Writable 可执行:x,Execute 无权限:- 另外,在 Linux 中对于权限的设置有三组对象,列举如下: 所有者:u,User 所属组:g,Group 其他用户:o,Other (2)查看文件权限我们可以使用 ls -l 文件名命令查看一个文件的权限,其中每一行显示内容的第一个字段就是对文件权限的描述例如: user@ubuntu:~…

【web开发学习笔记】Structs2 Result学习笔记（二）动态结果集

Result学习笔记(二) - 动态结果集动态结果一定不要忘了为动态结果的保存值设置set get方法第一部分:代码 //前端 <% String context = request.getContextPath(); %> <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transiti…

Kafka学习之（六）搭建kafka集群

想要搭建kafka集群,必须具备zookeeper集群,关于zookeeper集群的搭建,在Kafka学习之(五)搭建kafka集群之Zookeeper集群搭建博客有说明.需要具备两台以上装有zookeeper的服务器,其次,稳定可靠的kafka版本,本篇使用kafka_2.11-0.9.0.1. 准备 192.168.244.131.192.168.244.133.192.168.244.134,kafka下载地址 https://archive.apache.org/dist/kafka/0…

Hadoop YARN学习之监控集群监控Nagios（4）

doop YARN学习之监控集群监控Nagios(4) 1. Nagios是一个流行的开源监控工具,可以用来监控Hadoop集群. 2. 监控基本的Hadoop服务调试好脚本后命名为chek_resource_manager.sh,并把它放在Nagios的插件目录中. 加载Nagios插件向hadoop-cluster.cfg添加如下信息 define command{ command_name check_resource_manager command_line /usr/lib64/na…

ELK学习笔记（一）安装Elasticsearch、Kibana、Logstash和X-Pack

最近在学习ELK的时候踩了不少的坑,特此写个笔记记录下学习过程. 日志主要包括系统日志.应用程序日志和安全日志.系统运维和开发人员可以通过日志了解服务器软硬件信息.检查配置过程中的错误及错误发生的原因.经常分析日志可以了解服务器的负荷,性能安全性,从而及时采取措施纠正错误. 通常,日志被分散的储存不同的设备上.如果你管理数十上百台服务器,你还在使用依次登录每台机器的传统方法查阅日志.这样是不是感觉很繁琐和效率低下.当务之急我们使用集中化的日志管理,例如:开源的syslog,将所有服务器上的日志收…