Box Anemometer是一个非常不错的MySQL慢查询可视化工具平台,具体就不多详述了,官网是https://github.com/box/Anemometer

最近动自己动手搭了一个,具体搭建过程,参考了http://www.cnblogs.com/xuanzhi201111/p/4128894.html以及官网的说明文档

下面把其中遇到的一些坑记录于此:

1、.资源规划:

192.168.17.205  Box Anemometer服务器,安装httpd服务、php、用于存储Anemometer慢查询数据的MySQL服务。

192.168.16.21/22/23/24/25/**** 需要被监控的MySQL服务器,需要安装percona-toolkit,并配置使用pt-query-digest收集数据的相关脚本任务。

2、安装过程及遇到的坑:2.1、之前192.168.17.205上就编译安装过一个MySQL5.7.20服务

于是按照网上的教程先yum 安装了httpd,再yum安装php,然后配置Anemometer。

结果一直报错,连接不上MySQL服务器。我怀疑是yum安装php默认的Mysql客户端驱动太低导致的。所以重新采用编译安装php,编译配置如下:

./configure
--prefix=/data/php
--enable-fpm
--with-fpm-user=daemon
--with-fpm-group=daemon
--with-config-file-path=/usr/local/php/etc
--with-mysql=mysqlnd
--with-mysqli=mysqlnd
--with-pdo-mysql=mysqlnd
--with-iconv --with-iconv-dir
--with-freetype-dir
--with-jpeg-dir
--with-png-dir
--with-gd
--with-zlib
--with-libxml-dir
--with-curl
--with-mhash
--with-xmlrpc
--with-mcrypt
--with-openssl
--with-apxs2=/usr/sbin/apxs
--enable-xml
--disable-rpath
--enable-bcmath
--enable-shmop
--enable-sysvsem
--enable-inline-optimization
--enable-mbregex
--enable-mbstring
--enable-gd-native-ttf
--enable-ftp
--enable-pcntl
--enable-sockets
--enable-zip
--enable-soap
--disable-debug
--disable-ipv6
--with-gettext
--enable-calendar
--enable-dom
--enable-opcache=no  

结果还是报错,仍然连接不上mysql服务器。但错误信息有所变化,最终解决方案是:关闭Selinux。

2.2、关于Anemometer数据库的授权以及被监控数据库的用户授权:

2.2.1、Anemometer用于保存收集过来的慢查询数据的MySQL数据库192.168.17.205的授权如下:

GRANT SELECT, UPDATE ON `slow_query_log`.* TO 'app_anemometer_rw'@'localhost'

对应的配置如下:

[root@oracle conf]# pwd
/var/www/html/anemometer/conf
[root@oracle conf]# vi config.inc.php <?php
$conf['datasources']['localhost'] = array(
'host' => '127.0.0.1',
'port' => 3306,
'db' => 'slow_query_log',
'user' => 'app_anemometer_r',
'password' => 'Your@StrongPassword',
'tables' => array(
'global_query_review' => 'fact',
'global_query_review_history' => 'dimension'
),
'source_type' => 'slow_query_log'
);

2.2.2、另外该数据库还需要给各被监控数据库的脚本程序授权:

GRANT SELECT, INSERT, UPDATE, DELETE ON `slow_query_log`.* TO 'app_anemometer_rw'@'192.168.16.2%'

2.2.3、各被监控的数据库需要授权Anemometer程序访问,用来获取执行计划等数据:

GRANT SELECT, SUPER ON *.* TO 'app_anemometer_r'@'192.168.17.205'

对应的配置(/var/www/html/anemometer/conf/config.inc.php)如下:

3、通过配置,终于能打开首页了,但首页显示的SQL长度实在是太短,只有20个字符,导致没法从这个列表上清楚的知道到底是哪个查询:

这个也可以通过修改/var/www/html/anemometer/conf/config.inc.php文件来配置:

默认是取最左边20位,改成想要的长度即可。

4、最后附上各MySQL服务器中用于收集慢查询日志的python脚本:

#!/usr/bin/env python2
#-*- coding: utf-8 -*-
import subprocess PATH='/bin:/usr/bin'
LOG='/log/slow.log'
SERVER_HOST='192.168.17.205'
DB='slow_query_log'
TAB1='global_query_review'
TAB2='global_query_review_history'
MYSQL_USER='app_anemometer_rw'
MYSQL_PASSWD='Your@StrongPassword'
hostname='MySQL-M-16-21'
print MYSQL_PASSWD
cmd='pt-query-digest --user='+MYSQL_USER+' --password='+ MYSQL_PASSWD + ' --port=3306 --review h='+SERVER_HOST+',D='+DB+',t='+TAB1+' --history h='+SERVER_HOST+',D='+DB+',t='+TAB2 +' --no-report --limit=0% --filter=" \$event->{Bytes} = length(\$event->{arg}) and \$event->{hostname}=\\"'+hostname+'\\"" ' +LOG print cmd
subprocess.Popen(cmd, stdout=subprocess.PIPE, shell=True)

4.1 由于anemometer服务器是通过上面python脚本所配置的hostname定义来反过来访问各被监控的服务器,用于获取执行计划等相关信息。

所以,如果hostname如果配置的不是Ip,那么还需在anemometer服务器192.168.17.205上配置hosts文件:

[root@oracle conf]# vi /etc/hosts

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
:: localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.16.21 MySQL-M--

4.2 可能默认配置下,该平台所显示的内容并不是自己想要的

例如单个查询的过去90天历史记录里,它是以ts_min为group by的,这会只显示一条数据,而不是每天的数据,我改成了ts_max。

另外,ts_cnt也是Sum出来的,如果我们5分钟收集一次日志,这个结果完全不是想要的,我这里添加了一行配置:'query_cnt' => 'MAX(ts_cnt)',

并且将history_defaults和report_defaults的table_fields配置中将ts_cnt改为了query_cnt:

通过以上配置,系统所显示的值基本与预期相符。

本文链接:http://www.cnblogs.com/ajiangg/p/8258926.html

关于Box Anemometer的安装配置遇到的几个坑的更多相关文章

  1. Gulp的安装配置过程和一些小坑

    谈谈gulp. 项目尾声,老师叫我去熟悉一下grunt前端自动化工具,第一次知道这种东西,我就查各种资料啊,发现grunt已经‘过时’了,大家都用gulp和webpack.我当然选择了配置最简单的gu ...

  2. Win10 安装配置 MongoDB 4.0 踩坑记

    redis 官方没有 Windows 版的,微软维护的已经好久没更新了,所以就在想着换成 MongoDB. 于是一趟被我复杂化的踩坑之旅就开始了,同时也记录一下,避免有人遇见跟我一样的问题. 首先在  ...

  3. webpack4.0在Mac下的安装配置及踩到的坑

    一.什么是webpack是一个前端资源加载/打包工具.它将根据模块的依赖关系进行静态分析,然后将这些模块按照指定的规则生成对应的静态资源.它做的事情是,分析你的项目结构,找到JavaScript模块以 ...

  4. Box Anemometer

    https://sourceforge.net/projects/pydev/files/pydev/ Eclipse + Pydev 配置Python开发环境 JDK安装http://jingyan ...

  5. Hive on Spark安装配置详解(都是坑啊)

    个人主页:http://www.linbingdong.com 简书地址:http://www.jianshu.com/p/a7f75b868568 简介 本文主要记录如何安装配置Hive on Sp ...

  6. 长平狐 Android-x86虚拟机安装配置全攻略

    Android-x86虚拟机安装配置网上有很多,但是全部说明白的确不多,希望这篇文章能把主要的配置介绍给您,帮助您少走一些弯路. 本文分别针对VMWare和Virtual Box两种虚拟机介绍安装配置 ...

  7. Android-x86虚拟机安装配置全攻略

    转自Android-x86虚拟机安装配置全攻略 注:这里安装从简,具体请参考虚拟机Vmware安装运行安卓4.0详细教程 Android-x86虚拟机安装配置网上有很多,但是全部说明白的确不多,希望这 ...

  8. 画图工具Graphviz安装配置

    Graphviz (英文:Graph Visualization Software的缩写)是一个由AT&T实验室启动的开源工具包,用于绘制DOT语言脚本描述的图形.它也提供了供其它软件使用的库 ...

  9. Vagrant安装配置

    转载自:https://my.oschina.net/u/3424381/blog/888205 Vagrant安装配置 实际上Vagrant只是一个让你可以方便设置你想要的虚拟机的便携式工具,它底层 ...

随机推荐

  1. [NewLife.XCode]增删改查入门

    NewLife.XCode是一个有10多年历史的开源数据中间件,由新生命团队(2002~2019)开发完成并维护至今,以下简称XCode. 整个系列教程会大量结合示例代码和运行日志来进行深入分析,蕴含 ...

  2. Redis 超时排查

    突然收到告警,提示redis挂了,同时大群也在说某某redis连接超时了,过了一会儿就恢复了.这时登上服务器,查看监控.首先看看qps: 可以看到qps并不高,但是中间有段时间没取到数据是怎么回事?那 ...

  3. 用主题模型可视化分析911新闻(Python版)

    本文由 伯乐在线 - 东狗 翻译,toolate 校稿.未经许可,禁止转载!英文出处:blog.dominodatalab.com.欢迎加入翻译小组. 本文介绍一个将911袭击及后续影响相关新闻文章的 ...

  4. Tomcat(一):背景知识和安装tomcat

    Tomcat系列文章:http://www.cnblogs.com/f-ck-need-u/p/7576137.html 1. 基础背景知识 1.1 java和jdk概念 无论是何种程序,要能在计算机 ...

  5. Ubuntu16---安装mysql5.7未提示输入密码,安装后修改mysql密码默认密码

    Ubuntu16安装mysql5.7未提示输入密码,安装后修改mysql密码默认密码 mysql默认密码为空 但是使用mysql -uroot -p 命令连接mysql时,报错 ERROR 1045 ...

  6. 【转】AJAX中JSON数据的返回处理问题

    AJAX处理复杂数据时,便会使用JSON格式.常用在对数据库的数据查询上.在数据库查询到数据后,便可在处理页面直接将数据转为JSON格式,然后返回. 本篇主要讨论:jQuery中,JSON数据在AJA ...

  7. Redis学习笔记(3)-XShell连接CentOSMini,并安装Redis

    使用XShell远程连接CentOSMini 点击download下载XShell5.0. 下载之后安装.配置XShell. 配置XShell前的准备 打开VM,启动CentOSMini.CentOS ...

  8. [转]BTC手续费计算,如何设置手续费

    本文转自:https://blog.csdn.net/servletcome/article/details/81941334 首先BTC的交易手续费和交易金额是没有关系的.不要误认为交易的金额越大手 ...

  9. 从零开始学安全(二十六)●利用Nmap目标的本版进行探测

    通过对对方电脑的服务探测 对本版较低的服务 或者无补丁的服务 可以直入侵 版本探测 version  后边就是版本

  10. ASP.NET MVC 学习笔记-2.Razor语法

    1.         表达式 表达式必须跟在“@”符号之后, 2.         代码块 代码块必须位于“@{}”中,并且每行代码必须以“:”结尾.代码块中定义的变量可能会被同一个域中的其他块使用. ...