Prometheus重新标记
Prometheus重新标记
一、背景
我们知道prometheus
是一个时间序列数据库。会周期性的从各个target
上抓取数据。那么我们抓取回来的各种指标数据,我们有没有办法再次进行处理呢?
比如:
1、添加或删除某些不必要的标签。
2、从指标中删除敏感或不需要的标签。
3、修改标签的名字或标签的值等。
要实现上述功能,我们就需要对标签进行重新标记
。
通过重新标记
,我们可以控制、管理并标准化环境中的指标。
二、简化的指标抓取的生命周期
从上图中可知,我们有2个阶段(relable_configs
和metric_relabel_configs
)可以进行重新标记。
1、配置参数详解
# 从已有的标签选择值的源标签组;多个标签,使用separator分隔;
# regex匹配源标签里的值
[ source_labels: '[' <labelname> [, ...] ']' ]
# 多个 source_labels 时以这个连接起来
[ separator: <string> | default = ; ]
# 替换成的目标标签,可以使用正则中的分组
[ target_label: <labelname> ]
# 正则表达式匹配标签中的值
[ regex: <regex> | default = (.*) ]
# Modulus to take of the hash of the source label values.
[ modulus: <int> ]
# 替换正则表达式匹配的分组,分组引用使用 $1,$2,$3
[ replacement: <string> | default = $1 ]
# 正则表达式匹配后执行的动作
[ action: <relabel_action> | default = replace ]
1、action:
存在的值
1、替换标签值
replace:
首先将source_labels
中指定的各标签的值以separator
进行连接起来,然后将regex
字段中的正则标签是对连接起来的标签值进行匹配判定,如果匹配上了,则将target_label
字段中指定的标签的值替换为replacement
字段中保存的值。hashmod:
将target_label
的值设置为一个hash值,该hash则由modules
字段指定的hash模对source_labels
上各标签的串联值进行hash计算生成。
2、删除指标
keep:
使用regex
不能匹配到target
上的source_labels
上的各标签的串联值时,则删除该target
。drop:
使用regex
能匹配到target
上的source_labels
上的各标签的串联值时,则删除该target
。
3、创建或删除标签
lablemap:
将regex
对所有的标签名进行匹配判定,而后将匹配到的标签的值赋给replacement
字段指定的标签名之上。通常用于生成一个新的标签。labeldrop:
将regex
对所有的标签名进行匹配判断,能够匹配到的标签从该target
的标签集中删除。labelkeep:
将regex
对所有的标签名进行匹配判断,不能够匹配到的标签从该target
的标签集中删除。
2、删除标签注意事项
标签
是时间序列
的唯一性约束
。如果删除标签或重命名标签并导致时间序列重复,那么系统 可能会出现问题。
3、几个系统内置的标签
__address__:
当前Target实例的访问地址:。
__scheme__:
采集目标服务访问地址的HTTP Scheme,HTTP或者HTTPS。
__metrics_path__:
采集目标服务访问地址的访问路径。
__param_<name>:
采集任务目标服务的中包含的请求参数。
__name__:
此标签是标识指标名称的预留标签。
1、relable_configs 阶段
该阶段发生在指标抓取之前,即来自服务发现的目标。
**示例:**将__scheme__、__address__和__metrics_path__标签对应的值连接起来,判断是否是以(http或https)开头,如果是,则将 instance 标签对应的值修改成正确匹配的值。
scrape_configs:
- job_name: 'prometheus'
static_configs:
- targets: ['localhost:9080']
relabel_configs:
- source_labels: ["__scheme__","__address__","metrics_path__"]
regex: "(http|https)(.*)"
separator: ""
target_label: "instance"
replacement: "${1}://${2}"
action: replace
2、metric_relable_configs 阶段
该阶段发生在指标抓取之后且数据没有保存到系统之前。
**示例:**删除go_info标签
三、参考文档
1、https://prometheus.io/docs/prometheus/latest/configuration/configuration/#relabel_config
Prometheus重新标记的更多相关文章
- 阿里云上万个 Kubernetes 集群大规模管理实践
点击下载<不一样的 双11 技术:阿里巴巴经济体云原生实践> 本文节选自<不一样的 双11 技术:阿里巴巴经济体云原生实践>一书,点击上方图片即可下载! 作者 | 汤志敏,阿里 ...
- Prometheus 系统监控方案 一
最近一直在折腾时序类型的数据库,经过一段时间项目应用,觉得十分不错.而Prometheus又是刚刚推出不久的开源方案,中文资料较少,所以打算写一系列应用的实践过程分享一下. Prometheus 是什 ...
- [系统集成] 部署 mesos-exporter 和 prometheus 监控 mesos task
前几天我在mesos平台上基于 cadvisor部署了 influxdb 和 grafana,用于监控 mesos 以及 docker app 运行信息,发现这套监控系统不太适合 mesos + do ...
- Prometheus(转载)
Prometheus 系统监控方案 一 https://www.cnblogs.com/vovlie/p/Prometheus_CONCEPTS.html 最近一直在折腾时序类型的数据库,经过一段时间 ...
- prometheus 标签使用
标签的配置使用 考虑到要明智地使用标签,我们需要给事物重新命名.在一个集中的.复杂的监视环境中,我们有时无法控制正在监视的所有资源以及它们公开的监视数据.重新标记允许在自己的环境中控制.管理和潜在地标 ...
- Prometheus监控学习笔记之Prometheus从1.x升级到2.x
详细参考这篇文章 https://cloud.tencent.com/developer/article/1171434 prometheus 2.0于2017-11-08发布,主要是存储引擎进行了优 ...
- Go语言开发Prometheus Exporter示例
一.Prometheus中的基本概念 Prometheus将所有数据存储为时间序列,这里先来了解一下prometheus中的一些基本概念 指标名和标签每个时间序列都由指标名和一组键值对(也称为标签)唯 ...
- TiKV 源码解析系列文章(三)Prometheus(上)
本文为 TiKV 源码解析系列的第三篇,继续为大家介绍 TiKV 依赖的周边库 rust-prometheus,本篇主要介绍基础知识以及最基本的几个指标的内部工作机制,下篇会介绍一些高级功能的实现原理 ...
- Prometheus监控学习笔记之初识PromQL
0x00 概述 Prometheus 提供了一种功能表达式语言 PromQL,允许用户实时选择和汇聚时间序列数据.表达式的结果可以在浏览器中显示为图形,也可以显示为表格数据,或者由外部系统通过 HTT ...
随机推荐
- openswan协商流程之(四):main_inI2_outR2()
主模式第四包:main_inI2_outR2 1. 序言 main_inI2_outR2()函数是ISAKMP协商过程中第四包的核心处理函数的入口,同时在此处理流程中已经获取到足够的隧道信息,可以生成 ...
- SQL-Instead of 触发器
定义及优点 INSTEAD OF触发器指定执行触发器而不是执行触发 的SQL 语句,从而替代触发语句的操作. 在表或视图上,每个 INSERT.UPDATE 或 DELETE 语句最多可 ...
- 1.docker概述及其历史
一. 为什么会出现docker? 不用说, 肯定是时代进步的产物. 那么, 他为什么能火? 一定是解决了痛点问题. docker也不是一下子就火起来了, 他的火也是有一个过程的, 我们先来看看为什么会 ...
- PHP中的MySQLi扩展学习(二)mysqli类的一些少见的属性方法
虽说是少见的一些属性方法,但是可能还是有不少同学在日常的开发中使用过,这里只是学习了可能相对来说我们用得比较少的一些 mysqli 的属性或方法.就当是扩展一下自己的知识体系. 切换用户 首先就是切换 ...
- mysql将语句写入表中
使用create table语句即可 CREATE TABLE membertmp (select a.* from member as a where a.phone <> '' and ...
- 创建一个 Orchard Core CMS 站点
本文通过引用项目模板的方式创建Orchard CMS站点. 创建项目有不同的方式可以为Orchard Core创建站点和模块.你可以在这里了解更多关于它们的信息.在本指南中,我们将使用我们的" ...
- IDEA - 2019中文版安装教程
前言 个人安装备忘录 软件简介 IDEA 全称IntelliJ IDEA,是java语言开发的集成环境,在业界被公认为最好的java开发工具之一,尤其在智能代码助手.代码自动提示.重构.J2EE支持. ...
- win10系统显示此电脑
今天电脑开机后发现从任务栏进入"文件资源管理器",直接卡死,重启电脑也没有用. 我想到是不是从"此电脑"进入不会卡死,试了一下果真没有卡死. 使用win10系统 ...
- Hbuilder 生成移动App资源升级包
建立文件夹www,将需要更新的文件放置在里面. 将manifest.json文件中version字段的版本修改为新编号. 在文件夹www外建立文件update.xml,内容如下: <?xml v ...
- P4245-[模板]任意模数多项式乘法
正题 题目链接:https://www.luogu.com.cn/problem/P4245 题目大意 两个多项式,求它们的乘积模\(p\). 解题思路 方法好像挺多,我用的是最简单的一种就是,先定一 ...