正文由作者完成,AI 主要用于措辞优化、语句调整与语言打磨。

prometheus(普罗米修斯)是一个系统和服务监控系统,普罗米修斯可以按给定间隔从配置的目标收集指标,评估规则表达式,显示结果,并可在观察到指定条件时触发告警
Prometheus抓取什么
在生产环境中,Prometheus一般运行在云端中,通过HTTP协议抓取集群中各个节点暴露的端口,而不是自己作为一个Agent去收集集群节点的环境
这就涉及到一个约定问题,普罗米修斯如何正确的读取到节点返回的响应?
metrics定义与Gauge文本格式
我们先明确三个定义:
- 指标(Metric):一个带有明确名称和单位的测量值,HTTP 接口只是把这次测量值交给外部读取的传输载体
- 仪表盘指标(Gauge):表示当前状态的瞬时测量值,数值可以上升也可以下降。可用内存随进程分配与释放而波动,符合
Gauge的特征 - 单调递增计数器(Counter) 仅适合累计事件次数(通常只增不减,仅在进程重启时重置),比如累计CPU时间
- Exposition Format(指标暴露格式):提供一个能被监控程序读取的接口规范
我们这节用 go 语言抓取 /proc/meminfo 中的 MemAvailable 来展示,所以 MemAvailable 的值(乘1024) 便是我们这次的指标
对于 Exposition Format ,我们自然的采用 Prometheus 传统 HTTP 文本暴露格式 这个格式将在下面介绍
一次成功的 /metrics 响应由响应头和三行响应体组成。
其中响应头指定协议版本与编码:
Content-Type: text/plain; version=0.0.4; charset=utf-8响应体我们约定为三行文本:
# HELP sentinel_memory_available_bytes Estimated available memory in bytes.# TYPE sentinel_memory_available_bytes gaugesentinel_memory_available_bytes 2097152其基本构造:
# HELP [] {Explanation}# TYPE [] {type}[] {numerical value}这三行的含义定义可以这样解释:
- # HELP 行说明指标含义
- # TYPE 行声明类型(如 gauge,counter)
- 最后一行表示样本行,是这次暴露的数据
其中三行中的指标名称必须一致,同时每行的末尾都必须带换行符 \n
Prometheus如何抓取
当我们实现了接口之后,我们就需要自己配置一下普罗米修斯来实现对节点内容的定期抓取了
首先我们先了解分工和整体流程:
sequenceDiagram
autonumber
participant P as Prometheus Server (:9091)
participant S as sentinel-go (:9090)
Note over P: 主动拉取(Pull)模型:Prometheus 按周期主动 GET /metrics
rect rgb(232, 244, 255)
Note over P: T0 [0s]
P->>S: GET /metrics
S-->>P: 200 OK (sentinel_memory_available_bytes 2097152)
Note over P: TSDB 写入:(T0, 2097152), up=1
end
rect rgb(232, 251, 234)
Note over P: T1 [5s](周期调度)
P->>S: GET /metrics
S-->>P: 200 OK (sentinel_memory_available_bytes 2085600)
Note over P: TSDB 写入:(T1, 2085600), up=1
end
Note over P: 抓取时刻时间戳以 Prometheus 记录为准,受网络与调度影响存在微小毫秒抖动Prometheus中的逻辑
在Prometheus中,获取到的
- Target(目标):具体被抓取的网络端点,形式严格约定为
host:port(例如127.0.0.1:9090)。一个 Target 对应一个暴露指标的 HTTP 进程实例 - Job(作业):一组执行相同业务逻辑或具有相同监控目的的 Target 集合;可以理解为一组意图相同的Target集合
- Instance(实例):当 Prometheus 完成抓取时,会自动在时序数据上打上
instance="<host:port>"标签。job与instance共同标识了抓取来源目标,也就是Instance是Job下的一个具体角色
存放在Prometheus中的时间序列中单个样本的逻辑表示可抽象为:
指标名{标签名="标签值", ...} 浮点数值 毫秒时间戳比如
sentinel_memory_available_bytes{job="sentinel", instance="127.0.0.1:9090"} 2097152000 1760000000000解读下来就是我们的指标,然后是这个指标属于哪个job,来自哪个Target,具体的数值是什么,最后是时间戳
抓取配置与地址格式
Prometheus 通过根配置文件(通常为 prometheus.yml)声明抓取行为
下面我们给出一个最小配置实例:
global: scrape_interval: 5s # 抓取周期:每隔 5 秒发一次 GET 请求 scrape_timeout: 4s # 抓取超时:单次请求超过 4 秒未完成则判定为失败
scrape_configs: - job_name: 'sentinel' metrics_path: '/metrics' # 抓取路径(默认即为 /metrics,显式声明) static_configs: - targets: ['127.0.0.1:9090'] # 必须写 host:port,不能带 http://其中有几个要点需要我们知道:
- Target 格式严禁包含协议与路径
- 即targets: [‘127.0.0.1:9090’]不能写成 [‘http://127.0.0.1:9090’] 或者 [‘127.0.0.1:9090/metrics’]
- 超时时间不得超过抓取周期
- 如果超时时间大于抓取周期,当前周期的抓取还未结束就会与下一周期的抓取重叠堆积
可以参考 Prometheus 配置官方规范 来编写扩展 prometheus.yml文件,在编写完成后,需要进行一次 promtool check config <文件名> 进行静态检查
分享文章
生成精美分享图或复制链接,与更多人分享本文。
继续阅读
换条路线
从其他文章中稳定抽取
最后更新于 ,距今已过 10 天
部分内容可能已过时