--- title: prometheus --- 此插件是提供符合 prometheus 数据格式的监控指标数据。 ## 属性 无 ## 接口 插件会增加 `/apisix/prometheus/metrics` 这个接口，你可能需要通过 [interceptors](../plugin-interceptors.md) 来保护它。 ## 如何开启插件 `prometheus` 插件用空{}就可以开启了,他没有任何的选项。 例子如下: ```shell curl http://127.0.0.1:9080/apisix/admin/routes/1 -H 'X-API-KEY: edd1c9f034335f136f87ad84b625c8f1' -X PUT -d ' { "uri": "/hello", "plugins": { "prometheus":{} }, "upstream": { "type": "roundrobin", "nodes": { "127.0.0.1:80": 1 } } }' ``` 你可以使用浏览器打开 dashboard：`http://127.0.0.1:9080/apisix/dashboard/`，通过 web 界面来完成上面的操作，先增加一个 route： ![](../../../assets/images/plugin/prometheus-1.png) 然后在 route 页面中添加 prometheus 插件： ![](../../../assets/images/plugin/prometheus-2.png) ## 如何提取指标数据 我们可以从指定的 url 中提取指标数据 `/apisix/prometheus/metrics`: ``` curl -i http://127.0.0.1:9080/apisix/prometheus/metrics ``` 把该 uri 地址配置到 prometheus 中去,就会自动完成指标数据提取. 例子如下: ```yaml scrape_configs: - job_name: "apisix" metrics_path: "/apisix/prometheus/metrics" static_configs: - targets: ["127.0.0.1:9080"] ``` 我们也可以在 prometheus 控制台中去检查状态: ![](../../../assets/images/plugin/prometheus01.png) ![](../../../assets/images/plugin/prometheus02.png) ## 如何修改暴露指标的 uri 我们可以在 `conf/config.yaml` 的 `plugin_attr` 修改默认的 uri | 名称 | 类型 | 默认值 | 描述 | | ---------- | ------ | ---------------------------- | -------------- | | export_uri | string | "/apisix/prometheus/metrics" | 暴露指标的 uri | 配置示例: ```yaml plugin_attr: prometheus: export_uri: /apisix/metrics ``` ### Grafana 面板 插件导出的指标可以在 Grafana 进行图形化绘制显示。 下载 [Grafana dashboard 元数据](../../../assets/other/json/apisix-grafana-dashboard.json) 并导入到 Grafana 中。 你可以到 [Grafana 官方](https://grafana.com/grafana/dashboards/11719) 下载 `Grafana` 元数据. ![](../../../assets/images/plugin/grafana-1.png) ![](../../../assets/images/plugin/grafana-2.png) ![](../../../assets/images/plugin/grafana-3.png) ### 可有的指标 * `Status codes`: upstream 服务返回的 HTTP 状态码，可以统计到每个服务或所有服务的响应状态码的次数总和。具有的维度： | 名称 | 描述 | | -------------| --------------------| | code | upstream 服务返回的 HTTP 状态码。 | | route | 请求匹配的 route 的 `route_id`，未匹配，则默认为空字符串。 | | matched_uri | 请求匹配的 route 的 `uri`，未匹配，则默认为空字符串。 | | matched_host | 请求匹配的 route 的 `host`，未匹配，则默认为空字符串。 | | service | 与请求匹配的 route 的 `service_id`。当路由缺少 service_id 时，则默认为 `$host`。 | | consumer | 与请求匹配的 consumer 的 `consumer_name`。未匹配，则默认为空字符串。 | | node | 命中的 upstream 节点 `ip`。| * `Bandwidth`: 流经 APISIX 的总带宽(可分出口带宽和入口带宽)，可以统计到每个服务的带宽总和。具有的维度： | 名称 | 描述 | | -------------| ------------- | | type | 带宽的类型(`ingress` 或 `egress`)。 | | route | 请求匹配的 route 的 `route_id`，未匹配，则默认为空字符串。 | | service | 与请求匹配的 route 的 `service_id`。当路由缺少 service_id 时，则默认为 `$host`。 | | consumer | 与请求匹配的 consumer 的 `consumer_name`。未匹配，则默认为空字符串。 | | node | 命中的 upstream 节点 `ip`。 | * `etcd reachability`: APISIX 连接 etcd 的可用性，用 0 和 1 来表示，`1` 表示可用，`0` 表示不可用。 * `Connections`: 各种的 Nginx 连接指标，如 active（正处理的活动连接数），reading（nginx 读取到客户端的 Header 信息数），writing（nginx 返回给客户端的 Header 信息数），已建立的连接数。 * `Batch process entries`: 批处理未发送数据计数器，当你使用了批处理发送插件，比如：sys logger, http logger, sls logger, tcp logger, udp logger and zipkin, 那么你将会在此指标中看到批处理当前尚未发送的数据的数量。 * `Latency`: 每个服务的请求用时和 APISIX 处理耗时的直方图。具有的维度： | 名称 | 描述 | | -------------| ------------- | | type | 它的值固定为 `request`，表示 HTTP 请求。 | | service | 与请求匹配的 route 的 `service_id`。当路由缺少 service_id 时，则默认为 `$host`。 | | consumer | 与请求匹配的 consumer 的 `consumer_name`。未匹配，则默认为空字符串。 | | node | 命中的 upstream 节点 `ip`。 | * `Overhead`: 每个服务在 APISIX 中的请求开销（以毫秒为单位）。具有的维度： | 名称 | 描述 | | -------------| ------------- | | type | 它的值固定为 `request`，表示 HTTP 请求。 | | service | 与请求匹配的 route 的 `service_id`。当路由缺少 service_id 时，则默认为 `$host`。 | | consumer | 与请求匹配的 consumer 的 `consumer_name`。未匹配，则默认为空字符串。 | | node | 命中的 upstream 节点 `ip`。 | * `Info`: 当前 APISIX 节点信息。 这里是 APISIX 的原始的指标数据集: ```shell $ curl http://127.0.0.2:9080/apisix/prometheus/metrics # HELP apisix_bandwidth Total bandwidth in bytes consumed per service in Apisix # TYPE apisix_bandwidth counter apisix_bandwidth{type="egress",route="",service="127.0.0.1",consumer="",node=""} 8417 apisix_bandwidth{type="egress",route="1",service="",consumer="",node="127.0.0.1"} 1420 apisix_bandwidth{type="egress",route="2",service="",consumer="",node="127.0.0.1"} 1420 apisix_bandwidth{type="ingress",route="",service="127.0.0.1",consumer="",node=""} 189 apisix_bandwidth{type="ingress",route="1",service="",consumer="",node="127.0.0.1"} 332 apisix_bandwidth{type="ingress",route="2",service="",consumer="",node="127.0.0.1"} 332 # HELP apisix_etcd_modify_indexes Etcd modify index for APISIX keys # TYPE apisix_etcd_modify_indexes gauge apisix_etcd_modify_indexes{key="consumers"} 0 apisix_etcd_modify_indexes{key="global_rules"} 0 apisix_etcd_modify_indexes{key="max_modify_index"} 222 apisix_etcd_modify_indexes{key="prev_index"} 35 apisix_etcd_modify_indexes{key="protos"} 0 apisix_etcd_modify_indexes{key="routes"} 222 apisix_etcd_modify_indexes{key="services"} 0 apisix_etcd_modify_indexes{key="ssls"} 0 apisix_etcd_modify_indexes{key="stream_routes"} 0 apisix_etcd_modify_indexes{key="upstreams"} 0 apisix_etcd_modify_indexes{key="x_etcd_index"} 223 # HELP apisix_batch_process_entries batch process remaining entries # TYPE apisix_batch_process_entries gauge apisix_batch_process_entries{name="http-logger",route_id="9",server_addr="127.0.0.1"} 1 apisix_batch_process_entries{name="sls-logger",route_id="9",server_addr="127.0.0.1"} 1 apisix_batch_process_entries{name="tcp-logger",route_id="9",server_addr="127.0.0.1"} 1 apisix_batch_process_entries{name="udp-logger",route_id="9",server_addr="127.0.0.1"} 1 apisix_batch_process_entries{name="sys-logger",route_id="9",server_addr="127.0.0.1"} 1 apisix_batch_process_entries{name="zipkin_report",route_id="9",server_addr="127.0.0.1"} 1 # HELP apisix_etcd_reachable Config server etcd reachable from Apisix, 0 is unreachable # TYPE apisix_etcd_reachable gauge apisix_etcd_reachable 1 # HELP apisix_http_status HTTP status codes per service in Apisix # TYPE apisix_http_status counter apisix_http_status{code="200",route="1",matched_uri="/hello",matched_host="",service="127.0.0.2",consumer="",node="127.0.0.1"} 4 apisix_http_status{code="200",route="2",matched_uri="/world",matched_host="",service="bar.com",consumer="",node="127.0.0.1"} 4 apisix_http_status{code="404",route="",matched_uri="",matched_host="",service="127.0.0.1",consumer="",node=""} 1 # HELP apisix_nginx_http_current_connections Number of HTTP connections # TYPE apisix_nginx_http_current_connections gauge apisix_nginx_http_current_connections{state="accepted"} 11994 apisix_nginx_http_current_connections{state="active"} 2 apisix_nginx_http_current_connections{state="handled"} 11994 apisix_nginx_http_current_connections{state="reading"} 0 apisix_nginx_http_current_connections{state="total"} 1191780 apisix_nginx_http_current_connections{state="waiting"} 1 apisix_nginx_http_current_connections{state="writing"} 1 # HELP apisix_nginx_metric_errors_total Number of nginx-lua-prometheus errors # TYPE apisix_nginx_metric_errors_total counter apisix_nginx_metric_errors_total 0 # HELP apisix_http_latency HTTP request latency in milliseconds per service in APISIX # TYPE apisix_http_latency histogram apisix_http_latency_bucket{type="request",service="",consumer="",node="127.0.0.1",le="1"} 1 apisix_http_latency_bucket{type="request",service="",consumer="",node="127.0.0.1",le="2"} 1 ... # HELP apisix_http_overhead HTTP request overhead added by APISIX in milliseconds per service in APISIX # TYPE apisix_http_overhead histogram apisix_http_overhead_bucket{type="request",service="",consumer="",node="127.0.0.1",le="1"} 1 apisix_http_overhead_bucket{type="request",service="",consumer="",node="127.0.0.1",le="2"} 1 ... # HELP apisix_node_info Info of APISIX node # TYPE apisix_node_info gauge apisix_node_info{hostname="desktop-2022q8f-wsl"} 1 ``` ## 禁用插件 在插件设置页面中删除相应的 json 配置即可禁用 `prometheus` 插件。APISIX 的插件是热加载的，因此无需重启 APISIX 服务。 ```shell curl http://127.0.0.1:9080/apisix/admin/routes/1 -H 'X-API-KEY: edd1c9f034335f136f87ad84b625c8f1' -X PUT -d ' { "uri": "/hello", "plugins": {}, "upstream": { "type": "roundrobin", "nodes": { "127.0.0.1:80": 1 } } }' ```