【监控】Blackbox Exporter 黑盒监控

Blackbox Exporter 是 Prometheus 生态系统中的一个重要组件，用于执行 黑盒监控（Blackbox Monitoring）。与传统监控直接访问系统内部指标不同，黑盒监控通过向目标服务发送请求并分析响应，来评估服务的可用性、性能和功能状态。

核心功能与用途

1. 网络服务探测

HTTP/HTTPS：检查网站是否可访问、响应时间、状态码（如 200/404/500）、SSL 证书有效期等。
TCP：测试端口连通性（如数据库端口 3306、SSH 端口 22）。
DNS：验证域名解析是否正常、解析时间和结果是否符合预期。
ICMP/Ping：检测主机是否在线、网络延迟。

2. 服务可用性监控

通过定期发送请求，判断服务是否正常运行（如 API 是否返回预期数据）。
对关键业务链路进行端到端测试（如用户登录流程、支付链路）。

3. 性能指标收集

测量请求响应时间（Latency）、吞吐量（Throughput）。
跟踪 SSL 握手时间、DNS 解析耗时等细分指标。

4. 告警触发

结合 Prometheus 和 Alertmanager，当探测失败或响应超时（如 HTTP 500 错误、SSL 证书即将过期）时发送告警。

工作原理

探针（Probes）：
Blackbox Exporter 支持多种探针类型（HTTP、TCP、DNS 等），每种探针定义了如何向目标发送请求并解析响应。
暴露指标：
探针执行后，Blackbox Exporter 将结果转换为 Prometheus 可识别的指标（如 <font style="color:#DF2A3F;">probe_success</font>、<font style="color:#DF2A3F;">probe_duration_seconds</font>）。
Prometheus 集成：
Prometheus 定期从 Blackbox Exporter 拉取这些指标，并存储为时间序列数据。
可视化与告警：
- 使用 Grafana 可视化探测结果（如响应时间趋势图）。
- 通过 Alertmanager 配置告警规则（如连续 3 次探测失败触发告警）。

典型应用场景

网站监控：
- 监控官网、API 网关的可用性和响应时间。
- 检查 SSL 证书有效期，提前预警即将过期的证书。
网络基础设施监控：
- 监控路由器、负载均衡器等网络设备的连通性。
- 检测 DNS 解析是否正常（如 A/AAAA 记录是否正确）。
服务依赖检查：
- 验证微服务之间的调用链路是否畅通（如服务 A → 服务 B → 数据库）。
- 监控第三方 API（如支付接口、短信服务）的可用性。
分布式系统监控：
- 从多个地理位置（如不同机房、CDN 节点）探测服务，识别区域性故障。

配置与使用示例

1. 配置文件（blackbox.yml）

modules:http_2xx:  # 定义 HTTP 探针prober: httptimeout: 5shttp:valid_status_codes: [200]  # 仅 200 状态码视为成功method: GETno_follow_redirects: falsetls_config:insecure_skip_verify: false  # 验证 SSL 证书tcp_connect:  # 定义 TCP 探针prober: tcptimeout: 5s

2. Prometheus 配置

scrape_configs:- job_name: 'blackbox'metrics_path: /probeparams:module: [http_2xx]  # 使用上面定义的 HTTP 探针static_configs:- targets:- https://example.com  # 要监控的目标 URLrelabel_configs:- source_labels: [__address__]target_label: __param_target- source_labels: [__param_target]target_label: instance- target_label: __address__replacement: 127.0.0.1:9115  # Blackbox Exporter 的地址

3. 常用指标

probe_success：探测是否成功（1=成功，0=失败）。
probe_duration_seconds：探测总耗时。
probe_http_status_code：HTTP 响应状态码。
probe_http_content_length：响应内容长度。
probe_tls_verify_result：SSL 证书验证结果。

优缺点

优点

非侵入性：无需在目标系统中安装代理，适合监控第三方服务。
灵活的探针类型：支持多种协议，覆盖大多数网络服务。
与 Prometheus 无缝集成：利用 Prometheus 的强大查询和告警能力。

缺点

无法获取内部指标：只能观察服务的外部表现，无法深入分析系统内部状态（如 CPU/内存使用率）。
依赖网络环境：探测结果可能受网络波动影响，需结合白盒监控（如 Node Exporter）综合判断。

对比其他监控工具

与 Zabbix/Nagios 对比：
Blackbox Exporter 更专注于网络探测，且与 Prometheus 生态深度集成，适合云原生环境。
与 New Relic/Datadog 对比：
后者为商业化 APM 工具，功能更全面，但 Blackbox Exporter 开源免费，适合轻量级场景。