scrapy 监控 Prometheus 介绍与安装(1)

2022-08-05 17:05:44 阅读：212 来源： 互联网

标签：global prometheus scrape Prometheus scrapy 监控 yml

一. 概述

　　Prometheus 是一个开源的服务监控系统和时间序列数据库。包括监控和告警，实现流式监控数据的收集、存储、查询、告警，它将指标收集并存储为时间序列数据库(time series data)。大多数 Prometheus 组件都是用Go编写的，这使得它们易于构建和部署为静态二进制文件。

　　它支持灵活的查询语言PromQL，利用PromQL非常方便地查询和分析某个时间段内的各项指标数据，它提供了可视化UI，还支持告警配置等功能。

　　下面是Prometheus 的架构及其一些生态系统组件：

2.什么时候合适使用

　　Prometheus 可以很好的记录任何纯数字时间序列，它既适应于面向服务等硬件指标的监控，也适用于高动态的面向服务的架构的监控，对于现在流行的微服务，它的多维度数据收集和数据筛选查询语言也是非常强大的。

　　Prometheus 专为可靠性而设计，是您在中断期间可以使用的系统，可让您快速诊断问题。每个 Prometheus 服务器都是独立的，不依赖于网络存储或其他远程服务。当您的基础设施的其他部分损坏时，您可以依赖它，并且您无需设置大量基础设施即可使用它。

3.什么时候不合适使用

　　Prometheus 重视可靠性。即使在故障情况下，您也可以随时查看有关系统的可用统计信息。如果您需要 100% 的准确性，例如按请求计费，Prometheus 不是一个好的选择，因为收集的数据可能不够详细和完整。在这种情况下，您最好使用其他系统来收集和分析数据以进行计费，并使用 Prometheus 进行其余的监控

4.预编译的二进制文件包下载

　　https://prometheus.io/download/ 下载解压，解压后如下所示

[root@iZwz97yqubb71vyxhuskfyZ prometheus-2.36.0.linux-amd64]# pwd
/root/prometheus/prometheus-2.36.0.linux-amd64
[root@iZwz97yqubb71vyxhuskfyZ prometheus-2.36.0.linux-amd64]# ls
console_libraries  consoles  data  LICENSE  NOTICE  prometheus  prometheus.yml  promtool

5.prometheus.yml配置文件

# my global config
global:
  scrape_interval: 15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.
  evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.
  # scrape_timeout is set to the global default (10s).

# Alertmanager configuration
alerting:
  alertmanagers:
    - static_configs:
        - targets:
          # - alertmanager:9093

# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:
  # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
  - job_name: "prometheus"

    # metrics_path defaults to '/metrics'
    # scheme defaults to 'http'.

    static_configs:
      - targets: ["xx.xxx.xx.xx:9090"]

  - job_name: 'scrapy'
    static_configs:
      - targets: ['120.24.xx.xxx:9410']

　　配置文件有三个配置块： global, rule_files, 和 scrape_configs

　　global块为prometheus服务器的全局配置：

　　　　1)scrape_interval 控制prometheus抓取目标的频率，默认15一次。

　　　　2)evaluation_interval 评估规则(rule)的频率，默认15一次, prometheus使用规则来创建新的时间序列并生成警报。

　　rule_files块指定prometheus服务器加载任何规则的位置，上面yml文件中没有任何规则。

　　scrape_configs块控制prometheus监控的资源。由于它还将自身的数据公开为http站点，因此它可以抓取和监控自己的健康状况，上面yml文件监控了自己和scrapy(后续介绍)。默认配置中，只监控自己job_name：“prometheus”，它会抓取prometheus服务器公开的时间序列数据。该作业包含一个静态配置的目标，即localhost:9090,默认的作业是通过抓取http://localhost:9090/metrics的url指标站点。

　　　　返回的时间序列数据将详细说明 Prometheus 服务器的状态和性能，如下所示：

6.启动prometheus

[root@iZwz97yqubb71vyxhuskfyZ prometheus-2.36.0.linux-amd64]# ls
console_libraries  consoles  data  LICENSE  NOTICE  prometheus  prometheus.yml  promtool
[root@iZwz97yqubb71vyxhuskfyZ prometheus-2.36.0.linux-amd64]# ./prometheus  --config.file=prometheus.yml

　　启动成功后，tcp地址为： 0.0.0.0:9090

　　打开 http://localhost:9090浏览到关于自身的状态页面。给它大约 30 秒的时间从它自己的 HTTP 指标端点收集关于它自己的数据。
　　打开 http://localhost:9090/metrics指标端点来验证 Prometheus 是否正在提供有关自身的指标

官方文档地址： https://prometheus.io/docs/introduction/overview/

标签：global,prometheus,scrape,Prometheus,scrapy,监控,yml
来源： https://www.cnblogs.com/MrHSR/p/16550914.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

ICode9

scrapy 监控 Prometheus 介绍与安装(1)

一. 概述