Prometheus指标优化

1、调大prometheus去拉取pushgateway的时间间隔和拉取超时时间

# 这里只贴了核心的配置，全量配置放在gitlab上，具体参考附录部分
- job_name: pushgateway-bj2
  scrape_interval: 30s
  scrape_timeout: 30s
  
 2、业务侧拆分（后期量级实在太大再考虑这种方案）
再启动一个额外的pushgateway，但是需要告知部分业务方，打点数据发到新的pushgateway上。也就是按照业务维度拆分pushgateway。

# 这里只贴了部分的配置，最新的配置放在gitlab上，具体参考附录部分
- job_name: pushgateway-devops
  .....
  metric_relabel_configs:
    - source_labels: [__name__]
      separator: ','
      regex: '(process_cpu_seconds_total|process_open_fds|process_max_fds)'
      action: drop  


- job_name: kubernetes-cadvisor
  .....
  metric_relabel_configs:
  - source_labels: [__name__]
    regex: container_(network_tcp_usage_total|network_udp_usage_total|tasks_state|cpu_load_average_10s)
    action: drop    

        topk(10,count by (__name__) ({__name__=~'.+'}))

        topk(10,count by (__name__,job) ({__name__=~'.+'}))