简单介绍

prometheus-operator 中的每个 Prometheus CRD 资源，Operator 都会以 StatefulSet 形式在相同的命名空间下部署对应配置的资源，Prometheus Pod 的配置是通过一个包含 Prometheus 配置的名为 <prometheus-name> 的 Secret 对象声明挂载的。

该 CRD 根据标签选择来指定部署的 Prometheus 实例应该覆盖哪些 ServiceMonitors，然后 Operator 会根据包含的 ServiceMonitors 生成配置，并在包含配置的 Secret 中进行更新。

如果未提供对 ServiceMonitor 的选择，则 Operator 会将 Secret 的管理留给用户，这样就可以提供自定义配置，同时还能享受 Operator 管理 Operator 的设置能力。

本文主要介绍如何在不创建ServiceMonitor 的情况下直接通过修改Secret 从而修改prometheus配置

要修改由prometheus-operator部署的Prometheus实例的配置文件，可以使用以下步骤：

1. 首先，通过kubectl命令行工具连接到您的Kubernetes集群。
2. 找到prometheus实例的名称，例如：

kubectl get prometheus

这将列出您的Kubernetes集群中所有prometheus实例的名称。

1. 执行以下命令，将prometheus实例的配置文件导出到本地文件中：

kubectl get secret <prometheus-operator-name>-prometheus -o jsonpath="{.data['prometheus\.yaml\.gz']}" | base64 --decode |gzip -d > prometheus.yml

其中，是您的prometheus-operator实例的名称。此命令将把prometheus实例的配置文件解码为prometheus.yml文件。例如：

kubectl -n kubesphere-monitoring-system get secret prometheus-k8s -o jsonpath="{.data['prometheus\.yaml\.gz']}" | base64 --decode | gzip -d  > prometheus.yml

1. 然后，您可以使用任何文本编辑器来修改prometheus.yml文件中的配置。例如，您可以添加或删除抓取目标，配置告警规则或修改抓取的时间间隔。
2. 修改后，使用以下命令将新的配置文件重新导入到prometheus实例中：

kubectl create secret generic <prometheus-operator-name>-prometheus --from-file=prometheus.yml -n <namespace> --dry-run=client -o yaml | kubectl apply -f -

其中，是您的prometheus-operator实例的名称，是您的prometheus实例所在的Kubernetes命名空间。 例如：

kubectl create secret generic prometheus-k8s --from-file=prometheus.yml -n kubesphere-monitoring-system  --dry-run=client -o yaml | kubectl apply -f -

最后，重启prometheus实例，以便它可以加载新的配置文件。 这些步骤应该可以帮助您修改prometheus-operator部署的Prometheus实例的配置文件。

然而这样并没有奏效[手动狗头]：

如果你是通过helm部署的，直接修改serviceMonitor相关文件。

我这里是通过ks-install Kubesphere集成您自己的 Prometheus 方式安装的，主要是为了修改kubesphere自带prometheus监控中被过滤掉的指标（ 基于 kube-prometheus 的定制版本生成）比如:

我需要 node-exporter 中node_filefd_allocated，node_cpu_seconds_total，node_filesystem_avail_bytes等指标 或者 container 中container_start_time_seconds、 container_fs_reads_bytes_total 、container_spec_memory_limit_bytes等等指标

就需要分别修改ks-installer/roles/ks-monitor/files/prometheus/node-exporter/node-exporter-serviceMonitor.yaml 和 ks-installer/roles/ks-monitor/files/prometheus/kubernetes/kubernetes-serviceMonitorKubelet.yaml 中的metricRelabelings部分

如图：

总结：在prometheus-operator方式下prometheus的配置文件是Operator 根据包含的 ServiceMonitors 生成配置，并在包含配置的 Secret 中进行更新，最终以Secrt对象将配置文件挂载到prometheus 中，同时也实现了配置文件的自动更新