图中主要组件及工作流程介绍：

• push gateway：Prometheus server 的一个代理节点, 当一些节点没有提供HTTP endpoint 时，可将数据push 到代理节点，Prometheus 会去代理节点获取数据;
• exporters：数据采集插件, 暴露一个http 服务的接口给Prometheus server 定时抓取;
• alertmanager：报警插件；

1.2 Grafana概述

Grafana 是一款用GO 语言开发的开源数据可视化工具，可以做数据监控和数据统计，带有告警功能。他提供了强大和优雅的方式去创建、共享、浏览数据。dashboard中显示了你不同metric数据源中的数据，是一个拥有丰富dashboard和图表编辑的指标分析平台。

1.3 云原生nginx-ingress概述

在Kubernetes集群中，Ingress作为集群内服务对外暴露的访问接入点，其几乎承载着集群内服务访问的所有流量。Ingress是Kubernetes中的一个资源对象，用来管理集群外部访问集群内部服务的方式。您可以通过Ingress资源来配置不同的转发规则，从而达到根据不同的规则设置访问集群内不同的Service所对应的后端Pod。

为了使得Nginx Ingress资源正常工作，集群中必须要有个Nginx Ingress Controller来解析Nginx Ingress的转发规则。Nginx Ingress Controller收到请求，匹配Nginx Ingress转发规则转发到后端Service所对应的Pod，由Pod处理请求。Kubernetes中Service、Nginx Ingress与Nginx Ingress Controller有着以下关系：

• Service是后端真实服务的抽象，一个Service可以代表多个相同的后端服务。
• Nginx Ingress是反向代理规则，用来规定HTTP/HTTPS请求应该被转发到哪个Service所对应的Pod上。例如根据请求中不同的Host和URL路径，让请求落到不同Service所对应的Pod上。
• Nginx Ingress Controller是一个反向代理程序，负责解析Nginx Ingress的反向代理规则。如果Nginx Ingress有增删改的变动，Nginx Ingress Controller会及时更新自己相应的转发规则，当Nginx Ingress Controller收到请求后就会根据这些规则将请求转发到对应Service的Pod上。

具体原理深入介绍请学习 https://www.nginx.org.cn/article/detail/12415

二、部署nginx-ingress

2.1 安装

nginx-ingress-controller 安装较为复杂，具体安装请参考：

https://docs.nginx.com/nginx-ingress-controller/installation/installation-with-manifests/

2.2配置更新

Ingress controller启动的时候开启prometheus， 如下图所示，端口使用的是9113来暴露metrics 数据，启动后可通过 curl http://{ingressIP}:9113/metrics 可看到暴露的metrics数据。

3.1安装

从https://prometheus.io/download/ 下载prometheus 对应版本的server， 此处选的是linux版本。

将tar包解压，此处解压到/usr/local/prometheus

3.2 配置数据来源

配置抓取数据来源为上面暴露的9113端口

编辑/usr/local/prometheus/prometheus.yml， 配置targets为{ingressIP}:9113

3.3 启动

/usr/local/prometheus/prometheus --config.file=/usr/local/prometheus/prometheus.yml &

此时已经在9090端口上启动了该服务

Prometheus 自带url也可访问到

四、部署Grafana

4.1 安装

按照下面地址下载grafana 安装包文件：

wget https://dl.grafana.com/enterprise/release/grafana-enterprise-9.2.0-1.x86_64.rpm

下载后进行安装：

yum install grafana-enterprise-9.2.0-1.x86_64.rpm

4.2 启动

执行如下命令启动grafana， 默认端口3000

systemctl enable --now grafana-server

启动后，可访问http://{机器IP}:3000/， 登录默认用户名密码为admin/admin

如果忘记密码可进行重置，如下命令是将admin 密码设置为123456

grafana-cli admin reset-admin-password 123456

4.3 配置grafana数据源

4.3.1 选择data source菜单，选择prometheus数据源

4.3.2 配置 url 以及起个Name 

此处叫Prometheus， url 地址即为上面安装的prometheus server地址，下面有sava & test 按钮，成功已否，会有提示

4.4 创建或导入数据源

如果有面板json文件，可直接进行导入，如果没有可选择创建dash board，此处已经准备好json文件，故直接导入，此处的json文件来源

https://github.com/nginxinc/kubernetes-ingress/blob/main/grafana/NGINXPlusICDashboard.json注意文件里的datasource 要保证跟创建的datasource name一致

五、效果展示

最后面板可看到如下效果：

总结

通过grafana展示nginx metrics数据这个例子的学习和动手实践，相信大家已经能够掌握从数据暴露、抓取、再到展示一整套流程，上述教程也只是帮助大家简单上手项目，更多知识需要大家去深入学习。