一、笔记基础信息栏

• 笔记标题Promeus监控、GitLab与Jenkins部署实战
• 所属模块云基础/容器技术/云运维/CI-CD
• 学习难度中级
• 主要标签#云原生 #Promeus #监控 #GitLab #Jenkins #CI/CD #Kubernetes #DevOps
• 学习目标掌握Promeus监控K8s集群的部署与配置、完成GitLab在K8s中的部署与基础实验、完成Jenkins在K8s中的部署与CI/CD实验练习。
• 前置知识Kubernetes基础操作、Helm包管理工具基础、Linux基础命令。

二、主要知识笔记模块

至于模块1。Promeus监控Kubernetes集群部署

. 主要定义与本质

• 标准定义Promeus是一个开源的程序监控和告警工具，采用Pull模型采集指标数据，通过PromQL查询语言分析一下，配合Grafana实现可视化展示。

  

• 大白话解读: Promeus就像一个“数据采集员”，定期去各个节点和Pod那里“敲门”问“你现在CPU用了多少？内存用了多少，”，接下来把数据存下来；怎么说呢，Grafana则像一个“仪表盘”。把这些数据用图表展示来让你一眼就能看出集群健康状态。

Node Exporter:
采集每个节点的CPU、内存、磁盘、网络等主机指标； 话说回来，
kube-state-metrics:
采集K8s对象状态；
cAdvisor:
采集容器级资源指标；
Promeus Server:
存储指标并提供查询；

. 常见使用者痛点及方法

使用者痛点	原因分析	推荐方法
资源使用情况高	默认保留时间长，未设置资源限制	调整retention为15d，设置合理resources.limits
告警滞后	Alertmanager配置不当	配置合理的抑制规则和延迟策略
仪表盘混乱	未有效组织大屏	分类创建文件夹，按角色权限划分访问
历史数据丢失	未备份TSDB数据	配置持久化存储+定期备份

. 常见错误场景 plaintext 说到错误场景1，Targets显示DOWN 再看原因，ServiceMonitor未匹配Service或RBAC权限不足 解决的观点是，检查selector匹配性 + ClusterRole权限 至于错误场景2，Grafana无数据显示 原因这方面，数据源URL配置错或未选中正确服务端点 解决这方面，验证http://prom-operated.monitoring.svc:9090可达性 再看错误场景3，高频抓取导致OOM 原因的观点是，未设置抓取间隔或内存限制过低 解决这方面，scrape_interval调整至30s + 增加memory limits到2Gi 至于错误场景4，指标丢失问题 从原因来看，未启用长期存储或保留时间过短 再看解决。配置外部存储 + 调整retention到6个月以上

. 常用方法推荐

1. 分层监控架构

   • 底层节点指标
   • 中间层应用状态
   • 上层业务自定义

2. 三重告警机制

   • PromQL阈值触发 → Alertmanager接收 → 外部通知

3. 资源调整技巧 yaml resources: requests: 从cpu来看，"500m" memory的观点是，"1Gi" 再看limits，cpu: "2" 再看memory，"4Gi"

模块2 GitLab深度实践

. CI/CD流水线调整技巧

yaml

stages这方面，- build - test-deploy-prod

variables: DOCKERIMAGEBASENAME=myapp:${CICOMMITSHORTSHA}

buildimage: 说到stage，build script:- docker build --tag $DOCKERIMAGEBASENAME . artifacts: 从paths来看，- output/ expire_in :1 week only:- main

deploytest : stage :test script :- kubectl apply-f k8s/deploy-test.yaml environment :test needs :-job :buildimage rules :- if :$CICOMMITBRANCH == 'dev'

deployprod : stage :prod script :- kubectl apply-f k8s/deploy-prod.yaml environment :production needs :-job :deploytest when manual rules :- if :$CICOMMITBRANCH == 'main'

. 高频问题排查清单

✅ Runner执行超时?按理说，→ 检查runner.yml中exec_timeout设置

✅ Webhook不触发?→ 验证webhook地址是否包含token参数

✅ 作业队列堆积?→ 调整sidekiq_concurrency参数

✅ 大文件上传失败?不过，→ 提高nginx uploadmaxsize到1GB+

模块3 Jenkins公司级应用

2。000+="" 支持动态agent扩缩容="" 活跃社区支持="" 长期支持版本