fix(cicd): disable automatic PaC webhooks
This commit is contained in:
@@ -31,7 +31,7 @@
|
||||
|
||||
单个 HWLAB PipelineRun 曾同时展开 14 个 `build-services` TaskRun,使 8 核 NC01 的 load、Swap 和 k3s Kine/SQLite 延迟同时上升,并造成核心 API 约四分钟 502。PaC Repository 的 `concurrencyLimit` 只限制 Repository 触发层的并发 PipelineRun,不能限制一个 PipelineRun 内 matrix 展开的 TaskRun 数量。
|
||||
|
||||
治理目标是让每个发布意图只产生一个受控运行,并让单次运行中的构建工作按 YAML 预算进入有界 worker 队列。CI 压力下,k3s 控制面、CoreDNS、Sub2API 和 Public Edge 的可用性优先于构建吞吐。
|
||||
治理目标是让 PR merge 和 branch update 不再产生发布运行;每个经人工审阅的发布意图只产生一个受控运行,并让单次运行中的构建工作按 YAML 预算进入有界 worker 队列。CI 压力下,k3s 控制面、CoreDNS、Sub2API 和 Public Edge 的可用性优先于构建吞吐。
|
||||
|
||||
## 3. 架构与数据流
|
||||
|
||||
@@ -46,7 +46,7 @@ flowchart LR
|
||||
K --> C[核心运行面保护]
|
||||
```
|
||||
|
||||
Repository 触发排队和 Pipeline 内构建排队是两个独立层次。前者继续由 PaC Repository `concurrencyLimit` 管理,后者由 renderer 将目标 matrix 收敛为一个受资源约束的 TaskRun,并在 Pod 内按 `maxParallelServices` 执行有界 worker 队列。不得复制大型内联 `taskSpec`,不得把二者合并为同名字段,也不得创建数据库、ConfigMap 或常驻控制器作为第二队列 authority。
|
||||
受控手动发布触发和 Pipeline 内构建排队是两个独立层次。前者由发布 `plan`、人工审阅和带计划指纹的 `trigger` 管理,PaC Repository `concurrencyLimit` 只作为运行并发上限;后者由 renderer 将目标 matrix 收敛为一个受资源约束的 TaskRun,并在 Pod 内按 `maxParallelServices` 执行有界 worker 队列。不得复制大型内联 `taskSpec`,不得把二者合并为同名字段,也不得创建数据库、ConfigMap 或常驻控制器作为第二队列 authority。
|
||||
|
||||
## 4. 配置合同
|
||||
|
||||
@@ -57,6 +57,8 @@ HWLAB node/lane target 的 `ciResourceGovernance` 至少声明:
|
||||
- `build.stepResources`:构建工具 step 的 CPU/内存 requests 与 limits。
|
||||
- `build.sidecarResources`:BuildKit sidecar 的 CPU/内存 requests 与 limits。
|
||||
- `build.priorityClassName`:构建 Pod 的可抢占优先级;必须低于核心运行面。
|
||||
- `deliveryTrigger.mode`:L2/L3 固定为 `manual-plan-confirm`,禁止配置自动 push、merge 或 branch follower 触发。
|
||||
- `deliveryTrigger.mechanism`:固定为 `pac-webhook`;受控 CLI 发送 webhook,禁止直建 PipelineRun。
|
||||
- `dedupe.identityFields`:稳定意图键字段,固定为 repository、lane、source commit 和 pipeline intent。
|
||||
- `coreProtection`:核心服务优先级和最小资源预算的配置引用;各服务事实仍归自身 owning YAML,不复制进 HWLAB lane YAML。
|
||||
|
||||
@@ -74,7 +76,7 @@ Renderer 必须只对 YAML 选中的构建 matrix 建立有界 worker 队列。
|
||||
|
||||
### 5.3 CI-RESOURCE-REQ-003 稳定去重
|
||||
|
||||
自动触发的发布意图键固定为 `repository + lane + source commit + pipeline intent`。相同键已处于 queued、running 或 succeeded 时,自动 poll 不得再创建第二次构建。人工重跑必须使用显式受控入口,携带独立、可审计的 rerun intent;不得通过删除旧 PipelineRun、修改 label 或人工创建 PipelineRun 绕过去重。
|
||||
手动触发的发布意图键固定为 `repository + lane + source commit + pipeline intent`。相同键已处于 queued、running 或 succeeded 时,受控入口不得再创建第二次构建。人工重跑必须使用显式受控入口,携带独立、可审计的 rerun intent,并先重新 plan;不得通过删除旧 PipelineRun、修改 label 或人工创建 PipelineRun 绕过去重。
|
||||
|
||||
### 5.4 CI-RESOURCE-REQ-004 核心运行面保护
|
||||
|
||||
@@ -82,12 +84,16 @@ CoreDNS 和 k3s 控制面使用 Kubernetes 系统关键优先级。Sub2API 和
|
||||
|
||||
### 5.5 CI-RESOURCE-REQ-005 状态与诊断
|
||||
|
||||
`plan`、`status` 和 `diagnosis` 必须在一次输出中披露:YAML configRef、触发层 concurrency、构建层 max parallel、批次数、运行/排队 TaskRun 数、step/sidecar 资源合同、priority class、稳定意图键状态和核心保护摘要。共享读取超时只能投影为 warning 或 unavailable,不得把全部 consumer 伪装为真实失败。
|
||||
`plan` 必须针对精确 source commit 在一次只读输出中披露:YAML configRef、env identity、env reuse/build 判定、待构建镜像数量与服务列表、待 rollout 服务、全部受影响服务、范围基线、新增范围、触发层 concurrency、构建层 max parallel、批次数、step/sidecar 资源合同、priority class 和核心保护摘要。`status` 和 `diagnosis` 必须披露运行/排队 TaskRun 数与稳定意图键状态。共享读取超时只能投影为 warning 或 unavailable,不得把全部 consumer 伪装为真实失败。
|
||||
|
||||
### 5.6 CI-RESOURCE-REQ-006 中心自动触发禁用
|
||||
|
||||
中心 PaC owning YAML 必须声明 `deliveryTrigger.mode=manual-plan-confirm` 和 `deliveryTrigger.mechanism=pac-webhook`。PaC webhook 接收端继续作为唯一 PipelineRun 创建入口,但 Gitea push hook、PR merge callback、branch follower、poller 和其他自动发送方不得调用它;PR merge 后只允许 source mirror 或 authority 更新。受控 apply 必须删除或禁用 Gitea 自动 hook,并在 status 中把自动发送方启用视为配置漂移。
|
||||
|
||||
## 6. 验收
|
||||
|
||||
- L0:配置解析、资源 quantity、requests/limits 关系、matrix 收敛、有界 worker 队列和依赖保持通过轻量验证。
|
||||
- L1:受控 `plan/status/diagnosis` 显示 YAML 来源、并发预算、批次、资源和保护状态,不依赖裸 Kubernetes 命令。
|
||||
- L2:由正常 HWLAB source PR merge 自动触发,禁止人工补 PipelineRun;观察到同一时刻构建 TaskRun 不超过 YAML 预算,相同 source commit 的自动 poll 不产生第二次构建,所有构建 Pod 带资源合同,并且 NC01 Node、CoreDNS、Sub2API、Public Edge 和公开 API 在构建期间保持健康。
|
||||
- L2:正常 HWLAB source PR merge 后不产生 PipelineRun。受控 `plan` 显示 env reuse、镜像构建数量、精确构建与 rollout 范围且没有非预期扩大;随后使用手动 `trigger` 向 PaC 发送一次 webhook,并由 PaC 创建一次 PipelineRun。观察到同一时刻构建 TaskRun 不超过 YAML 预算,相同发布意图不产生第二次构建,所有构建 Pod 带资源合同,并且 NC01 Node、CoreDNS、Sub2API、Public Edge 和公开 API 在构建期间保持健康。
|
||||
|
||||
验收失败时保留自动链证据并修复 owning YAML 或 renderer。重启 k3s、删除 Pod/PipelineRun、手工 Argo sync、运行时 patch、mirror flush 或人工补跑均不能作为最终通过证据。
|
||||
验收失败时保留计划、手动触发链和运行证据,并修复 owning YAML、planner 或 renderer。重启 k3s、删除 Pod/PipelineRun、手工 Argo sync、运行时 patch、mirror flush 或裸补跑均不能作为最终通过证据。
|
||||
|
||||
Reference in New Issue
Block a user