496 lines
20 KiB
Markdown
496 lines
20 KiB
Markdown
# LOGBOOK - AWOOOI 進度軌跡
|
||
|
||
> **用途**: AI 代理進度追蹤,防止 Session 斷層
|
||
> **規則**: 完成重要節點後追加一行
|
||
> **歷史**: 舊條目已壓縮,詳細記錄見 git log
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-10 Sensor Agent B1 部署完成 ✅)
|
||
|
||
### Sprint 6 B — Sensor Agent 兩台主機部署
|
||
|
||
| 主機 | 狀態 | 採集週期 | Redis |
|
||
|------|------|---------|-------|
|
||
| 192.168.0.110 (wooo) | `active (running)` systemd user service | 30s | awoooi:signals DB10 |
|
||
| 192.168.0.188 (ollama) | `active (running)` systemd user service | 30s | awoooi:signals DB10 |
|
||
|
||
- 三層採集:NodeMetrics + Journal + ServiceProbe 全正常
|
||
- systemd enable → 開機自啟
|
||
- 部署路徑:`~/awoooi-sensor/agent.py --loop --interval 30`
|
||
|
||
**下一步**: C — Telegram E2E 批准閉環真實測試 / D — drift CronJob 診斷
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-10 Sprint 5R Phase 3 完成 ✅)
|
||
|
||
### Sprint 5R Phase 3 — Command Palette + 主機抽屜
|
||
|
||
| 項目 | 內容 | Commit |
|
||
|------|------|--------|
|
||
| ⌘K Command Palette | 全局指令面板,高斯模糊背景,9頁導航+Terminal快速動作,↑↓/Enter/Esc,100% i18n | 89db96f |
|
||
| 主機卡點擊抽屜 | 行內展開:CPU/RAM大字+服務清單(port/latency)+相關事件,✕關閉,選中藍框 | 5244235 |
|
||
| i18n commandPalette | zh-TW + en 兩語言完整 | 89db96f |
|
||
|
||
**下一步**: Backlog B1 Sensor Agent / B5 整合測試 / 或統帥指示
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Sprint 5R Phase 2 完成 ✅)
|
||
|
||
### Sprint 5R Phase 2 — Tab 3 COT + Tab 4 MTTR
|
||
|
||
| 項目 | 內容 | Commit |
|
||
|------|------|--------|
|
||
| Tab 3 Chain-of-Thought 面板 | 點擊 SSE 事件展開 COT(provider/confidence/latency/tools/reasoning),COT badge | ab5ba70 |
|
||
| Tab 4 by_anomaly Top 5 | 水平進度條 + auto_rate 著色(≥80% 綠/≥50% 橙/其他紅) | ab5ba70 |
|
||
| Tab 4 MTTR | 大字顯示秒→分鐘換算,無資料 fallback | ab5ba70 |
|
||
| by_anomaly API 結構修正 | 適配真實欄位 `disposition.total` / `alert_name` / `anomaly_key` | af7b6be |
|
||
| i18n 插值修正 | `byAnomalyAutoRate` 補 `{pct}%` 插值,`mttrUnit` 改「分鐘」 | 764dcf2 |
|
||
| QA 驗證 | Tab 4 截圖確認真實資料渲染正確 | — |
|
||
|
||
**下一步**: ⌘J Command Palette / 其他 Backlog 功能
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Sprint 5R 架構審查 + QA 全驗收 ✅)
|
||
|
||
### Sprint 5R 完整閉環
|
||
|
||
| 階段 | 內容 | Commit |
|
||
|------|------|--------|
|
||
| 架構審查 (首席架構師) | 9 項問題發現:P0 import crash / i18n 10 個 hardcode / fake data / silent error | — |
|
||
| P0 修復 | `proposal_service.py` 補 `get_redis` + `INCIDENT_KEY_PREFIX` import | 890e2a9 |
|
||
| P1 i18n | 拓撲群組移除 emoji,host labels / ai-model-status / disposition / recent-activity 全走 i18n | 890e2a9 |
|
||
| P2 品質 | pending-approvals 靜默錯誤修復 + page-tabs 載入中 i18n + ↑5% 動態化 | 890e2a9 |
|
||
| Linter 強化 | pending-approvals 防重複點擊 + loading 狀態 | 896bef9 |
|
||
| CORS 修復 | `config.py` 補 K3s NodePort 3 個 origin | 8c2983b |
|
||
| sign body 修復 | `signer: 'web-ui'` → `signer_id/name: CURRENT_USER` (修前: 403/422) | 8c2983b |
|
||
| host_aggregator | 四台主機 probe 端點錯誤 → 全部顯示 unhealthy 修正 | 21567a7 |
|
||
| QA 全頁面驗收 | **9/9 通過**,無假資料,HTTP 200,真實 API 資料 | — |
|
||
|
||
**下一步**: 下次 Session 繼續 Sprint 5R Phase 2 (Chain of Thought / MTTR 趨勢 / ⌘J Palette)
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 E2E 驗證 + K8s executor 連線修復)
|
||
|
||
| 項目 | 結果 | Commit |
|
||
|------|------|--------|
|
||
| 部署驗證 (新版本) | ✅ `a4d6b3f3` → `34f0228` 全 Pod Running | — |
|
||
| DB migration telegram_message_id | ✅ K8s Job 執行成功,欄位存在 | 34f0228 |
|
||
| action 解析根本 bug | ✅ `RESTART_DEPLOYMENT` 成功解析 (以前 skip) | ae97808 |
|
||
| K8s ClusterIP 10.43.0.1 不可達 | ✅ `K8S_API_SERVER_URL=https://192.168.0.120:6443` 覆蓋 | 34f0228 |
|
||
| kubectl 實際執行 | ✅ `awoooi-worker` rollout restart `success=True` | 34f0228 |
|
||
| Telegram 按鈕移除邏輯 | ✅ code review 確認正確 | 1483218 |
|
||
|
||
**根本問題**: K3s Pod 內 iptables/kube-proxy 未把 10.43.0.1 流量導到實際 API server
|
||
**修法**: executor.py 讀 `K8S_API_SERVER_URL` env 覆蓋 in-cluster host
|
||
|
||
**下一步**: Sprint 5R Web 截圖驗收
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 批准執行閉環修復 + TG 訊息持久化 + AI 鏈路透明化)
|
||
|
||
| 項目 | 修法 | Commit |
|
||
|------|------|--------|
|
||
| **根本Bug: 批准後永遠不執行** | Nemotron tool 回填 `kubectl_command` | 2c7d5d0 |
|
||
| **根本Bug: action="未知操作"** | proposal_service 優先用 kubectl_command | ae97808 |
|
||
| **TG 按鈕按後無回應** | `_notify_approval_result()` reply 狀態行 | 1483218 |
|
||
| **message_id 僅 Redis 24h** | approval_records 加 telegram_message_id 欄位 | 1483218 |
|
||
| **AI 鏈路不透明** | TG 訊息顯示模型/後端 (Ollama/NIM/Gemini) | d8c2969 |
|
||
| **Ollama 取代 NVIDIA NIM** | OllamaToolProvider llama3.1:8b,44s→4s | 7857c25 |
|
||
| 5 筆孤兒 OBSERVE approval | 直接 EXPIRED 清理 DB | — |
|
||
|
||
**根本問題鏈**:
|
||
```
|
||
Nemotron→restart_deployment(sentry) → 只存 nemotron_tools[] → kubectl_command="" →
|
||
approval_records.action="未知操作 | " → parse_operation_from_action→None →
|
||
execute_approved_action SKIP → 幾個月來批准/拒絕按鈕完全無效
|
||
```
|
||
|
||
**下一步**: 部署驗證 → 新告警完整執行閉環測試
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-10 Sprint 5R 前端重構 13/14 完成 — CD 部署中)
|
||
|
||
| 步驟 | 內容 | Commit | 狀態 |
|
||
|------|------|--------|------|
|
||
| S11 | Tab 2 approvals API 修正 | 289dac6 | ✅ |
|
||
| S12 | 安全合規/知識庫/拓撲圖修復 | 289dac6 | ✅ |
|
||
| S1 | KPI Strip 5 張卡片 | 7a2e07f | ✅ |
|
||
| S4 | 處置統計環形圖 | b85a0e2 | ✅ |
|
||
| S5 | 最近活動時間線 | b85a0e2 | ✅ |
|
||
| S6 | OpenClaw AI Terminal | a0f3a7d | ✅ |
|
||
| S7 | 待審批任務 | 895784e | ✅ |
|
||
| S9 | AI 模型狀態 2×2 | 895784e | ✅ |
|
||
| S10 | 監控工具 3×2 | 895784e | ✅ |
|
||
| S8 | 拓撲群組 2×2 + 主機 4 台 | 03b07d5 | ✅ |
|
||
| S2 | FlowPipeline OpenClaw icon | 09c6eb3 | ✅ |
|
||
| S3 | AI 提案橫幅確認 | 09c6eb3 | ✅ |
|
||
| G1 | 骨架屏取代載入中 | 49a15e1 | ✅ |
|
||
| CD 部署驗收 | 截圖對比設計稿 | — | 🔄 |
|
||
|
||
**設計稿**: `.playwright-mcp/sprint5r-approved-design.html`
|
||
**ADR**: ADR-065
|
||
**下一步**: CD 完成 → 截圖對比 → 統帥驗收
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 自動修復全鏈路完整閉環 — 雙主機 E2E 驗證)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| Bug #1 Jaccard 門檻阻擋 alert_exact_match | ✅ | af49a54 |
|
||
| Bug #2 NameError get_alert_operation_log_repository | ✅ | e4070b2 |
|
||
| Bug #3 _extract_symptoms 用 alert_name="custom" | ✅ | fc03eb1 |
|
||
| Bug #4 Signal.labels 缺 alertname key | ✅ | 1d88b7c |
|
||
| Bug #5 target_resource 未優先用 component label | ✅ | 1fb0c0c |
|
||
| Bug #6 Dockerfile 無 openssh-client | ✅ | 1fb0c0c |
|
||
| Bug #7 sentry 未在 service-registry 定義 | ✅ | 1fb0c0c |
|
||
| Bug #11 NetworkPolicy 缺 port 22 egress (110+188) | ✅ | 07a097c |
|
||
| Bug #12 Deployment 缺 fsGroup=1000 | ✅ | 77f2da9 |
|
||
| 8 個新 Playbook 自動產生+APPROVED | ✅ | API |
|
||
| repair-bot-188.sh 新增 momo/tsenyang/bitan | ✅ | 188主機 |
|
||
| repair-bot-110.sh 新增 stock-platform | ✅ | 110主機 |
|
||
| known_hosts 110+188 Secret 更新 | ✅ | kubectl |
|
||
| openclaw-down-repair 修正 docker-110→docker-188 | ✅ | API |
|
||
| service-registry 新增 signoz/bitan-app | ✅ | 07a097c |
|
||
|
||
**E2E 雙主機驗證**:
|
||
- docker-110: SentryDown → REPAIR_OK:sentry (6208ms) ✅
|
||
- docker-188: MoWoooWorkDown → REPAIR_OK:momo-app (3791ms) ✅
|
||
|
||
**Playbook 覆蓋**: 20 個 (含 8 個 auto-generated,全部 `auto_repair=true` 告警已覆蓋)
|
||
**下一步**: Sprint 5R 前端重構 (S11→S12→S1-S10→G1)
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Sprint 5.2 全面完成 + 自動修復閉環)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| docker-health-monitor 升級自動修復 | ✅ | 8d0042e |
|
||
| L2-2 alerts-unified 14條規則 | ✅ | b43e1f1 |
|
||
| Nemotron placeholder 修復 | ✅ | d467fc1 |
|
||
| decision_manager resolved 不重送 | ✅ | b66263a |
|
||
| target_down 自動重啟 exporter | ✅ | b43e1f1 |
|
||
| Plan B exporters 188 全 UP | ✅ | — |
|
||
| Plan C Blackbox 13 targets 全 UP | ✅ | — |
|
||
|
||
**自動修復鏈路閉環**: 容器 down → cron 偵測 → docker restart → 回報 API → Telegram
|
||
**下一步**: ADR-064 L1 Redis 分散式鎖(技術債,P3)
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Sprint 5 全面完成 + 監控告警修復)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| C1 殘留 i18n 5 處 (badge/toggle) | ✅ | 28d2ff7 |
|
||
| I3 Approve/Reject API 串接 | ✅ | 4a94588 |
|
||
| I4 SIGNOZ_URL 改環境變數 | ✅ | 4a94588 |
|
||
| I5 ErrorsPanel nothing-gray | ✅ | 4a94588 |
|
||
| C4 TOOL_EMOJI → Lucide icon | ✅ | 5800533 |
|
||
| RedisMemoryHigh 誤報修正 (÷0) | ✅ | 85d4857 |
|
||
| node-exporter 部署 110+188 (Docker) | ✅ | 手動 |
|
||
| HostDown ×2 告警消除 | ✅ | 自動 |
|
||
| Prometheus 0 firing alerts | ✅ | — |
|
||
| 所有 Incidents 關閉 | ✅ | API |
|
||
|
||
**Sprint 5 審查修正清零**: C1-C4 + I1-I5 全部修正完成
|
||
**下一步**: Sprint 5.2 docker-health-monitor 部署 / alerts-unified L2-2
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Telegram 截斷根因修復 + Panel 全面抽取)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| `建議: kubectl rollout restart deployment/` 截斷根因修復 | ✅ | c5e4751 |
|
||
| telegram_gateway.py `[:35]→[:80]` | ✅ | c5e4751 |
|
||
| decision_manager.py enum string 補正 (用規則引擎查 kubectl) | ✅ | c5e4751 |
|
||
| Panel 全面抽取完成 (13 個 Panel) | ✅ | fb66ecd |
|
||
| /observability 5 Tab 全 Panel | ✅ | fb66ecd |
|
||
| /automation 3 Tab 全 Panel | ✅ | fb66ecd |
|
||
| /operations 5 Tab 全 Panel | ✅ | fb66ecd |
|
||
| CD 部署驗證 | 🔄 | 進行中 |
|
||
|
||
**根本根因**: `suggested_action[:35]` = 35 字剛好截到 `deployment/` 後,name 永遠空白
|
||
**下一步**: 等 CD 完成 → 驗收新告警顯示格式 → 關閉舊 Incident
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Alert Rule Engine + Ollama M1 Pro + 首席架構師審查)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| Ollama 切換 188→111 (M1 Pro, 0.45→40+ tok/s) | ✅ | 多個 |
|
||
| deepseek-r1:14b (RCA) + gemma3:4b (summary) | ✅ | f32b077 |
|
||
| Gemini fallback for NIM 完全失敗 | ✅ | d80153b |
|
||
| 告警規則引擎 alert_rules.yaml + alert_rule_engine.py | ✅ | d1ede7f |
|
||
| AI 自動規則學習 (generic_fallback 觸發) | ✅ | 71437db |
|
||
| 首席架構師審查 63/100 → 6 個問題修復 | ✅ | 本次 |
|
||
| ADR-064 Alert Rule Engine | ✅ | 本次 |
|
||
| Skills 02/03 更新 | ✅ | 本次 |
|
||
| model_registry fallback 同步更新 | ✅ | 89da2d2 |
|
||
| K8s 部署驗證 (image 89da2d2) | ✅ | 2 Pod Running |
|
||
|
||
**已知技術債**: 多 Pod 規則重複生成(ADR-064 L1),lru_cache 跨 Pod 不同步(ADR-064 L2)
|
||
|
||
**下一步**: 前端重設計整合頁面 Panel 抽取 (解決雙重 AppLayout)
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Sprint 5.2 全面監控 + Alert Op Log API + 效能修復)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| Plan A: docker-health-monitor 110+188 */5 | ✅ | 0e6c4b8 |
|
||
| Plan B: pg/redis exporter 確認 UP | ✅ | — |
|
||
| Plan C: 5 條外部網站告警規則 | ✅ | 9799a14 |
|
||
| Alertmanager telegram-direct fallback | ✅ | 7e327c8 |
|
||
| pg-backup.sh 每 6h 188 cron | ✅ | f98be41 |
|
||
| DR Drill cron 121 月第一週日 03:00 | ✅ | 手動 |
|
||
| 188 CD 自動同步 ops scripts | ✅ | c51d7ef |
|
||
| alert_operation_log API (list/stats) | ✅ | 5ea6c3f |
|
||
| /alert-operation-logs 前端頁面 | ✅ | 5ea6c3f |
|
||
| incidents 效能修復(Redis cache + fire-and-forget) | ✅ | 4b3fdd8 |
|
||
| Panel 抽取全面完成(雙重 AppLayout 修正) | ✅ | fb66ecd |
|
||
| **CD 部署 run #586** | 🔄 | fb66ecd2 |
|
||
|
||
**下一步**: CD 完成 → API 驗收 → 告警鏈路 E2E 驗收
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Sprint 5 首席架構師審查 P0 修正完成)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| 首席架構師審查 | 72/100 有條件通過 | — |
|
||
| C1: 首頁 i18n 30+ 處 | ✅ 修正 | 7153395 |
|
||
| C2: 拓撲 i18n 10+ 處 | ✅ 修正 | 9e10305 |
|
||
| C3: Loading 改 LobsterLoading | ✅ 修正 | 7153395 |
|
||
| I1: 100ms 輪詢改 popstate | ✅ 修正 | 7153395 |
|
||
| I2: 13 Panel 全部抽取 (雙重 AppLayout) | ✅ 修正 | 7934ade |
|
||
| C4: TOOL_EMOJI (pre-existing) | 📝 後續 | — |
|
||
|
||
**下一步**: Re-Review → 驗收
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-09 Sprint 5 前端重設計完成 + 部署中)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| Phase 0: 安裝 React Flow + elkjs + /classic | ✅ | 11ff517 |
|
||
| Phase 1: 首頁 4-Tab + Sidebar 精簡 6+2+經典 | ✅ | eaa6102 |
|
||
| Phase 2: React Flow 拓撲圖元件 (7 新檔) | ✅ | d276b39 |
|
||
| Phase 3: 5 個整合頁面 (觀測/自動/營運/安全/知識) | ✅ | 1413804 |
|
||
| Phase 4: 舊路由並存 | ✅ | 9188e49 |
|
||
| Sidebar label + Tab 同步 + 龍蝦動畫 + 效能優化 | ✅ | 多個 |
|
||
| OpenClaw 風格龍蝦 SVG (三色: 紅/綠/黃) | ✅ | 65e1edb |
|
||
| service_registry Docker 安全降級 | ✅ | c9f1bcd |
|
||
| 拓撲圖 Toggle 整合到首頁 | ✅ | 030f4f7 |
|
||
| 測試修正 (nemotron + smart_router) | ✅ | 多個 |
|
||
| **CD 部署** | 🔄 | 進行中 |
|
||
|
||
**下一步**: CD 完成 → 統帥驗收 → 整合頁面 Panel 抽取 (解決雙重 AppLayout)
|
||
|
||
---
|
||
|
||
## 📍 當前狀態 (2026-04-08 Sprint 5.1 L1-L5 + Review 修正完成)
|
||
|
||
| 項目 | 狀態 | Commit |
|
||
|------|------|--------|
|
||
| Sprint 5.1 L1-L5 全部實作 | ✅ | 88696db |
|
||
| 首席架構師審查(70/100→修正) | ✅ | 0f5fecf |
|
||
| DB Migration M-002/M-003(已在 188 執行) | ✅ | — |
|
||
| service-registry.yaml(21 個服務分級) | ✅ | 88696db |
|
||
| 三個新 Service(registry/velero/preflight) | ✅ | 0f5fecf |
|
||
| Guardrail 注入 auto_repair_service | ✅ | 0f5fecf |
|
||
| ALERT_RECEIVED + auto_repair flag webhooks | ✅ | 0f5fecf |
|
||
| T1-T6 Telegram 通知 | ✅ | 0f5fecf |
|
||
| docker-health-monitor.sh 純感知層 | ✅ | 88696db |
|
||
| ADR-062/063 | ✅ | 6f7a4be |
|
||
|
||
**當前焦點**: Sprint 5.1 L7 E2E 驗收(CD 部署後執行)
|
||
**待完成**: L2-2 alerts-unified.yml + docker-health-monitor 部署到 110/188 + E2E 驗收
|
||
**Sprint 5.2**: Plan A(docker-health-monitor 部署)/ Plan B(Exporter)/ Plan C(Blackbox)
|
||
|
||
---
|
||
|
||
## 📊 里程碑總覽 (壓縮版)
|
||
|
||
### 2026-04-08 — Sprint 5.1 L1-L5 實作 + 首席架構師審查修正
|
||
|
||
- L1: DB Migration M-002(approval_records MultiSig)/ M-003(ENUM 8個新值)在 188 執行完畢
|
||
- L2-1: ops/config/service-registry.yaml 建立(21 個服務,BLOCK/CRITICAL_HITL/STANDARD_HITL/AUTO)
|
||
- L3: service_registry.py / velero_client.py / preflight_service.py 三個新服務
|
||
- L4: Guardrail 注入 auto_repair_service + ALERT_RECEIVED/auto_repair flag webhooks + MultiSig DB model
|
||
- L4-6: docker-health-monitor.sh 改造為純感知層(移除所有 docker restart)
|
||
- L5: telegram_gateway T1-T6 六個新通知方法(Guardrail/Pre-flight/Backup/MultiSig/ChangeApplied)
|
||
- 首席架構師審查 70/100 → 修正 S1×4 S2×2 S3×1 → 預計 90+/100
|
||
- structlog 取代 logging(三個新 service)
|
||
- now_taipei() 取代 datetime.now(UTC)
|
||
- Guardrail 失敗改為保守拒絕(不放行)
|
||
- velero kubectl apply CRD 修正(原語法錯誤)
|
||
- T1-T6 補齊 try/except
|
||
- Langfuse URL 改用 settings.LANGFUSE_URL
|
||
|
||
### 2026-04-08 — Sprint 5.1 資料安全護欄規劃完成
|
||
|
||
- 11 項首席架構師決策(Q1-Q11)完成
|
||
- 服務分級(BLOCK/CRITICAL_HITL/STANDARD_HITL/AUTO)確立
|
||
- Pre-flight 備份檢查機制設計完成
|
||
- MultiSig 雙簽機制設計完成
|
||
- ADR-062 Data Safety Guardrails 批准
|
||
- ADR-063 Service Registry IaC 批准
|
||
- 完整實施方案 + 規範驗證通過(P1-P5 問題修正)
|
||
- 關鍵發現:Playbook 存於 Redis(非 PostgreSQL),修正 M-001 方向
|
||
|
||
### 2026-04-08 — 全面監控+操作溯源架構
|
||
|
||
- 自動修復移除所有 gate:直接執行(統帥指令)
|
||
- Phase 10: auto_repair_executions DB 記錄(成功/失敗都寫入)
|
||
- Phase 11: alert_operation_log Event Sourcing(654 筆歷史回填)
|
||
- ADR-060: 全面基礎設施監控規劃(4 主機 30+ 服務)
|
||
- ADR-061: Alert Operation Log 架構決策
|
||
- 統帥首席架構師裁示:Plan A→B→C 優先序,Redis/PG 僅告警,Intent→Action→Result 三段式
|
||
|
||
### 2026-04-07 — Sprint 3+4+F 完成
|
||
|
||
- Sprint 3: SSH_COMMAND 指揮權鏈 (T1-T7) + P0 Security Fixes + Re-Review 91/100
|
||
- Sprint F: 29處假數據清除 + CURRENT_USER 統一 + 98/100
|
||
- Sprint 4: 告警處置統計 Phase A→F (資料層→API→Telegram→前端→首頁→週報)
|
||
- 首次信任機制 (冷啟動破解)
|
||
|
||
### 2026-04-06 — 四個網站修復+監控
|
||
|
||
- mo.wooo.work / www.tsenyang.com / stock.wooo.work / bitan.wooo.work 全部修復
|
||
- Prometheus blackbox-http 新增 3 target
|
||
- nginx 110/188 路由修正
|
||
|
||
### 2026-04-05 — Phase 25 Review + ADR-057~059 + 備份
|
||
|
||
- Phase 25 首席架構師 Review R1+R2 通過 (76/100→修正後通過)
|
||
- ADR-054~057 全部完成
|
||
- Telegram 按鈕根因修復 (whitelist int→list[int])
|
||
- ADR-059 Gitea Webhook 遷移 (10/10 測試)
|
||
- Sprint 3 Host Repair 全通過 + 5 Playbooks
|
||
- 備份全面自動化 (backup-all.sh v2 + GFS 保留策略)
|
||
- 全系統重開機恢復 (188/110/120/121)
|
||
|
||
### 2026-04-04 — Phase 25 驗證 + 自動修復閉環
|
||
|
||
- Phase 25 P0/P1/P2 全部驗證通過 (36/36 tests)
|
||
- 自動修復閉環打通 (Playbook→RAG→執行→KM沉澱)
|
||
- Ollama embedding is_closed 修復
|
||
- phase8/9 DB migration prod 執行完成
|
||
|
||
### 2026-04-03 — Phase 24 + Monitoring Wave D + Layout
|
||
|
||
- Phase 24 AI Provider Registry 全面完成 (Phase A→C)
|
||
- Monitoring Wave D: Grafana 3 dashboards + ClickHouse TTL
|
||
- Layout 對齊修復 (sidebar/header/metrics)
|
||
- 首席架構師 Review 88/100
|
||
|
||
### 2026-04-02 — Phase O 可觀測性 + Phase 24 規劃
|
||
|
||
- Phase O O-1~O-5 全部完成 (8/8 Smoke Test)
|
||
- OTEL Collector DaemonSet + Event Exporter
|
||
- Prometheus scrape → SigNoz (90天保留)
|
||
- Phase 24 AIRouter 14 項決策 (D1-D14)
|
||
- ADR-052 AI Provider Registry
|
||
|
||
### 2026-04-01 — Phase R 完整審查 + Phase 11 驗收
|
||
|
||
- Phase R ADR-047: 97/100 OUTSTANDING
|
||
- Phase 11 統帥驗收: ✅ 批准
|
||
- R4-129 webhooks.py AlertAnalyzer 遷移 (-243行)
|
||
- ADR-046 IncidentConverter 型別統一
|
||
|
||
### 2026-03-31 — Phase 22 Nemotron + Telegram 重設計
|
||
|
||
- Phase 22 雙 AI 對話 + NemotronCollabService
|
||
- Phase 10.2 Session Replay 完成
|
||
- Telegram 訊息格式 v7.0 重設計
|
||
- NVIDIA NIM 整合 + Gemini fallback
|
||
|
||
### 2026-03-29~30 — Monitoring + Gitea CI/CD
|
||
|
||
- Monitoring 主計畫 Wave A-C 批准+執行
|
||
- ADR-039 Gitea CI/CD 遷移完成
|
||
- 前端內網 IP 禁令確立
|
||
- NEXT_PUBLIC_* build-time 變數規範
|
||
|
||
### 2026-03-28 — Phase 19+20 完成
|
||
|
||
- Phase 19 Omni-Terminal 全 7 Wave (47/50)
|
||
- Phase 20 CSRF 防護 (Double Submit Cookie)
|
||
- K3s 優化 (Swap/kube-reserved/etcd/PDB)
|
||
|
||
### 2026-03-27 — Phase 16~18 完成
|
||
|
||
- Phase 16 架構大掃除 R1-R4 (50/50 OUTSTANDING)
|
||
- Phase 17 技術債清理
|
||
- Phase 18 E2E Hardening (9.2/10)
|
||
- Phase 10.2 Sentry Telegram 通知+去重
|
||
|
||
### 2026-03-26 — Phase 13~15 完成
|
||
|
||
- Phase 13 Enterprise AIOps (6 MCP Tools + Router)
|
||
- Phase 14 紅區治理+依賴防護+共用型別
|
||
- Phase 15 LLMOps (Langfuse+DeepLink+取樣)
|
||
|
||
### 2026-03-25 — Phase 11+12 批准+開工
|
||
|
||
- Phase 11 對話式 AI 批准+實作
|
||
- Phase 12 Ollama Tool Calling 100%
|
||
|
||
### 2026-03-24 — Phase 6.5 + QA + Sentry
|
||
|
||
- Statistics API 6 端點
|
||
- Mock 測試全面禁止鐵律
|
||
- Sentry Self-Hosted 整合
|
||
- Phase 8 QA + 緊急修復
|
||
|
||
### 2026-03-23 — Phase 6.4 + Phase 9
|
||
|
||
- Decision Proposal API + Guardrails
|
||
- Agent Teams + ConsensusEngine 90/90
|
||
- 技術債清理 (44 未用 import + 22 i18n)
|
||
|
||
### 2026-03-22 — Phase 6 認知覺醒
|
||
|
||
- Event Bus (Redis Streams) 通電
|
||
- Memory Layer (Redis + PostgreSQL) 雙層
|
||
- Incident Engine v1 (聚合+GraphRAG+去重)
|
||
- Redis Multi-Sig 分散式鎖
|
||
|
||
### 2026-03-20~21 — Phase 0-4 MVP
|
||
|
||
- Phoenix Rising 基建部署
|
||
- BFF Gateway + 原子組件庫
|
||
- SSE 前後端整合 + HITL 授權卡片
|
||
- i18n 雙語引擎 135 鍵值
|
||
|
||
---
|
||
|
||
## 📊 專案統計 (截至 2026-04-07)
|
||
|
||
| 指標 | 數值 |
|
||
|------|------|
|
||
| 已完成 Phase | 25+ (含子Phase) |
|
||
| 已完成 Sprint | 3 (Sprint 3/4/F) |
|
||
| ADR 文件 | 61 份 (ADR-060~061) |
|
||
| 首席架構師審查 | 15+ 次 |
|
||
| 最高評分 | Phase 16: 50/50 + Phase R: 97/100 |
|
||
| 監控 Targets | 15/15 UP |
|
||
| Grafana Dashboard | 3 |
|
||
| Playbooks | 12 (全部 approved, auto_repair 已啟用) |
|
||
| alert_operation_log 記錄 | 654 筆歷史 + 即時寫入 |
|