feat: v0.1.51 + G13/G14/G15 tests (126/126 PASS)
- fix: UpdateService IsInvalid → 400 (was 500 for ruby3.0 runtime) - test: G13 edge cases — 40 tests, 40 PASS (name validation, boundary values, lifecycle, state transitions, update validation, upload edge cases) - test: G14 cluster chaos — 20 tests, 20 PASS (self-healing, pod kill, OOM kill, kaniko interrupt, operator restart) - test: G15 combined chaos — 21 tests, 21 PASS (CRUD under chaos, upload during self-heal, concurrent creates, errors after restart, rapid lifecycle) - doc: progress.md, errors/log.md, decisions/log.md — полная документация сессии
This commit is contained in:
Naeel
@@ -1118,3 +1118,101 @@ babd8e6 feat: harbor integration
|
||||
6de90ac chore: python runtime v0.1.2 + operator v0.1.28
|
||||
3372cb1 fix: build logs in status + JSON for all HTTP methods in python runtime
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 2026-03-22 — Тестовая сессия: G13 / G14 / G15 + fix v0.1.51
|
||||
|
||||
### Цель
|
||||
Написать и прогнать три группы тестов, закрывающих:
|
||||
- G13: пользовательские ошибки и граничные случаи (40 тестов)
|
||||
- G14: кластерный хаос — удаление ресурсов, kill pods, OOM, kaniko interrupt (20 тестов)
|
||||
- G15: комбинированный — хаос + пользовательские ошибки одновременно (21 тест)
|
||||
|
||||
### Исходное состояние
|
||||
- Оператор: **v0.1.50**, 45/45 failure test (G12)
|
||||
- Известные баги: исправлены `CreateService IsInvalid→400` и `SLESS_ENTRYPOINT` в Deployment
|
||||
|
||||
### Проведённые работы
|
||||
|
||||
#### 1. Написан `operator_edge_cases_test.sh` (G13)
|
||||
6 секций:
|
||||
- **13A** Name validation (uppercase, пробелы, underscore, slash, длина)
|
||||
- **13B** Boundary values (timeout_sec 0/-1/900/901, memory_mb limits)
|
||||
- **13C** Lifecycle edge cases (GET/DELETE/PUT 404, 409 duplicate, upload 404)
|
||||
- **13D** State transitions (invoke during build, re-upload Ready, upload Failed → restart)
|
||||
- **13E** Update validation (PUT invalid runtime/entrypoint/memory, PUT ruby3.0)
|
||||
- **13F** Upload edge cases (wrong field, empty body, nested handler.py, 40MB)
|
||||
|
||||
Первый прогон: **36P / 4F**
|
||||
|
||||
Найденные баги и исправления:
|
||||
| # | Проблема | Тип | Решение |
|
||||
|---|----------|-----|---------|
|
||||
| G13E-5 | PUT ruby3.0 → 500 | БАГ кода | `UpdateService` + `IsInvalid→400` |
|
||||
| G13F-2 | upload empty body → 404 | Баг теста | добавить `-X POST` в curl |
|
||||
| G13D-3 | GET /fn/ → FAIL | By design | тест обновлён (all methods allowed) |
|
||||
| G13F-4 | 40MB → 413 | Баг теста | принять 413 (nginx limit) |
|
||||
|
||||
#### 2. Исправлен `internal/api/handler/services.go` (UpdateService)
|
||||
Добавлена обработка `errors.IsInvalid` → `400 Bad Request` в `UpdateService`.
|
||||
|
||||
#### 3. Собран и задеплоен **v0.1.51**
|
||||
```
|
||||
docker build + push → pearlharbor.registryk8s.services.ngcloud.ru/naeel/sless-operator:v0.1.51
|
||||
kubectl -n sless set image deployment/sless-operator operator=...v0.1.51
|
||||
```
|
||||
|
||||
#### 4. G13 перезапущен → **40/40 PASS ✅**
|
||||
|
||||
#### 5. Написан `operator_chaos_test.sh` (G14)
|
||||
5 секций:
|
||||
- **14A** Self-healing: удалить Deployment/Service → оператор пересоздаёт за 60s
|
||||
- **14B** Pod kill resilience: `kubectl delete pod` → ReplicaSet поднимает новый
|
||||
- **14C** OOM Kill: `memory_mb=32` + функция выделяет 300MB → OOMKill (фаза остаётся Ready — Gap)
|
||||
- **14D** Kaniko interrupt: убить kaniko Job → `builder.IsNotFound → "failed"` → phase=Failed
|
||||
- **14E** Operator restart: kill operator pod → reconcile восстанавливает все сервисы
|
||||
|
||||
Прогон: **20/20 PASS ✅**
|
||||
|
||||
#### 6. Написан `operator_combined_test.sh` (G15)
|
||||
5 секций:
|
||||
- **15A** CRUD under chaos (DELETE Deployment → API отвечает, оператор восстанавливает)
|
||||
- **15B** Upload during self-heal (загрузка кода пока оператор восстанавливает ресурсы)
|
||||
- **15C** Concurrent creates (3 параллельных POST → 1×201, 2×409)
|
||||
- **15D** API errors after restart (ошибочные запросы сразу после kill operator pod)
|
||||
- **15E** Rapid lifecycle (create→upload→delete→create→upload за ~60s)
|
||||
|
||||
Первый прогон: **15P / 6F**
|
||||
|
||||
Баги тестов (не кода):
|
||||
| # | Проблема | Решение |
|
||||
|---|----------|---------|
|
||||
| G15C-2 | GET /services возвращает `[]` не `{"items":[]}` | тест исправлен |
|
||||
| G15D | kill operator → 503 (API = operator pod) | тест принимает 503 как transient |
|
||||
| G15E-3 | DELETE → 204, тест ждал 200 | тест принимает 204 |
|
||||
|
||||
G15 перезапущен → **21/21 PASS ✅**
|
||||
|
||||
### Итоговые результаты
|
||||
|
||||
| Группа | Тесты | Результат | Файл |
|
||||
|--------|-------|-----------|------|
|
||||
| G12 Failure | 45 | ✅ 45/45 | `run_e2e_tests.sh` |
|
||||
| G13 Edge Cases | 40 | ✅ 40/40 | `operator_edge_cases_test.sh` |
|
||||
| G14 Cluster Chaos | 20 | ✅ 20/20 | `operator_chaos_test.sh` |
|
||||
| G15 Combined | 21 | ✅ 21/21 | `operator_combined_test.sh` |
|
||||
| **ИТОГО** | **126** | **✅ 126/126** | |
|
||||
|
||||
### Gap'ы (не баги, но отмечены в тестах)
|
||||
|
||||
| # | Описание | Где задокументировано |
|
||||
|---|----------|----------------------|
|
||||
| 1 | OOM Kill не меняет phase → наблюдаемость ухудшена | G14C NOTE |
|
||||
| 2 | handler.py в подпапке zip принимается при upload, ошибка только при запуске контейнера | G13F-3 NOTE |
|
||||
| 3 | operator pod = API server → 503 при restart (нет HA) | G15D NOTE |
|
||||
| 4 | nginx `client_max_body_size` ограничивает upload → 413 (не настроено явно) | G13F-4 NOTE |
|
||||
|
||||
### Версия оператора
|
||||
`v0.1.51` — задеплоен, работает
|
||||
|
||||
|
||||
Reference in New Issue
Block a user