docs: bench PV results 2026-05-20 PASS=20/20; misc updates

This commit is contained in:
“Naeel”
2026-05-20 08:30:26 +04:00
parent a2e1723e33
commit 005b4786c0
8 changed files with 785 additions and 3 deletions
+93
View File
@@ -1,5 +1,98 @@
# Progress Log
---
## 2026-05-19 (вечер) — Node.js require fix (v1.3.95) + суровые тесты
### Ветка: `feat/console-pv-storage` (git commit `fe8870a`)
---
### Исправленный баг: Node.js `require` недоступен внутри функции
**Симптом:** Любая Node.js функция, использующая `require(...)`, падала с:
```
ERR_MODULE_NOT_FOUND: Cannot find module '/userfunc/deployarchive/main'
```
**Реальная причина:** В `console/internal/runtime/nodejs.go` wrapper генерировался как:
```js
(new Function('module', 'exports', code))(__mod, __mod.exports);
```
`new Function` выполняется в изолированном глобальном scope — `require` там не существует.
Вызов `require('crypto')` внутри кода → `ReferenceError` → ESM fallback → `import('file:///userfunc/deployarchive/main')` без `.js` → ERR_MODULE_NOT_FOUND.
**Fix** (`console/internal/runtime/nodejs.go`):
```js
// было:
(new Function('module', 'exports', code))(__mod, __mod.exports);
// стало:
(new Function('module', 'exports', 'require', code))(__mod, __mod.exports, require);
```
**Также исправлено** (`console/internal/api/package.go`):
Regex `nodeJSWrapperPattern` обновлён — принимает оба формата (старый без `require` и новый с `require`), backward compatible.
**Unit-тест** (`console/internal/runtime/nodejs_test.go`):
Убраны устаревшие ESM-проверки, добавлены актуальные CJS-проверки.
**Образ:** `naeel/fission-console:v1.3.95`
---
### Прогоны `test_heavy.sh`
Два прогона подряд с теми же условиями (namespace `fission-c3511430abe5675b`):
| Секция | af2f674f | be04cc1b | Вывод |
|--------|---------|---------|-------|
| S1 CREATE (4 яз) | PHP 502 → FAIL | **4/4 PASS** | PHP 502 в первом — transient |
| S1 invoke "не стабилизировался" | FAIL×4 | FAIL×4 | баг теста — WAIT_SEC < cold start |
| S2 invoke "не стабилизировался" | FAIL×4 | FAIL×4 | то же |
| S3 BIG RESPONSE size=46/48 | FAIL×2 | FAIL×2 | баг теста — проверяет поле `raw` (truncated), не реальный ответ |
| S4 invoke "не стабилизировался" | FAIL×4 | FAIL×4 | баг теста — WAIT_SEC < cold start |
| S5 RAPID 12/12 | PASS | PASS | ✓ |
| S6 Python PARALLEL 5/5 | PASS | PASS | ✓ |
| S6 Node.js PARALLEL 5/5 | **2/5 FAIL** | **2/5 FAIL** | pool size=1 не хватает на 5 параллельных — стабильно |
| S6 Ruby PARALLEL 5/5 | PASS | PASS | ✓ |
| S6 PHP PARALLEL 5/5 | 1/5 FAIL | **PASS** | первый — transient |
| S7 Python SLOW(6s) | PASS | PASS | ✓ |
| S7 Node.js SLOW(6s) | PASS (TRY=2) | PASS (TRY=1) | ✓ require fix работает |
| S8 Python MEMORY(20MB) | PASS | PASS | ✓ |
| S8 Node.js MEMORY(20MB) | PASS | PASS | ✓ |
| **ИТОГ** | **PASS=29 FAIL=17** | **PASS=31 FAIL=15** | |
Логи: `test-results/2026-05-19_*` (два файла)
---
### Анализ стабильных FAIL=15 (оба прогона)
#### 1. S1+S2+S4 "не стабилизировался" (12 FAIL)
**Причина:** `WAIT_SEC` в `test_heavy.sh` меньше реального cold start.
Функции реально работают — проверено прямыми SSH-запросами через `sleep + curl`.
**Что нужно:** увеличить `WAIT_SEC` или добавить retry-loop с адекватным таймаутом.
#### 2. S3 BIG RESPONSE (2 FAIL)
**Причина:** тест проверяет `response_raw length` — это длина JSON-поля `raw` из ответа консоли.
Консоль обрезает `raw` до ~46-48 символов. Реальный ответ функции = 50KB (status=200 подтверждено).
**Что нужно:** либо фиксить тест (проверять Content-Length/реальный body), либо фиксить консоль (не обрезать `raw`).
#### 3. S6 Node.js PARALLEL 2/5 (1 FAIL)
**Причина:** pool size=1 (один pod). При 5 параллельных запросах 2 таймаутятся пока ждут специализацию нового пода.
Python/Ruby справляются 5/5 — у них специализация быстрее.
**Что нужно:** либо увеличить pool size в Node.js environment, либо уменьшить параллельность в тесте до 3.
---
### Что делать дальше с тестами
- [ ] Исправить `test_heavy.sh` S1/S2/S4: увеличить `WAIT_SEC` до 120-180s или добавить retry-poll
- [ ] Исправить `test_heavy.sh` S3: проверять реальный ответ, не поле `raw`
- [ ] Решить S6 Node.js PARALLEL: увеличить pool или снизить параллельность
---
## 2026-05-19 — PV Storage Migration + Fetcher v1.23.0
### Ветка: `feat/console-pv-storage` (git commit `2aadae3`, pushed)