chore(docs): B2 упал на 169 операциях из-за abort Node, разбор
Co-Authored-By: Claude Opus 5.5 <[email protected]>
This commit is contained in:
1 parent
3e8c7e0b04
commit
dee79f35b7
3 files changed
+30
No files matched your search
@@ -124,6 +124,7 @@
|
||||
| 2026-11-17 | Получена точная причина нестабильного отказа создания VRF (`transition-classification`, `ADDRESS_ROUTE_ABSENCE_OUTSIDE_EXACT_ACQUISITION`), задача в этапе 5 |
|
||||
| 2026-11-17 | Владелец поставил цель: довести все стендовые приёмки этапа 3 до конца без отдельных команд |
|
||||
| 2026-11-20 | Владелец утвердил правило прав опроса 2.9 и разбор очереди 2.10. `mmapp-test` переразвёрнут на `0e63cdd5` (запуск Gitea `2743`, резервная копия БД перед заменой). B1 (POLL deadline Linux) пройден по D-B3: 10,9 с из 180 с |
|
||||
| 2026-11-20 | B2 (capacity336, nonce `5945935965481c83`) — `failed` на 169 операциях и 163 архивах после 2 ч 41 мин. Разбор очереди архивов держался до конца. Node завершился через `abort()`, текст ошибки не сохранился. Гипотеза — рост кучи с каждой операцией (время операции растёт с 5 до 22 с за 70 операций). Пакет снят, VPS свободен, повтора нет; пункт B2 открыт |
|
||||
| 2026-11-19 | Оптимизация продукта (keep-alive REST, права раз на этап, параллельные чтения, сервисы WireGuard/scoped/IPsec) и шардированные тесты; A2 пройден на слое v28 (продукт `1e96ddac`) |
|
||||
|
||||
## Решения владельца 2026-11-17 по прогонам B и C
|
||||
|
||||
@@ -13718,5 +13718,21 @@
|
||||
"archiveSha256": "4d272e783700f1b2a8584ad8a47edfd31c808a114e10083a53be27f21839c6f5",
|
||||
"evidence": "tmp/mcp-poll-linux-cold143-head-0e63cdd5-20261120/terminal.json"
|
||||
},
|
||||
"capacity336LinuxRun20261120": {
|
||||
"item": "POLL: 336 операций с естественным истечением на Linux (B2)",
|
||||
"sourceCommit": "0e63cdd535273565afb31e44c7f7b5efcce3fdba",
|
||||
"nonce": "5945935965481c83",
|
||||
"outcome": "failed",
|
||||
"operationsProduced": 169,
|
||||
"archivesAuthenticated": 163,
|
||||
"workerErrors": 0,
|
||||
"elapsedMs": 9646456,
|
||||
"terminalPhase": "workload-RuntimeError",
|
||||
"cause": "node abort() (libc offset 0x2650f), message not retained; hypothesis: per-operation V8 heap growth",
|
||||
"cleanupConfirmed": true,
|
||||
"packageRetired": true,
|
||||
"replayAllowed": false,
|
||||
"evidence": "tmp/mcp-poll-linux-capacity336-head-0e63cdd5-20261120/5945935965481c83-terminal.json"
|
||||
},
|
||||
"priorResourceAdmissionOpenFinding": "Constrained old192/semi16 local app+Worker peak470.46MiB accepted only as component measurement; earlier standard-admission192 failures retained. Whole LinuxNode22 installation <=2GB, cold poll stability/capacity336, DB all-writer/source-generation/READY and routing event continuity remain open."
|
||||
}
|
||||
@@ -256,6 +256,19 @@ B2 остаётся **одним непрерывным прогоном** (пе
|
||||
- Темп ~66 операций/ч, оценка завершения ~08:10 UTC.
|
||||
- Порог памяти 500 МиБ в таблице — оценка оркестратора, а не встроенная проверка. Жёсткий порог владельца — 128 МиБ; лимиты контейнеров 320 + 192 + 64 МиБ.
|
||||
|
||||
### Исход B2 nonce `5945935965481c83`: `failed` (05:43 UTC, 2 ч 41 мин)
|
||||
|
||||
- **Итог:** 169 операций, 163 архива, 676 GET, 0 ошибок воркера; `terminal.json` `phase=workload-RuntimeError`, `accepted=false`, `cleanupComplete=true`, `baselineUnchanged=true`. Пакет снят штатным `retire` (12 648 файлов сверены, квитанции и записи запуска на VPS остаются), VPS свободен. Повтора нет (D-B6). Квитанции локально: `tmp/mcp-poll-linux-capacity336-head-0e63cdd5-20261120/5945935965481c83-*.json` (`terminal` `5edd25a0…`, `status` `280f0eb9…`, `sources` `0d55c0fc…`).
|
||||
- **Что случилось.** В 05:43:31 ядро: `general protection fault` процесса `node` в `libc.so.6` по смещению `0x2650f`. Разбор ELF `libc` образа backend на VPS показывает, что это функция `abort`: Node — PID 1 контейнера, и для init пространства имён SIGABRT игнорируется, поэтому `abort()` доходит до `hlt` и выглядит как GPF. Значит, Node завершился сам по фатальной ошибке. Владелец увидел ненулевой код выхода (`demand`, класс `RuntimeError`) и выполнил очистку. Текст ошибки Node потерян: журнал Docker `json-file` удалён вместе с контейнером, а владелец его не сохраняет. Записей OOM ядра нет, `oom_kill` 0; `320M memory peak` контейнера включает страничный кеш и ничего не доказывает.
|
||||
- **Главная гипотеза: рост кучи V8 с каждой операцией.**
|
||||
- Интервал между планами внутри волны (приближение времени операции) растёт: операции 2–18 — 5,1 с, 19–35 — 7,4 с, 36–53 — 11,7 с, 54–70 — 22,5 с. Дальше ~60 с: это уже темп освобождения 8 слотов, операции перестали идти пачками. Так выглядит нарастающее давление на сборщик мусора.
|
||||
- Задержки архивов оставались ограниченными (медиана 26 с, максимум 84 с): разбор очереди работал до конца.
|
||||
- Пик RSS (`peakRssKiB`): smoke Windows 233 МиБ на 2 операциях, волна Windows 253 МиБ на 22, Linux 13.11 274 МиБ на 28, B2 290 МиБ на 169. На Windows это около 1 МиБ на операцию.
|
||||
- Предел кучи 240 МиБ (old 192 + semi 16) исчерпывается порядка 170 операций.
|
||||
- Не доказано: нужна живая куча после GC по числу операций и разница двух снимков кучи по конструкторам.
|
||||
- **Решения, которые за владельцем:** поднять предел кучи или контейнера; изменить, что удерживает фикстура. Исправление в продукте — это новая сборка и переразвёртывание `mmapp-test`, значит, B1 повторяется.
|
||||
- **Перед любым следующим Linux-прогоном** владелец должен сохранять код выхода, `OOMKilled`, сработавший `demand`, ограниченный хвост журнала приложения и по каждому heartbeat анонимную и файловую память cgroup и `pids.current`.
|
||||
|
||||
Число часов Ч зависит от времени операции после исправления: при цикле 45 с — около 4–5 ч (упор в 8 слотов), при 60–90 с — 6–9 ч, при 110–150 с — 10–14 ч. Остановка на любом этапе: штатный `recover`/`retire`, квитанции сохраняются, исход не перекрашивается.
|
||||
|
||||
## 7. Что этим планом не проверяется
|
||||
|
||||
Reference in new issue
Block a user