82 KiB
Прогон B этапа 3: план стендовой приёмки POLL на целевом Linux
Составлен 17 ноября 2026 года только чтением репозитория и tmp/. VPS, CHR и Gitea не затрагивались: SSH, Docker, REST и скрипты, включая режимы check-only, не запускались. Пункты плана взяты из плана завершения, раздел «Этап 3», абзац «Прогон B». Форма документа повторяет план прогона A.
Обозначения: [ист.: файл] означает, что факт прочитан в указанном файле; [вывод] означает вывод автора плана, на стенде он не проверен. Пароли, ключи и токены в документе отсутствуют намеренно.
Главный вывод. Прогон B в текущем виде запустить нельзя: готовых пакетов «как есть» нет. Все Linux-пакеты POLL закреплены одновременно тремя независимыми привязками. Источник: сборка CI2683 или CI2687 с 56 миграциями; сборка CI2683 на Linux остановилась на источнике 22. Транспорт: скрытый ввод пароля root, look_for_keys=False и закреплённый ключ хоста. Базовый снимок VPS: четыре контейнера mmapp-test по id, imageId и pid, который устарел после замены образов 16 ноября. Нужна локальная фаза адаптации (фаза 0) и решения владельца (раздел 2.3). Второе ограничение — время: 252 минуты являются нижней границей, реальная оценка составляет 12–30 часов [вывод, раздел 6]. Весь этот срок mmapp-test нельзя останавливать или перезапускать, поэтому прогон B исключает фазу 5 прогона A (ROUTING на VPS) и прогон C.
1. Цель и критерий «принято» по пунктам
Цель: на целевом Linux VPS mm-vps (Debian 13, 2 ГиБ) на сборке текущего HEAD закрыть два пункта POLL. Каждый пункт пишет отдельную квитанцию. Исходы failed и unknown не перекрашиваются [ист.: mcp-completion-plan.md, этап 3]. CHR в прогоне B не участвуют: оба профиля работают с синтетическим RouterOS (HTTP-стаб на loopback внутри собственного контейнера) [ист.: tmp/mcp-poll-capacity336-full-ci2683-20261112/REVIEW.md: «1,348 synthetic RouterOS GETs»; fixture.ts].
Привязка пунктов. «POLL: deadline целевого Linux» — это строка «Target Linux cold deadline» реестра и ключ targetLinuxColdPollAccepted=false (холодный cold143) [ист.: mcp-evidence-statistics-20261101.md, раздел POLL; mcp-current-progress.json]. Фраза плана завершения «это один и тот же прогон» читается так: одна сессия на одной сборке и одном базовом снимке, B1 короткой фазой перед B2 [вывод]. Квитанции у B1 и B2 разные.
Срок 180 с задаёт сам продукт: окно каждого этапа (current, execute, verify) равно min(expiresAt, now + 180000) [ист.: backend/src/modules/mcp/server-poll-actions.ts:83, 189–219; server-poll-http.sql-helper.ts:284]. Если срок превышен, операция не получает applied. Поле runtime.elapsedMs (158–165 с) — это время всего публичного прогона, а memory.elapsedMs (176–179 с) включает ещё миграции и старт приложения. Сроком продукта оно не ограничено [вывод из server-poll-memory.owned.test.ts:66–96]. Какое из окон ближе всего к пределу, по квитанциям установить нельзя [вывод].
| # | Пункт | «Принято» означает | Квитанции |
|---|---|---|---|
| B1 | POLL: deadline целевого Linux (cold143) | Холодный опрос servers.poll (143 действия обслуживания, 22 публикации, 54 строки журнала, 4 GET, списание 151) завершается терминальной квитанцией applied в пределах исходного запечатанного срока 180 с на VPS, на сборке HEAD с 57 миграциями, с лимитами Node 192/16 МиБ (heap) и отдельными cgroup. Исходные четыре сервиса и базовый снимок не изменились, собственные ресурсы удалены. Входит ли в пункт ресурсный критерий (нулевой прирост swap хоста), решает владелец (D-B3) |
terminal.json нового каталога cold143: runtime.elapsedMs, runtime.maintenanceEffects=143, completedPublications=22, ownedResourcesRemoved, baselineUnchanged, accepted. Образец формы: [ист.: tmp/mcp-poll-linux-cold143-ci2683-swap-observation-20261112/terminal.json] |
| B2 | POLL: 336 операций с естественным истечением на Linux | В профиле capacity336 получено ровно 337 завершённых операций, 336 естественно сжатых и аутентифицированных архивов одного владельца и 1348 синтетических GET. Последняя (337-я) операция принята после истечения допусков с проверкой квоты и сохранения учёта архивов. Каждый архив прошёл исходный запечатанный срок и 60-секундный защитный интервал. Наблюдаемое завершение уложилось в жёсткий предел 72 ч от startedAt. Очистка подтверждена, базовый снимок не изменился |
<nonce>-status.json (status=terminal, phase=accepted, capacity336ActualAccepted=true), <nonce>-terminal.json, <nonce>-closed.json, <nonce>-retired.json, worker-observation.json по схеме. Проверки счётчиков (336,337,336,1348), 72 ч и 337 уникальных источников: [ист.: tmp/mcp-poll-linux-capacity336-full-port-20261113/verify.py, стр. 28–76] |
Нижняя граница длительности B2: 8 слотов полной записи владельца, каждая держит слот минимум 5 минут действия плана и минуту защитного интервала. Это 42 группы, то есть не меньше 252 минут даже при мгновенной публикации. Штатный воркер публикует не чаще одного раза за 30-секундный проход [ист.: mcp-implementation-plan.md, «13 ноября — POLL336 после исправления воркера»; mcp-evidence-statistics-20261101.md, раздел POLL].
Что уже доказано и не повторяется: локальный SQL-тест 336 архивов на одноразовой PostgreSQL (--poll-operation-retirement, 45,5 с) [ист.: mcp-server-poll-call-audit-20261114.md]; Linux smoke из двух операций с естественным истечением и Linux-сценарий потери ACK двух COMMIT от 14 ноября [ист.: mcp-evidence-statistics-20261101.md, POLL]. Причина исторического unknown CI2713 остаётся неустановленной, прогон B её не перекрашивает [ист.: mcp-completion-plan.md, стр. 48].
2. Предусловия и решения владельца
2.1. Факты о стенде на 17 ноября
- VPS
mm-vps(тот же адрес, что161.104.46.222в прежних пакетах, [вывод по mcp-stand-run-a-plan.md, D5]): Debian 13, ядро 6.12, ОЗУ 2 ГиБ (доступно около 1,1 ГиБ), swap 4 ГиБ, диск 25 ГБ (свободно около 11 ГБ после очистки 16 ноября), Docker 29.8.2. Доступ по ключу через алиасmm-vpsподroot[ист.: постановка задачи; mcp-stand-run-a-plan.md, 2.1 и D7]. - Установка
/opt/mmapp-test, проект composemmapp-test, четыре контейнера:-backend,-frontend,-portal,-postgres. Backend и frontend заменены наmmapp-test/backend:mcp-5ec95a7cиmmapp-test/frontend:mcp-5ec95a7c, база обновлена с 12 до 57 миграций по прежнему (legacy) пути [ист.: mcp-completion-plan.md, журнал 2026-11-16; постановка задачи]. - Образ PostgreSQL установки по умолчанию
postgres:18-alpine[ист.: deploy/docker-compose.test.yml, стр. 5]. Фактический тег на VPS не проверялся. Пакеты POLL требуютPG_MAJOR=18в образе [ист.: durable.py, стр. 446–450; cold_docker.py, стр. 129]. - Пакеты POLL не скачивают образы. Они запускают собственный Node-контейнер из образа backend установки (
services['backend']['imageId']) от пользователя65534:65534, а собственный PostgreSQL из образа postgres установки [ист.: cold_docker.py, стр. 126–158; durable.py, стр. 446–467]. После 16 ноября это образmcp-5ec95a7cс Node 22 (node:22-bookworm-slim[ист.: backend/Dockerfile]).
2.2. Блокеры, найденные в файлах
| # | Блокер | Где видно |
|---|---|---|
| BB1 | Источник устарел. Полный пакет capacity336 собран из CI2683 (56 миграций, профиль 13). На Linux он остановился на источнике 22: 28 операций, 21 архив [ист.: mcp-implementation-plan.md, «13 ноября», последний абзац]. Пакет diagnostic90-v3 — эксперимент на той же замороженной упавшей сборке. По его собственному обзору, приёмка текущего источника требует новых пинов, пересборки и нового ревью наложений | tmp/mcp-poll-linux-capacity336-ci2683-20261112/REVIEW.md; tmp/mcp-poll-linux-capacity336-worker-observation-review/LOCAL-REVIEW.md, раздел Verification |
| BB2 | Цепочка заморозки требует предварительного smoke на той же сборке. prepare.mjs сверяет исходники с source gate принятого локального smoke естественного истечения, prior-smoke.mjs проверяет его три квитанции. Для HEAD такого smoke нет |
tmp/mcp-poll-capacity336-full-ci2683-20261112/REVIEW.md |
| BB3 | Транспорт на пароле. Все transport.py вызывают getpass('Pinned VPS SSH password: '), требуют isatty, look_for_keys=False, allow_agent=False, RejectPolicy и tmp/test-server-known-hosts с HOSTKEY_SHA. Сейчас вход по ключу (mm-vps), пароль root в плане не используется [вывод] |
mcp-poll-current-linux-smoke-20261114/transport.py, стр. 21–26, 362–375; …diagnostic90-v3-review/transport.py, стр. 339–352 |
| BB4 | Базовый снимок устарел. read-readiness.py и durable.py требуют ровно четыре контейнера с прежними Id, Image, Pid, RestartPolicy и тем же daemonId. Эталон закреплён BASELINE_SHA от 5 ноября. После замены образов 16 ноября эти значения другие [вывод] |
mcp-poll-capacity336-vps-systemd-readiness-20261105/read-readiness.py, стр. 7–8, 49–58 |
| BB5 | Пины и одноразовый допуск. ARCHIVE_SHA, STAGE_SHA, MANIFEST, OWNER_SHA, SOURCE_GATE прошиты в коде. Запуск требует внешний файл --approval с новым nonce. Любая правка BB1–BB4 меняет хеши |
transport.py, стр. 21–28; durable.py, стр. 30; support.py (--nonce, --baseline, --baseline-sha256) |
| BB6 | Ресурсный критерий cold143. Оба последних Linux-прогона cold143 функционально прошли за 165,3 и 158,0 с, то есть в пределах 180 с. Оба получили accepted:false, failure: RuntimeError, потому что во время замера на хосте был swap (pswpinDelta 98–125, pswpoutDelta 1025). OOM не было, swap собственных cgroup равен нулю. 30 октября на другой сборке было 180,766 с и отказ по сроку |
mcp-poll-linux-cold143-ci2683-20261112/terminal.json; …-swap-observation-20261112/terminal.json (summary.acceptancePassed=false); mcp-implementation-plan.md, стр. 222, 777 |
| BB7 | Пересечение с прогоном A по построению. Базовый снимок B закрепляет pid контейнеров mmapp-test на всё окно, а фаза 5 прогона A (ROUTING V64) останавливает mmapp-test и запускает его снова (D5). Перезапуск ломает сверку B: originals() вернёт False [вывод из кода read-readiness.py, стр. 49–58]. Это противоречит формулировкам плана завершения «A независим от B и C» и «B в фоне». Фоновым B может быть только относительно фаз прогона A, которые идут с Windows напрямую на CHR |
mcp-stand-run-a-plan.md, D5 и D7; mcp-completion-plan.md, стр. 63, 67 |
| BB8 | Время. Прежний полный прогон v5 (Windows) за 4 ч 8 мин (04:16:54–08:24:49) дал 106 операций и 99 архивов, то есть около 24 архивов в час [ист.: mcp-current-progress.json, capacity336Profile]. Для 336 архивов это около 14 ч [вывод]. Cold143 на Linux идёт примерно в 6 раз медленнее, чем на Windows (158 с против 27,8 с) [ист.: mcp-implementation-plan.md, стр. 218, 222], поэтому окно на Linux может быть ещё длиннее [вывод] |
— |
2.3. Решения владельца (чек-лист)
- D-B1. Какая сборка. (а) Пересобрать пакеты из HEAD
5ec95a7c(57 миграций) по образцу цепочки CI2683: smoke естественного истечения, заморозка, Linux-пакет. (б) Повторить замороженный CI2683 как есть. Рекомендация: (а). Вариант (б) проверяет устаревший код, который уже упал на источнике 22, и не закрывает пункт для текущего кода. Исправления воркера от 13 ноября (пропуск занятых строк, до 1000 планов за проход) должны быть в HEAD; это проверяется в шаге 0.1. - D-B2. Транспорт. (а) Заменить в
transport.pyвход по паролю на ключ:paramikoс явным файлом ключа из~/.ssh/configдляmm-vps,RejectPolicyиknown_hostsс отпечатком текущего ключа хоста. (б) Оставить пароль root со скрытым вводом. Рекомендация: (а), так же, как D4 в прогоне A. Отпечаток ключа хоста снимается заново в шаге 1.1 и сверяется сHOSTKEY_SHA. Если он отличается,tmp/test-server-known-hostsне переписывается, создаётся новый файл. - D-B3. Критерий «deadline Linux». (а) Пункт B1 — это срок и функциональность:
appliedв пределах 180 с плюс очистка. Замеры swap хоста сохраняются в квитанции, но относятся к RAM-1, который отложен владельцем [ист.: mcp-completion-plan.md, этап 4]. (б) Пункт B1 требует ещё и нулевого прироста swap хоста. Рекомендация: (а). При (б) пункт фактически зависит от отложенного RAM-1, а два предыдущих прогона упали именно на этом критерии. Решение меняет критерий приёмки, поэтому оно за владельцем. При (а) в верификаторе cold143 нужно развестиdeadlineAcceptedиresourceAccepted: сейчас итог один,accepted(шаг 0.5). - D-B4. Совмещение с прогонами A и C. Рекомендация: B2 запускать только в окне, где нет фазы 5 прогона A и нет прогона C. Фазы 2–3 прогона A (Windows → CHR напрямую) VPS не трогают и могут идти параллельно с B. Если фаза 5 прогона A ещё впереди, B2 запускать после неё. B1 короткий (≈15 мин), его можно выполнить сразу после фазы 1. Решение уточняет открытый D7 прогона A.
- D-B5. Кто выдаёт одноразовый допуск (
--approval, nonce). Рекомендация: агент по цели владельца от 2026-11-17, по аналогии с D8 прогона A. В квитанции это указывается нейтрально, как условие прогона. - D-B6. Что делать при отказе B2 до 336. Рекомендация: без автоматического повтора. Сохранить квитанции, выполнить штатный
recoverиretire, разобратьworker-observation.json(наблюдатель уже встроен в пакет diagnostic90-v3). Исправление делается в новом слое кода, затем новая сборка и новый nonce. Это соответствует цели владельца «запуск, диагностика, очистка, исправление в новом слое, повтор».
3. Порядок шагов
Фаза 0 стенд не затрагивает. Для каждого стендового шага указаны режим (READ-ONLY или MUTATING) и откат. Пути ниже относительно tmp/, если не сказано иное.
Что переиспользуется
| Артефакт | Как есть? | Что адаптировать |
|---|---|---|
mcp-poll-capacity336-full-ci2683-20261112/ (prepare.mjs, prior-smoke.mjs, fixture.ts, control.ts, verify-full.mjs, run-owned.mjs) |
Нет, привязан к CI2683 и 56 миграциям | Новый source gate из HEAD, новый smoke, новая заморозка. Логику fixture (336/337/1348, 72 ч, 8 слотов) не менять |
mcp-poll-capacity336-natural-smoke-ci2683-20261112/ |
Нет | Образец для нового smoke HEAD на Windows (шаг 0.3) |
mcp-poll-linux-capacity336-ci2683-20261112/ (build.mjs, seal.py, stage.py, durable.py, cold_docker.py, verify.py, 24 офлайн-теста) |
Нет: SOURCE_GATE, ARCHIVE_SHA |
Пересобрать пакет из HEAD, перевыпустить пины, прогнать те же 24 теста |
mcp-poll-linux-capacity336-diagnostic90-v3-review/ (worker_observation_schema.py, наблюдатель, support.py: pre-admission, monitor, retire) |
Логику — да, байты — нет | Перенести наблюдатель воркера и support.py в новый пакет: квитанция ≤64 КиБ без секретов [ист.: full-port-20261113/WORKER-OBSERVATION-REVIEW.md] |
mcp-poll-capacity336-vps-systemd-readiness-20261105/read-readiness.py |
Нет: BASELINE_SHA, HOSTKEY_SHA, пароль |
Новый базовый снимок (шаг 1.3), вход по ключу |
mcp-poll-current-linux-smoke-20261114/ (read-baseline.py, seal-current.py, transport.py, watch-and-retire.py) |
Нет: пароль, ARCHIVE_SHA |
Образец цепочки «снимок → печать → запуск → наблюдение → снятие» |
mcp-poll-linux-cold143-ci2683-20261112/ (build-exact.py, prepare-linux-payload.py, run-operator.py, read-baseline.py) |
Нет: CI2683, пароль | Пересобрать cold143 из HEAD для B1; развести критерии срока и ресурсов (D-B3) |
mcp-current-preview-local-review-20261111/run-ci2713-poll-linux.py, ci2713-poll-linux-v2/ |
Нет | Это публичный MCP-путь CI2713 (план → одобрение → apply → чтение), а не cold143. Для B1 не нужен; пригоден как третий, необязательный замер публичного пути (раздел 7). Привязан к паролю (getpass, стр. 169–187) |
Фаза 0. Локальная адаптация (без стенда, до сессии)
| Шаг | Действие | Закрывает |
|---|---|---|
| 0.1 | Получить решения D-B1…D-B6. Проверить, что в HEAD есть исправления воркера и компактора, которые в CI2687 были наложены локально: пропуск занятых строк, продолжение просмотра по сроку допуска и ID, восстановление при занятых строках. Сверить server-poll-terminal-compaction.test.ts и тесты воркера; это 12 тестов компактора [ист.: mcp-server-poll-call-audit-20261114.md] |
BB1 |
| 0.2 | npm --prefix backend run build, затем node backend/scripts/test-mcp-postgres.mjs --poll-operation-retirement и --server-poll-durable --restore на HEAD (локальная одноразовая PostgreSQL) |
— |
| 0.3 | Локальный smoke естественного истечения на HEAD по образцу mcp-poll-capacity336-natural-smoke-ci2683-20261112: одна операция, архив после 5 мин срока и 60 с интервала, затем новая операция. Записать source gate и три терминальные квитанции. Около 10 минут [вывод] |
BB2 |
| 0.4 | Новая полная заморозка capacity336 на HEAD (prepare.mjs → prior-smoke.mjs → preflight, 17 офлайн-тестов верификатора), затем Linux-пакет (build.mjs → seal.py → stage.py проверяет все файлы архива). Перенести наблюдатель воркера и support.py из diagnostic90-v3. Прогнать 24 офлайн-теста владельца и стадии и 5 тестов пакета наблюдения. Зависимости Linux: пакет CI2683 берёт их «from the pinned hardened archive» с тем же package-lock [ист.: mcp-poll-linux-capacity336-ci2683-20261112/REVIEW.md]. Сверить package-lock.json HEAD с этим пином. Если lock изменился, нужен новый архив Linux-зависимостей. Локального контейнерного runtime нет, поэтому источником может быть производственный node_modules образа mmapp-test/backend:mcp-5ec95a7c (собран Gitea из того же lock) [вывод]. Без этого фаза 0 заблокирована |
BB1, BB5 |
| 0.5 | Пакет cold143 на HEAD (build-exact.py, prepare-linux-payload.py). При D-B3 = (а) разделить в удалённом раннере и верификаторе cold143 (итог accepted формируется там, ср. cold_docker.py:197–198 и mcp-cold143-v6-terminal-review-20261105/verify-terminal.py) итог на deadlineAccepted (срок, функциональность, очистка) и resourceAccepted (swap и память хоста). Значение accepted оставить строгим, чтобы не перекрашивать прежнюю семантику. Добавить офлайн-тест на сохранённой swap-observation/terminal.json: deadlineAccepted=true, resourceAccepted=false |
BB6 |
| 0.6 | Транспорт по D-B2 во всех transport.py и read-readiness.py: вход по ключу, RejectPolicy, новый файл known_hosts. Перевыпустить пины и OWNER_SHA. Отказ при несовпадении ключа хоста сохранить |
BB3, BB5 |
| 0.7 | Обновить read-readiness.py и общий снимок под текущие четыре контейнера: поле BASELINE_SHA указывает на новый файл из шага 1.3, его хеш записывается при снятии |
BB4 |
| 0.8 | python -B stage.py private-staged.tgz и transport.py check-only локально (компиляция удалённых программ без выполнения). Записать новые хеши в README нового каталога tmp/mcp-poll-linux-head-5ec95a7c-<дата>/ |
— |
Фаза 1. Предпусковая проверка и базовый снимок (≈20 мин)
| Шаг | Режим | Команда или действие | Откат |
|---|---|---|---|
| 1.1 | READ-ONLY | ssh mm-vps 'ssh-keygen -lf /etc/ssh/ssh_host_ed25519_key.pub' и сравнение с отпечатком из known_hosts на Windows. При расхождении с HOSTKEY_SHA прежних пакетов зафиксировать это и продолжать только с новым файлом (D-B2) |
— |
| 1.2 | READ-ONLY | `free -m; df -h / /var/lib /tmp; swapon --show; cat /proc/vmstat | grep -E 'pswp |
| 1.3 | READ-ONLY | docker image inspect образов mmapp-test-backend и mmapp-test-postgres: Os/Architecture = linux/amd64, PG_MAJOR=18, нет Volumes у backend. Новый базовый снимок через адаптированный read-baseline.py: daemonId, 4 × (id, imageId, pid, restartPolicy). Записать SHA-256 снимка |
— |
| 1.4 | READ-ONLY | `ls /var/lib/ | grep mm-иsystemctl list-units 'mm-': собственных каталогов и transient unit прежних прогонов нет. Если найдены (/var/lib/mm-poll-capacity336/, /var/lib/mm-cold143-), сначала штатный retireпо их квитанциям, неrm -rf` |
| 1.5 | READ-ONLY | Убедиться у координатора, что фаза 5 прогона A не идёт и не начнётся в окне B (D-B4), а прогон C не запущен | — |
Фаза 2. B1: deadline cold143 (≈15 мин)
| Шаг | Режим | Команда | Откат |
|---|---|---|---|
| 2.1 | MUTATING (VPS: загрузка пакета в /var/lib/mm-cold143-<nonce>, два собственных контейнера mm-cold-node-* и mm-cold-pg-*, том PGDATA) |
python run-operator.py --check-only, затем режим исполнения нового пакета cold143. У прежнего пакета это --execute-exact-linux-cold143-v6 с TTY и паролем [ист.: run-operator.py:96–102]; имя режима и аргументы нового пакета задаются в шаге 0.5 [вывод]. Пакет сам проверяет базовый снимок до и после, ограничивает ресурсы (1 CPU на контейнер, Node 192/16 МиБ) и удаляет свои ресурсы |
Встроенная очистка (ownedResourcesRemoved, baselineUnchanged). Если очистка не подтверждена, удалить только контейнеры и тома с метками этого nonce после docker inspect меток |
| 2.2 | offline | Разбор terminal.json: elapsedMs < 180000, 143/22/54/4/151, deadlineAccepted, resourceAccepted, swap хоста. Квитанция B1 |
— |
| 2.3 | READ-ONLY | Повтор 1.2–1.3: базовый снимок совпал, собственных ресурсов нет | — |
Если elapsedMs ≥ 180000 или терминальной квитанции нет, B1 = failed или unknown. Повтор допускается только с новым nonce после разбора; прежний исход сохраняется.
Фаза 3. B2: capacity336 (≥252 мин, оценка 12–30 ч [вывод])
| Шаг | Режим | Команда | Откат |
|---|---|---|---|
| 3.1 | READ-ONLY | support.py pre-admission --nonce <новый> --baseline <абс. путь> --baseline-sha256 <…>: исходные сервисы, пороги ресурсов, отсутствие общей резервации POLL336 и активного или стартующего transient unit [ист.: full-port-20261113/SUPPORT-REVIEW.md] |
— |
| 3.2 | MUTATING (VPS: /tmp/mm-capacity-smoke-<nonce> → /var/lib/mm-poll-capacity336/<nonce>, transient unit systemd, контейнеры app и pg с лимитами 320 и 192 МиБ, резервация) |
transport.py launch --nonce … --approval <файл D-B5> --baseline … --baseline-sha256 …. Unit запускается через systemd-run, ExecStopPost вызывает закреплённый recover |
recover под блокировкой сверяет принадлежность контейнеров и очищает только ресурсы этого nonce |
| 3.3 | READ-ONLY, периодически | transport.py observe --nonce … или support.py monitor: только счётчики heartbeat (операции, архивы, GET, ошибки воркера) и free -m. Интервал опроса не чаще раза в 10–15 минут [вывод], чтобы не нагружать VPS |
— |
| 3.4 | READ-ONLY | После terminal: локально сохранить исходные байты квитанций и worker-observation.json по контрольным суммам terminal. verify.py: 336/337/336/1348, 72 ч, 337 уникальных источников, учёт квот |
— |
| 3.5 | MUTATING (удаление одного каталога package этого nonce) | support.py retire --nonce …: сверка привязки запуска, исходных сервисов, отсутствия unit, контейнеров и путей выполнения, контрольных сумм файлов пакета. Квитанции и записи запуска остаются |
При неопределённом ответе повтор блокируется локальной записью, дальше только чтение |
После перезагрузки VPS посреди B2. Сначала независимо прочитать boot_id, привязку запуска, статус unit и контейнеров. Затем ручной recover с теми же хешами владельца, манифеста и Docker-помощника и тем же nonce, только при подтверждённом отсутствии живого прежнего владельца [ист.: SUPPORT-REVIEW.md, «Восстановление после сбоя»]. Исход B2 в этом случае failed или unknown, не accepted.
Фаза 4. Завершающая сверка (≈10 мин)
| Шаг | Режим | Действие |
|---|---|---|
| 4.1 | READ-ONLY | Повтор 1.2–1.4: четыре контейнера mmapp-test с теми же id и pid, нет mm-* каталогов и unit, свободное место и память вернулись к базовым ±5 % [вывод] |
| 4.2 | offline | Записать итог в mcp-completion-plan.md (журнал) и mcp-current-progress.json (новые ключи, прежние capacity336Profile и targetLinuxColdPollAccepted не переписывать задним числом) |
4. Базовый снимок до прогона и сверка после
- Что снимается.
daemonIdDocker, идентичностьdockerd(PID, время старта, inode сокета), четыре контейнераmmapp-test(id,imageId,pid,restartPolicy),MemAvailable,/proc/vmstat(pswpin,pswpout,oom_kill), свободное место и inode в/var/lib,/tmpи корне Docker,boot_id. - Когда. После решений D-B1…D-B6 и фазы 0, непосредственно перед 2.1, и повторно перед 3.1, если между ними было что-то ещё.
- Чем. Адаптированным
read-baseline.pyиread-readiness.py(шаги 0.6–0.7). SHA-256 снимка передаётся в каждый MUTATING-шаг. - Критерий. После прогона четыре контейнера с теми же
idиpid,daemonIdи идентичностьdockerdпрежние, собственных контейнеров, томов, сетей, unit и каталогов нет. Пакеты проверяют это сами (baselineUnchanged,retire), шаг 4.1 повторяет проверку независимо. - CHR. Не снимаются: прогон B их не трогает. Пакеты обращаются только к синтетическому RouterOS на loopback [ист.: fixture.ts; REVIEW.md].
5. Риски, условия остановки и откат
Остановить прогон немедленно, если:
- Базовый снимок разошёлся (перезапуск
mmapp-test, сменаdockerd). Это означает пересечение с другим прогоном или вмешательство. Пакет сам перейдёт вrecover. MemAvailable< 500 МиБ или зафиксирован OOM любого контейнера установки [вывод, тот же порог, что в плане A].- Терминальная квитанция не получена в пределах 72 ч или ответ на запуск потерян. Дальше только
observeиrecover; повторныйlaunchс тем же nonce запрещён. - Ключ хоста VPS не совпал с проверенным в 1.1.
Откат: только штатными recover и retire по nonce. Удаления выполняются по меткам и путям, принадлежность проверена. mmapp-test не трогается.
Прочие риски [вывод]:
- Swap хоста. Cgroup пакетов запрещают swap собственным контейнерам, но хост 2 ГиБ уже свопит при работе установки. От D-B3 зависит, валит ли это B1.
- Деградация
mmapp-testна 12–30 ч: общий CPU и диск. Тестовая установка при этом работает, Run A не может пользоваться VPS. - Запас по сроку cold143 невелик: 158–165 с при пределе 180 с. HEAD содержит на одну миграцию больше и новые изменения.
- Исход до 336 (как на источнике 22) возможен и на HEAD. План это допускает (D-B6), но тогда B2 не закрывается в этот прогон.
6. Оценка длительности [вывод]
- Фаза 0: 0,5–1 рабочий день без стенда (smoke ~10 мин, сборка и офлайн-тесты пакетов, правка транспорта).
- Фаза 1: ~20 мин. Фаза 2 (B1): ~15 мин. Фаза 4: ~10 мин.
- Фаза 3 (B2): нижняя граница 252 мин. Ожидание 12–30 ч по темпу v5 (≈24 архива/ч на Windows) и замедлению Linux. Жёсткий предел 72 ч. Всё это время VPS занят прогоном B.
Предпусковые проверки 2026-11-19 (до сборки пакетов)
- Решения. D-B3 принял владелец 17.11: критерий B1 разделяется на
deadlineAcceptedиresourceAccepted, swap хоста фиксируется, но пункт не валит. D-B1 (сборка из текущего кода), D-B2 (вход по ключу), D-B4 (окно без перезапускаmmapp-testи без прогона C), D-B5 (nonce выдаёт агент, в квитанции указывается нейтрально) и D-B6 (без автоповтора) — решения оркестратора по цели владельца от 17.11. D-B4 выполнимо: ROUTING наmmapp-testзакончен 19.11. - Исходник. Не
5ec95a7c, а7848e38a:mmapp-testработает на образахmcp-7848e38a, пакеты POLL запускаются из образа backend установки,git diff 7848e38a HEAD -- backend packagesпуст (после него только документация). Устарело после исправления 19.11: B идёт на0e63cdd5(код как у3914efd2, после него только документация; содержитbd483689);mmapp-testпереразвёрнут на эту сборку 20.11 (раздел «П1» ниже). - Числа cold143 на текущем коде (
npm run test:mcp:poll-memory:pg, Windows, Node 25.5, куча 192/16 МиБ): 57 миграций, 143 действия обслуживания, 22 публикации, 54 строки журнала, 4 GET, списание 151 (ожидаемое 151), 27,5 с (раньше 27,8 с). Критерии B1 не сдвинулись. - Шаг 0.1–0.2. Исправления воркера есть:
runtime.ts:881/893/900(проход по сроку и ID,LIMIT 1000 … SKIP LOCKED); тесты компактора 12 из 12;--poll-operation-retirementпрошёл (336 архивов одного владельца, 36 с);--server-poll-durable --restoreпрошёл с настоящимиpg_dump/pg_restore18 (MMAPP_PG_CLIENT_BIN=C:\Program Files\PostgreSQL\18\bin). - Зависимости Linux.
seal.pyпакета CI2683 требуетpackage-lock.jsonс sha256d8384895…(форма LF); у7848e38aон такой же, закреплённый архив Linux-зависимостей переиспользуется без пересборки. - Транспорт.
paramiko5.0.0 есть вtmp/netflow-agent-stand/python-deps(так его подключают прежниеtransport.py), работает с Python 3.13. Ключ хоста VPS не менялся: sha256tmp/test-server-known-hostsравенHOSTKEY_SHA(c6ca709c…). - Допуск VPS (шаг 1.2, только чтение):
MemAvailable845 МиБ (порог 704), свободно 9,8 ГБ, cgroup v2 с лимитами памяти и swap, swap занят 75 МиБ из 4 ГиБ,oom_kill 0, активных unitmm-*нет,mmapp-test— 4 контейнера (backend/frontendmcp-7848e38a,portal,postgres:18-alpine). - Остатки прежних прогонов на VPS (не удалялись):
/var/lib/mm-poll-capacity336/— 10 каталогов квитанций по nonce (512 КБ; у части естьretirement.json, у части нет), 16 каталогов/var/lib/mm-two-chr-*от 05.11 (по 14 МБ, пакеты и отчёты V63), 6 неиспользуемых анонимных томов Docker. Разобрать в фазе 0: считает лиsupport.py pre-admissionнеснятые nonce общей резервацией POLL336; снимать только штатнымretireпо их квитанциям.
Разбор пропусков публикаций архивов (2026-11-19)
Установлено чтением кода и совпадением с таймингом Linux-прогона 13.11 (tmp/mcp-poll-linux-capacity336-full-port-20261113/89b9c3d8fbdcc354-sources.json); приборами на тике не измерялось.
- Механизм.
servers.pollвыполняет весьexecute(чтения RouterOS, журнал, эффекты обслуживания, публикации) внутриwithGlobalLock(server-poll-execution.ts:85), а этоmaintenanceLease=withLeaseс исключительнойpg_advisory_lock(8723110)(server-poll-production.ts:268–276,server-partition-maintenance-lease.ts:197) на всё время опроса, до 180 с. Тик воркера MCP (workers.ts:158–179) идёт последовательно; первая фоновая запись вretainMcpDataпробует разделяемую блокировку того же ключа, получаетPartitionWriterBusy, иworkers.ts:175молча завершает весь тик до компакции. Компакция и сама публикует не больше одного архива за тик (server-poll-terminal-compaction.ts:87). - Почему 1 архив на цикл. Фикстура capacity336 выполняет операции строго по одной (
fixture.ts:419–422). Тики, попавшие на выполнение операции, пропадают целиком; публикует только тик, попавший в промежуток между операциями, и только один архив. 13.11: архив 1 в 480 с (промежуток после оп. 8), архив 2 в 510 с (до старта оп. 9 в 514 с), архив 3 в 600 с (до оп. 10 в 610 с); все 21 архив на одной фазе 30-секундного таймера; при этом в каждом пропущенном слоте было готово 2–5 архивов. - Почему прогон 13.11 упал на источнике 22. Задержка архива после допуска росла примерно на 30 с с каждым архивом (120 → 597 с к источнику 21). Фикстура требует архив не позже 10 минут после допуска (
fixture.ts:331,DEFAULT_WORKER_ARCHIVE_TIMEOUT_NO_RETRY); у источника 22 предел был превышен — это и есть отказharvest-query. Повтор «как есть» снова упадёт около источника 22: оценка «~14 ч» в предыдущем ответе была неверной. - Нижняя граница после исправления. Глобальная блокировка не даёт двум опросам идти одновременно, поэтому B2 не короче 337 × время одной операции. 13.11 на Linux операции шли 48–65 с (первые восемь, подряд), позже цикл 85–150 с: это 6–13 ч, а не «4,5–5 ч» из предыдущего ответа (4,2 ч — предел слотов, он достижим только при цикле ≤ 45 с). Растёт ли время операции с числом сохранённых архивов, по данным 13.11 отделить нельзя: после заполнения слотов цикл включает ожидание архива.
- Влияние на эксплуатацию. Пока идёт любой
servers.poll(до 180 с), тик MCP пропускает не только компакцию, но и восстановление операций, хранение, снятие операций, обнаружение дрейфа и такт профилей маршрутизации.
Варианты исправления (решение владельца: меняют поведение продукта)
- Компакция выгребает очередь, пока писатель свободен (рекомендуется первым шагом): в одном тике несколько циклов «заявка → публикация», каждый со своими двумя транзакциями, в пределах бюджета тика; правило «одна заявка на транзакцию» и все проверки архива прежние. Даёт: архивы не копятся, задержка не растёт, предел 10 минут не достигается. Не сокращает 337 × время операции.
- Тик не обрывается целиком на
PartitionWriterBusy: стадии, которым не нужен писатель разделов (восстановление операций, дрейф, профили), выполняются; занятые стадии откладываются по отдельности. Небольшая правкаworkers.ts, полезна для эксплуатации; на B2 почти не влияет, компакции писатель нужен. - Ускорить сам опрос по тому же принципу, что VRF и маршрутизация 19.11 (проверка прав раз на этап вместо полного перечитывания контекста перед каждым эффектом,
gateвserver-poll-execution.ts:108): это главный рычаг длительности B2. Объём и выигрыш нужно сначала измерить локально (время операции при 0 и при сотнях архивов). - Сузить исключительную блокировку опроса до DDL обслуживания: компакция шла бы параллельно с опросом. Затрагивает защиту разделов от гонки DDL и записи; самый рискованный вариант, не рекомендуется без отдельного обоснования.
Любое исправление уводит прогон B с 7848e38a: перед базовым снимком 1.3 нужно переразвернуть mmapp-test на новую сборку и повторить числа cold143.
Решение владельца (2026-11-19): варианты 1, 2 и 3 — что сделано
- Вариант 1 сделан. Воркер вызывает
drainCompletedServerPollStorage(server-poll-terminal-compaction.ts): прежний цикл «заявка → публикация» повторяется, пока писатель свободен, не дольше 20 с и не больше 64 архивов за тик; одиночныйcompactCompletedServerPollStorageи все его проверки не менялись. Каждый цикл заново берёт писателя черезpg_try_advisory_lock_shared, поэтому опрос, уже ждущий исключительную блокировку, останавливает разбор (проверено на PostgreSQL). Тесты: модульный (повторный захват на цикл, остановка при занятом писателе), на PostgreSQL — очередь из трёх источников уходит за один вызов и за один тик, разбор уступает ждущему исключительному запросу, ёмкость 336 по-прежнему проходит. - Вариант 2 не сделан (после чтения кода): почти все стадии тика (восстановление, хранение, компакция, снятие, сбор) требуют того же писателя и во время опроса всё равно отступили бы — выигрыша нет; а две стадии без него вредны: обнаружение дрейфа берёт
withConfigMutationLock, которую опрос держит по всем серверам до 180 с (server-poll-production.ts:156, тик повис бы), профили маршрутизации пишут на роутеры. - Вариант 3 сделан, затем по просьбе владельца («проверок должно быть ещё меньше») сокращён ещё. Итоговое правило для опроса: свежая проверка прав в начале каждого этапа (
prepare/execute/readExisting), перед каждой отправкой на RouterOS и прямо передCOMMITкаждой пишущей транзакции, меняющей данные приложения или DDL (обслуживание разделов, публикация результатов); одна проверка на всю такую границу. Журнал опроса (учёт хода уже разрешённой операции) и чтения используют доказательство не старше 2 с; записи журнала MCP при этом сами проверяют подключение, учётные данные и область в SQL своей транзакции (server-poll-journal.ts:104–111). Отказ не переиспользуется. Точки:server-poll-durable-session.ts(кеш по набору серверов, сброс в начале этапа),freshPollAuthorityвserver-poll-storage.ts,COMMITпишущей транзакции в аренде разделов и в запасной транзакции,beforeDispatchотправки на RouterOS. Функция допуска только читает (BEGIN READ ONLY … ROLLBACK); с задержкой до 2 с вне свежих границ замечаются: статус/режим/область/срок подключения, права, поколение доступа, защиты, каталог серверов, отзыв портала. - Замеры (Windows, локально), холодный опрос cold143. Настоящих проверок допуска: ~3 700 → 32. Время самой операции (план → одобрение → применение → итог): 19,9 → 3,2 с (весь тест вместе с запуском приложения 27,5 → 6,8 с). SQL-запросов 62 783 → 2 272. Числа 143/22/54/4/151 прежние. Профиль CPU: собственная работа опроса теперь мала, остаток — ожидание PostgreSQL (полные перечитывания контекста перед эффектами ~0,8 с — защита от смены конфигурации, не трогалась — и сами DDL ~1 с). Тест устойчивого опроса: проверок за прогон 17 108 → 152 (в тест добавлена граница 300). Новый тест: отзыв прав при удержанных чтениях RouterOS — опрос отклоняется, после отзыва нет ни одного
COMMITобслуживания или публикации и нет итога, каждый дошедший до RouterOS запрос был разрешён и записан в журнал до отзыва (журнал самих чтений может записаться в пределах 2 с). - Коммиты:
bd483689(разбор очереди, правило прав),3914efd2(свежей стала последняя проверка перед отправкой на RouterOS, после перечитывания контекста). Проверка правила: при временном отключении свежей проверки передCOMMITпишущих транзакций тест отзыва падает (17 подтверждений эффектов после отзыва). - Прогоны тестов на
3914efd2: типы; модульные опроса, разделов и MCP 366 + 19; на PostgreSQL все пять вариантов архива терминала, устойчивый опрос с восстановлением, снятие опроса, обычных операций и проб, снимок журнала, раунды маршрутизации с изоляцией воркера, холодный опрос; полный шардированный набор MCP (6 шардов, 258 с). Вариант архива с потерей ACK падал и наb9f950c2(ждал два соединения, писатель держит одно) — ожидание исправлено. Падают и до изменений, не чинились:--server-poll-storageи--server-poll-storage-fresh(конфликт «изменилась конфигурация или окно обслуживания» вserver-poll-storage-execution.sql-helper.ts:53),--server-probe-journal(помощник профилей маршрутизации,routing-profile-authority.sql-helper.ts:89),npm test(цепочкаtest:probesтребует PostgreSQL на127.0.0.1:5432). - Длительность B2 пока не обещается: ускорение получено на Windows. Время операции на VPS измерить на этапе П1 до запуска B2.
Прогон B2 по часовым этапам
B2 остаётся одним непрерывным прогоном (перезапуск посреди B2 по плану даёт failed/unknown, а отдельно запускаемые куски меняли бы критерий). Часовые этапы — это контрольные точки с решением «продолжать / остановить» по числам из support.py monitor (опрос не чаще раза в 10–15 минут, VPS не нагружается). Подготовка и B1 идут до B2.
| Этап | Время | Что происходит | Продолжать, если |
|---|---|---|---|
| П0 | 2–4 ч, локально | Исправление (по решению выше), тесты, сборка пакетов фазы 0 на новой сборке | Офлайн-тесты пакетов зелёные; локальный прогон компакции выгребает очередь |
| П1 | ~1 ч, VPS | Переразвёртывание mmapp-test, допуск 1.2–1.4, базовый снимок, B1 (cold143) |
deadlineAccepted=true, снимок совпал |
| Ч1 | 1 ч | Старт B2, первые 8 операций и первые архивы — диагностический час (13.11 к 35-й минуте задержка уже была 500 с) | Архивов ≥ (операций − 8) − 2; максимальная задержка архива < 300 с и не растёт; время операции записано |
| Ч2…Чn | по 1 ч | Установившийся режим | Прирост архивов за час ≈ прирост операций; задержка < 300 с; время операции растёт не больше чем на 10 % за час; MemAvailable > 500 МиБ, OOM нет |
| Финал | ~30 мин | terminal, verify.py, retire, фаза 4 |
336/337/336/1348, снимок совпал |
П1 (2026-11-20): переразвёртывание и пакет B1
- Утверждение. Владелец утвердил правило прав 2.9 и разбор очереди 2.10 (
docs/mcp-decisions-review-20261119.md). - Сборка. Ветка
codex/mcp-foundationотправлена в Gitea (7848e38a..0e63cdd5, неmain);mcp-acceptance-preview.yml, запуск2743успешен (тегmcp-acceptance-0e63cdd5…-2743-1). Миграции иpackage-lock.jsonс7848e38aне менялись. mmapp-test. Резервная копия БД/root/backups/mmapp-test-pre-0e63cdd5-20261120T021111Z.dump(46,3 МБ, 1318 записей оглавления) и.env. Образы перетегированы вmmapp-test/{backend,frontend}:mcp-0e63cdd5, перезапущены только backend и frontend, backendhealthy; postgres и portal не трогались. Откат: тегиmcp-7848e38aв.env,docker compose up -d backend frontend.- Отклонения по ходу. Первая попытка дампа шла с
POSTGRES_USERиз.env, а его там нет (он задан в окружении контейнера).pg_dumpотказал,set -eостановил скрипт до смены образов; пустой файл дампа удалён, дамп снят через переменные контейнера. Первыйdocker pullнового тега получил 401 от реестра, повтор прошёл (анонимный токен 200). - Пакет B1
tmp/mcp-poll-linux-cold143-head-0e63cdd5-20261120/(README там же):- экспорт
git archive 0e63cdd5, 57 миграций, наложение на закреплённую нагрузку CI2683 (тот же lock); - D-B3:
deadlineAcceptedиresourceAcceptedиз одной функцииclassifyс офлайн-тестом на квитанциях 12.11,acceptedстрогий; - вход по ключу (D-B2) с закреплённым ключом хоста.
- Локально на Node 22.23.4 вывод проходит новый верификатор целиком:
elapsedMs4369 (CI2683 на той же машине 27 794).
- экспорт
- Действительность B1 для B2. B1 засчитывается, только если при запуске B2
daemonIdиid/imageId/pidчетырёх контейнеров совпадают со снимком B1. Иначе B1 повторяется с новым nonce. - Как переносить замер.
elapsedMsB1 — холодный опрос со 143 эффектами, а не цикл операции B2. Он даёт отношение Linux/Windows; часы B2 всё равно берутся из Ч1. - B1 выполнен (11:40 по UTC+7,
/var/lib/mm-cold143-3443ca42400e63b6, архив4d272e78…, снимокd621e487…):deadlineAccepted=true:elapsedMs10 927 (CI2683 на Linux 158 039); все закреплённые значения cold143, Node v22.23.5, пик RSS 261 МиБ;resourceAccepted=false: swap хоста 8/43 страниц (12.11: 125/1025), OOM 0; строгийaccepted=false;- очистка подтверждена раннером и независимым чтением: нет каталогов, контейнеров и новых томов, PID четырёх сервисов совпадают со снимком.
- Отношение Linux/Windows для этой сборки ≈ 2,5 (10 927 / 4369), у CI2683 было ≈ 5,7. Ускорение опроса перенеслось на Linux.
П0 для B2 (2026-11-20): пакет capacity336 на 0e63cdd5
- Подход. Не пересобирать всю цепочку CI2683 (CI2683 → journal-overlay → short-port → full-port), а взять архив полного пакета 13.11 (
full-port,89d83b92…) как базу зависимостей и владельца и заменить в нём то, чтоdurable.pyпривязывает к сборке: коммит, source gate и доказательство smoke. - Разбор слоёв 13.11. От CI2683 полный пакет 13.11 отличался 8 модулями продукта и двумя файлами владельца. Все 8 правок продукта есть в
0e63cdd5, частично в развитом виде. Файлы владельца (cold_docker.pyсOwnedDockerRefusal,verify.py) взяты побайтно, вdurable.pyзаменены только два пина. Фикстура слоями не менялась. - Smoke
tmp/mcp-poll-capacity336-natural-smoke-head-0e63cdd5-20261120/:- экспорт
git archive 0e63cdd5; фикстура проходит строгую проверку типов против нового продукта без правок связующего кода (изменена только проверка числа миграций 56 → 57); - прогон на Node 22.23.4: 2 операции, 1 естественно сжатый архив через 30 с после допуска, 8 GET, 0 ошибок воркера, очистка;
verify-smoke.mjs—accepted.
- экспорт
- Полная заморозка
tmp/mcp-poll-capacity336-full-head-0e63cdd5-20261120/: 17 тестов верификатора, манифестdd22ea37…, доказательство smoke25e8ed1c…. - Linux-пакет
tmp/mcp-poll-linux-capacity336-head-0e63cdd5-20261120/(README там же):- 730 скомпилированных модулей совпали по хешам с полной заморозкой; архив
591bb5c7…(12 648 файлов), манифестd5e5edbd…, владелец8311fb52…; stage.pyсверил архив, 40 офлайн-тестов (владелец, stage, support, транспорт) проходят;- транспорт по ключу (D-B2).
- 730 скомпилированных модулей совпали по хешам с полной заморозкой; архив
- Наблюдатель воркера в пакет не входит: его не было и в полном пакете 13.11, он патчит изменённый планировщик, и
verify.py/support.py/durable.pyего не требуют. Список квитанций B2 в разделе 1 поэтому безworker-observation.json; числа часа Ч1 — из счётчиков heartbeat иsources.json. - Остатки на VPS.
/var/lib/mm-poll-capacity336/— 10 каталогов только с квитанциями (512 КБ, пакетов нет), активной резервацииcapacity336-active.jsonи unit нет. Запуск не блокируют, оставлены как доказательства. - Локальная первая волна (условие П0, не приёмка; полная фикстура на Windows, остановлена штатной отменой): 8 операций за ~28 с; архивы 1–8 опубликованы одним тиком через 19–30 с после допуска, архивы 9–15 — через 11–23 с; разрыв операции − архивы ≤ 8; ошибок воркера 0. Задержка не растёт (13.11 росла на ~30 с с каждым архивом).
B2 запущен (2026-11-20 03:02 UTC)
- Допуск без записи:
transport.py read-onlyиsupport.py pre-admission—ready, память 913 МиБ, резервации нет. Снимок150b5ac3…по содержимому совпадает со снимком B1, поэтому B1 засчитывается. - nonce
5945935965481c83(D-B5: допуск выдан агентом), архив591bb5c7…, каталог/var/lib/mm-poll-capacity336/5945935965481c83, unitmm-poll-capacity336-5945935965481c83.service. - Наблюдение:
support.py monitor(команда в README пакета), не чаще раза в 10–15 минут. - Остановка только по решению «остановить»:
systemctl stopunit;ExecStopPostзапускаетdurable.py recover. Повтора нет. - Ожидаемая длительность: темп задают 8 слотов и окно 6 мин (5 мин плана + 60 с + тик), а не время операции. По локальной волне это ~7–8 архивов за ~6,4 мин, около 4,5–5 ч на 336. Цифра подтверждается часом Ч1.
- Ч1 пройден (04:03 UTC): продолжать.
- Счётчики: 67 операций, 62 архива (критерий ≥ 57), 268 GET, 0 ошибок воркера. Разрыв операции − архивы за час держался в пределах 4–7 (10 минут: 15/8; 20: 23/19; 30: 36/29; 40: 46/39; 50: 57/50; 60: 67/62).
- Память:
MemAvailable600–644 МиБ, OOM 0. - Задержку архива
support.py monitorво время прогона не отдаёт (только счётчики heartbeat), поэтому критерий «задержка < 300 с» проверен косвенно: разрыв не выходит за 8 слотов. - Темп ~66 операций/ч, оценка завершения ~08:10 UTC.
- Порог памяти 500 МиБ в таблице — оценка оркестратора, а не встроенная проверка. Жёсткий порог владельца — 128 МиБ; лимиты контейнеров 320 + 192 + 64 МиБ.
Исход B2 nonce 5945935965481c83: failed (05:43 UTC, 2 ч 41 мин)
- Итог: 169 операций, 163 архива, 676 GET, 0 ошибок воркера;
terminal.jsonphase=workload-RuntimeError,accepted=false,cleanupComplete=true,baselineUnchanged=true. Пакет снят штатнымretire(12 648 файлов сверены, квитанции и записи запуска на VPS остаются), VPS свободен. Повтора нет (D-B6). Квитанции локально:tmp/mcp-poll-linux-capacity336-head-0e63cdd5-20261120/5945935965481c83-*.json(terminal5edd25a0…,status280f0eb9…,sources0d55c0fc…). - Что случилось. В 05:43:31 ядро:
general protection faultпроцессаnodeвlibc.so.6по смещению0x2650f. Разбор ELFlibcобраза backend на VPS показывает, что это функцияabort: Node — PID 1 контейнера, и для init пространства имён SIGABRT игнорируется, поэтомуabort()доходит доhltи выглядит как GPF. Значит, Node завершился сам по фатальной ошибке. Владелец увидел ненулевой код выхода (demand, классRuntimeError) и выполнил очистку. Текст ошибки Node потерян: журнал Dockerjson-fileудалён вместе с контейнером, а владелец его не сохраняет. Записей OOM ядра нет,oom_kill0;320M memory peakконтейнера включает страничный кеш и ничего не доказывает. - Главная гипотеза: рост кучи V8 с каждой операцией.
- Интервал между планами внутри волны (приближение времени операции) растёт: операции 2–18 — 5,1 с, 19–35 — 7,4 с, 36–53 — 11,7 с, 54–70 — 22,5 с. Дальше ~60 с: это уже темп освобождения 8 слотов, операции перестали идти пачками. Так выглядит нарастающее давление на сборщик мусора.
- Задержки архивов оставались ограниченными (медиана 26 с, максимум 84 с): разбор очереди работал до конца.
- Пик RSS (
peakRssKiB): smoke Windows 233 МиБ на 2 операциях, волна Windows 253 МиБ на 22, Linux 13.11 274 МиБ на 28, B2 290 МиБ на 169. (Оценка «около 1 МиБ на операцию» по RSS неверна: живая куча после GC растёт примерно на 0,15 МиБ на операцию, см. ниже.)
- Причина установлена (локальная диагностика, 2026-11-20): утечка
AsyncLocalStorageв продукте на каждый опрос.- Зонд через инспектор (
process._debugProcess, без сменыexecArgvфикстуры) на полной фикстуре Windows. Живая куча после GC: 130 МиБ на 8 операциях, 134–137 МиБ на 43. - Разница снимков кучи 8 → 43 операций: +280 экземпляров
AsyncLocalStorageи ровно +280 символов, по 8 на операцию, плюс рост словарей свойств (object properties, +2 МБ). - Механизм Node 22: каждый включённый
AsyncLocalStorageнавсегда остаётся в глобальном списке, и при создании каждого асинхронного ресурса Node копирует в ресурс хранилище каждого экземпляра. Стоимость каждого промиса растёт линейно с числом экземпляров. Отсюда рост времени операции на Linux (5 → 22 с) и пиковой кучи во время операций. - Источники — фабрики, вызываемые на каждый опрос:
createServerPartitionMaintenanceLease(3 экземпляра на сессию),createServerPollProductionDependencies(1),createAtomicServerPollProductionDependencies(1). - Достаточность доказана. В работающую фикстуру (43 операции) впрыснуто 1300 включённых экземпляров, столько же набралось бы к ~170-й операции. Пик кучи без GC вырос со ~135 до 174 МиБ ещё в простое. В начале следующей волны:
FATAL ERROR: Reached heap limit Allocation failed - JavaScript heap out of memory, код 134 (SIGABRT) — тот жеabort(), что на VPS. - Утечка есть и в развёрнутом backend
mmapp-test: каждый опрос сервера добавляет экземпляры, процесс деградирует до перезапуска. - Второе отличие Linux (
autovacuum=off,shared_buffers=32MBу PostgreSQL владельца,durable.py:457–458) пока не проверено. Это условие стенда, менять его — решение владельца.
- Зонд через инспектор (
- Исправление:
scopedAsyncStorage(backend/src/services/scoped-async-storage.ts) — одинAsyncLocalStorageна процесс, у каждой фабрики свой ключ в неизменяемой карте. Вложенные контексты разных владельцев видны так же, как при отдельных экземплярах; общее хранилище не экспортируется. Заменены 5 экземпляров в трёх фабриках опроса. Синглтоны процесса (охрана записи RouterOS, адаптеры проб, stdio) не трогались. - Решения, которые за владельцем: поднять предел кучи или контейнера; изменить, что удерживает фикстура. Исправление в продукте — это новая сборка и переразвёртывание
mmapp-test, значит, B1 повторяется. - Перед любым следующим Linux-прогоном владелец должен сохранять код выхода,
OOMKilled, сработавшийdemand, ограниченный хвост журнала приложения и по каждому heartbeat анонимную и файловую память cgroup иpids.current.
Повтор на исправленной сборке 29998815 (2026-11-20)
-
Сборка и развёртывание. Исправление
29998815прошло проверки:- типы, модульные тесты опроса, разделов, проб и MCP;
- пять вариантов архива терминала, устойчивый опрос с восстановлением;
- снятие опроса, обычных операций и проб, снимок журнала, раунды маршрутизации,
poll-memory; - полный шардированный набор MCP.
Ветка отправлена в Gitea, запуск
2745успешен.mmapp-testпереразвёрнут наmcp-29998815: резервная копия БД/root/backups/mmapp-test-pre-29998815-20261120T073743Z.dump(46,3 МБ, 1318 записей); перезапущены только backend и frontend, backendhealthy. Откат — тегиmcp-0e63cdd5. -
B1 повторён (
tmp/mcp-poll-linux-cold143-head-29998815-20261120/, архив19f318fc…, снимок2883b5eb…):deadlineAccepted=true,elapsedMs12 054, 143/22, все закреплённые значения, Node v22.23.5, пик RSS 257 МиБ, очистка подтверждена, база не изменилась.resourceAccepted=false: swap хоста 7/5609 страниц, OOM 0. -
Цепочка B2 на
29998815:- smoke
tmp/mcp-poll-capacity336-natural-smoke-head-29998815-20261120/—accepted, gate62004c2a…, запуск Gitea 2745 в gate; - полная заморозка
tmp/mcp-poll-capacity336-full-head-29998815-20261120/— 17 тестов, манифест21856e33…, доказательство2a87c2d9…; - Linux-пакет
tmp/mcp-poll-linux-capacity336-head-29998815-20261120/— архив3f094867…(12 649 файлов), 40 офлайн-тестов.
- smoke
-
Локальная проверка исправления на полной фикстуре с флагами PostgreSQL как на VPS (
autovacuum=off,shared_buffers=32MB, …; не приёмка): живыхAsyncLocalStorageровно 24 на 1, 8 и 15 операциях (без исправления было бы ~136). Интервал между операциями 2,2–2,4 с на двух волнах, задержки архивов 12–30 с, ошибок воркера 0. Прогон остановлен файломstop, каталог удалён. -
B2 запущен повторно 2026-11-20 08:01 UTC: nonce
d3f72b64943a81a7, архив3f094867…, снимок089b63cb…. По содержимому снимок совпадает со снимком повторного B1, поэтому B1 засчитывается. Проверки без записи —ready, память 958 МиБ. -
B2 ПРИНЯТ (2026-11-20 13:44 UTC, nonce
d3f72b64943a81a7).terminal.json:accepted=true,phase=verified,cleanupComplete=true,baselineUnchanged=true.- Монитор:
capacity336Accepted=true,cleanupConfirmed=true. - Независимая сверка сохранённых квитанций
verify.py: 337 операций, 336 естественно сжатых и аутентифицированных архивов, 1348 синтетических GET, 337 уникальных источников, 0 ошибок воркера. - Длительность 5 ч 40 мин (
elapsedMs20 371 228) при пределе 72 ч. - Задержка архива после допуска: медиана 18 с, максимум 56 с.
- Отпечаток журнала архивов до и после 337-й операции совпал (
d72bbaa7…), учёт добавления: compact 336, full 1. Пик RSS 287 МиБ. - Квитанции:
tmp/mcp-poll-linux-capacity336-head-29998815-20261120/d3f72b64943a81a7-*.json(terminal31beb653…,statusa71972c7…,sources06cd5470…,closeda07fc461…). - Ход прогона:
- анонимная память контейнера приложения 160–221 МиБ, колеблется по циклам GC без роста, процессов 11;
MemAvailableVPS 634–739 МиБ, OOM 0;- медиана интервала между планами 4,7–6,0 с без накопления (в упавшем прогоне 22–60 с);
- лёгкий дрейф 5,0 → 6,0 → 5,7 с за последние два часа — вероятно, раздувание таблиц при
autovacuum=off, на исход не влияет.
- Фаза 4: пакет снят штатным
retire(12 649 файлов сверены, квитанции и записи запуска на VPS остаются). Резервации, unitmm-poll-capacity336-*, посторонних контейнеров и собственных путей нет. PID четырёх сервисовmmapp-testсовпадают со снимком089b63cb…,MemAvailable928 МиБ (на старте 958). - B1 (повторный,
29998815) засчитан в этот же прогон: снимок по содержимому совпал. - Квитанции
worker-observation.jsonв B2 нет (см. П0).
-
Доказательства владельца (
owner-evidence-patch.py, применяется при печати): при отказе до очистки пишетсяowner-failure.json— кодdemand,ExitCode/OOMKilled/Errorконтейнера, последние 16 КиБ журнала приложения (отбрасываются, если в них пароль БД). В каждом heartbeat —usage/anon/fileпамяти контейнера приложения иpids. Обе вставки обёрнуты так, что не могут сорвать прогон.
Число часов Ч зависит от времени операции после исправления: при цикле 45 с — около 4–5 ч (упор в 8 слотов), при 60–90 с — 6–9 ч, при 110–150 с — 10–14 ч. Остановка на любом этапе: штатный recover/retire, квитанции сохраняются, исход не перекрашивается.
7. Что этим планом не проверяется
- Публичный MCP-путь CI2713 (
mm_server_poll_plan→ одобрение →mm_change_apply→mm_operation_get) на VPS. B1 проверяет cold143 через собранную fixture, а не через внешний SDK. Если владелец хочет закрыть и историческийunknownCI2713, нужен отдельный необязательный шаг с адаптированнымrun-ci2713-poll-linux.py(вход по ключу, сборка HEAD). Причина историческогоunknownэтим не устанавливается. - RAM-1: вся установка ≤2 ГиБ под совместной нагрузкой (отложено владельцем).
- 14 суток календарного удержания (
fourteenDaysElapsedAccepted=falseостаётся). - Конкурентные сборщики и бюджет задержки, оставшиеся crash/unknown переходы и границы политики удержания из списка POLL [ист.: mcp-evidence-statistics-20261101.md, POLL]. Прогон B закрывает только два пункта этапа 3.
- Реальный RouterOS: оба профиля используют синтетический стаб.