diff --git a/10-systems/hosts/nextcloud.md b/10-systems/hosts/nextcloud.md index 6fc2b46..cefb6c6 100644 --- a/10-systems/hosts/nextcloud.md +++ b/10-systems/hosts/nextcloud.md @@ -188,6 +188,15 @@ - Вывод: десятый транзиентный stall гипервизора bserv за день, тот же механизм. Nextcloud не при чём. Десять эпизодов за день (17:28, 19:35, 19:52, 20:10, 20:37, 20:40, 21:19, 21:31, 22:05, 22:15), все ~30 с, все самовосстановились. Давление памяти на bserv хроническое (RAM 97%, swap 100%, available 2.1 GB) и впервые зафиксирован активный свопинг (si/so > 0) — состояние гипервизора ухудшается. Standing risk OOM (Incident 2026-10-06) активен и повышен. - Отчёт: workspace rei `incident_nextcloud_2026-10-11_evening.md` (дополнен эпизодом 10). +## Incident 2026-10-11 22:17 UTC (одиннадцатый эпизод — второй ReadTimeout, интервал рухнул до ~1,6 мин) + +- 22:17:21–22:17:52 UTC: hard-panel одиннадцатый раз за день зафиксировал сбой на /status.php (события #449 down / #450 recovered), на этот раз **ReadTimeout** 30.4 с — второй ReadTimeout серии (после эпизода 5): TCP-соединение установилось, ответ не пришёл за таймаут. +- Интервал от эпизода 10: всего ~1,6 мин (22:15:43 → 22:17:21) — новый минимум серии (прежний 3,9 мин, эпизоды 5→6). Плотность эпизодов в хвосте серии растёт: 22:05 → 22:15 → 22:17. +- Гипервизор bserv (проверка 22:22 UTC, read-only): RAM 117236/120828 MB занято (97.0%), free 476 MB, swap 8191/8191 MB (100%, SwapFree 24 kB), available 2.1 GB, load 5.55/4.83/4.50; vmstat si/so=0 (активного свопинга в момент проверки нет — в отличие от эпизода 10, где впервые зафиксирован si=8450/so=18756 KB/s); journalctl -k за 40 мин пуст — ни OOM, ни hung-task/stall (последний OOM — 6 окт, убит qemu-system-x86, anon-rss 27.9 GB). +- Верификация восстановления (22:18:23 UTC): status.php → 200 (31.0.14.1, maintenance=false, needsDbUpgrade=false), все 8 сервисов hard-panel up (nextcloud 302.9 ms). +- Вывод: одиннадцатый транзиентный stall гипервизора bserv за день, тот же механизм. Nextcloud не при чём. Одиннадцать эпизодов за день (17:28, 19:35, 19:52, 20:10, 20:37, 20:40, 21:19, 21:31, 22:05, 22:15, 22:17), все ~30 с, все самовосстановились. Давление памяти на bserv хроническое (RAM 97%, swap 100%, available 2.1 GB); в эпизоде 10 впервые зафиксирован активный свопинг, интервал 10→11 — новый минимум серии. Состояние гипервизора ухудшается, standing risk OOM (Incident 2026-10-06) активен и повышен. +- Отчёт: workspace rei `incident_nextcloud_2026-10-11_evening.md` (дополнен эпизодом 11). + ## Incident 2026-10-06 (OOM crash) - 2026-10-06 07:53:20 UTC: global OOM on hypervisor bserv — 117 GiB RAM exhausted and 8 GiB swap full. Kernel OOM killer killed the nextcloud qemu process (pid 3965, ~28 GiB RSS, largest allocation on the host).