diff --git a/10-systems/hosts/nextcloud.md b/10-systems/hosts/nextcloud.md index 4a12393..6011c39 100644 --- a/10-systems/hosts/nextcloud.md +++ b/10-systems/hosts/nextcloud.md @@ -8,7 +8,6 @@ --- - # Nextcloud VM Nextcloud file cloud VM, upstream for `cloud.gnexus.space`. @@ -169,7 +168,7 @@ - Поправка vmstat (rei, 17:36 UTC): колонки vmstat 12168/20991 (замеры 22:17/22:50 11 окт), 13548/27212 (13:44 12 окт) и 24736 (~17:30 12 окт) ошибочно принимались за si/so («активный свопинг») — на деле это in/cs (interrupts/context switches). Все замеры с явной шапкой vmstat показывают si=0/so=0: активного свопинга на bserv в серии НЕ зафиксировано; корректная картина — хроническая нехватка памяти (swap ~98–100%) без активного свопинга в точках замера. - Гигиена отчёта: пара #807/#808 задокументирована в отчёте дважды (ep148 и ep153, разные сессии) — нумерация эпизодов между параллельными сессиями не консистентна, ориентир — ID событий панели. -## Incident series 2026-10-19 08:22–08:36 UTC (6 эпизодов — флап публичного пути к внешнему VPS; НЕ рецидив bserv) +## Incident series 2026-10-19 08:22–09:00 UTC (14 эпизодов — флап публичного пути к внешнему VPS; НЕ рецидив bserv) Повод: Synapse-событие service_recovered (event 21148f3a, панель #916, 08:29:08 UTC) в реакционную сессию rei. В ходе обработки по events_recent найдена серия: 6 пар down/recovered за 14 мин — 08:22:41–08:23:11 (30.4 с, #909/#910), 08:24:49–08:25:55 (65.8 с, #911/#912), 08:27:00–08:27:31 (30.4 с, #913/#914), 08:28:37–08:29:07 (30.7 с, #915/#916), 08:31:47–08:32:18 (30.4 с, #917/#918), 08:36:03–08:36:37 (34.4 с, #919/#920). Все ConnectTimeout ~30 с, все self-recovered; интервалы 1.6–2.2 мин — все <4 мин (intervention-критерий серии 11–12 окт). @@ -182,6 +181,23 @@ - Прямой путь с хоста rei к internal-proxy (192.168.1.226) не работает — адрес устарел: после блэкаута 16–17 окт VM ovpn_reserv переехала на 192.168.1.183 (см. internal-proxy-vps.md). Проба с --resolve на .226 — 6/6 fail (нет маршрута), тест невалиден, отброшен. - Внешний VPS (51.83.131.93) по SSH в этой сессии не проверялся (нет подтверждённого доступа в доке) — причина флапа на стороне VPS/маршрута не установлена. Кандидаты: conntrack/NAT-таблицы, SYN-flood/лимиты, сетевые проблемы OVH, hairpin-NAT. Требуется SSH-триаж владельцем или инстансом с доступом. -Итог серии: 6 эпизодов за ~14 мин, все self-recovered, стек nextcloud не пострадал. Вмешательства не потребовалось; notify не отправлялся (транзиентные self-recovered эпизоды, политика no-noise; серия оборвалась к 08:36:37). Задача владельцу на триаж внешнего VPS создана в gntodo (id 506, проект GHard Monitor). Детали: workspace rei `incident_nextcloud_2026-10-19_publicpath.md`. +Итог серии: 6 эпизодов за ~14 мин, все self-recovered, стек nextcloud не пострадал. Вмешательства не потребовалось; notify не отправлялся (транзиентные self-recovered эпизоды, политика no-noise; на момент триажа серия выглядела оборвавшейся к 08:36:37 — продолжение ниже). Задача владельцу на триаж внешнего VPS создана в gntodo (id 506, проект GHard Monitor). Детали: workspace rei `incident_nextcloud_2026-10-19_publicpath.md`. + +### Продолжение серии (реакционная сессия rei, 08:58–09:00 UTC) + +Повод: Synapse-событие service_recovered (event 328396a3, панель #934, 08:56:17 UTC) в реакционную сессию rei. Серия НЕ оборвалась к 08:36:37 — по events_recent найдено ещё 8 эпизодов (#921–#938): + +| # | Окно (UTC) | Длит. | События | +| --- | --- | --- | --- | +| 7 | 08:38:13–08:41:05 | 171.8 с | #921/#922 | +| 8 | 08:42:11–08:42:41 | 30.4 с | #923/#924 | +| 9 | 08:45:19–08:46:24 | 65.9 с | #927/#928 | +| 10 | 08:48:31–08:49:01 | 30.4 с | #929/#930 | +| 11 | 08:51:09–08:54:36 | 206.9 с | #931/#932 | +| 12 | 08:55:12–08:56:17 | 65.7 с | #933/#934 | +| 13 | 08:58:25–08:58:55 | 30.4 с | #935/#936 | +| 14 | 08:59:31–09:00:01 | 30.4 с | #937/#938 | + +Итог на 09:00 UTC: 14 эпизодов за ~38 мин (08:22:41–09:00:01), все ConnectTimeout, все self-recovered; длительности 30.4–206.9 с (максимумы серии: 171.8 с эп.7, 206.9 с эп.11); интервалы 0.6–2.6 мин — все <4 мин. Механизм прежний (флап публичного пути к VPS 51.83.131.93): верификация 08:59–09:00 UTC — публичные пробы `https://cloud.gnexus.space/status.php` 6/10 таймаутов (HTTP 000, TCP connect не проходит; успешные 200 за 0.21–0.23 с), raw TCP к 51.83.131.93:443 4/10 FAIL, контроль 1.1.1.1:443 5/5 OK (аплинк чист), LAN-проба VM 3/3 200 за 0.036–0.042 с; VM #34 online (CPU 0–1%, RAM 2.4/31.3 GiB, uptime непрерывный ~1 д 22 ч, диски / 79% / /home 65%), server_history #34 за 3 ч без аномалий, panel 8/8 сервисов up (nextcloud [up] 149.6 ms, v31.0.14.1). Стек и VM не пострадали; вмешательства нет. notify по серии не отправлялся (политика no-noise); recall +30 мин с критериями эскалации (интервалы <4 мин → notify warning; VM down / SSH недоступен / новый OOM → intervention). Задача gntodo 506 (триаж VPS) актуальна. No raw credentials are documented here.