owner: gmikcon status: active last_reviewed: "2026-10-12" review_interval: 90d confidence: high
Nextcloud file cloud VM, upstream for cloud.gnexus.space.
nextcloud.nextcloud (libvirt domain on hypervisor hp-proliant-dl380-g6, bserv 192.168.1.130).192.168.1.152./mnt/main/vm_main/nextcloud.cloud.gnexus.space (TLS terminates on internal-proxy-vps, upstream http://192.168.1.152)./home/ubuntu/nextcloud (DocumentRoot vhost nc.lvs.conf), данные /home/ubuntu/nextcloud/data.*/3 * * * * php -f /home/ubuntu/nextcloud/cron.php.ubuntu на 192.168.1.152, пароль как у гипервизора (gnexus-creds, секрет bserv@192.168.1.130); sudo через sudo -S. occ запускать от www-data (sudo -u www-data php occ ...).nextcloud — https://cloud.gnexus.space/status.php (LAN-URL без Host-заголовка даёт 400 trusted domains; см. 10-systems/services/hard-panel.md).Повод: жалоба владельца на медленный Nextcloud. Диагностика: ресурсы VM в норме (load 0.04, RAM 1.1/31 Gi), узкие места — конфигурация стека.
Пункт 1 — MySQL tuning:
innodb_buffer_pool_size = дефолт 128 MB при БД ~1 GB (451k записей oc_filecache) — главный тормоз листингов/WebDAV./etc/mysql/mysql.conf.d/zz-nextcloud.cnf — innodb_buffer_pool_size = 4G, innodb_flush_log_at_trx_commit = 2 (персональное облако: потеря последней секунды транзакций при падении ОС приемлема). Рестарт mysql.SELECT @@innodb_buffer_pool_size = 4294967296 (4 GiB), mysql active, /status.php 200. RSS mysqld растёт лениво по мере прогрева — норма.Пункт 2 — APCu:
apt-get install php8.1-apcu (+ apc.enable_cli=1 в /etc/php/8.1/mods-available/apcu-nc-cli.ini для cron/occ), occ config:system:set memcache.local --value "\OC\Memcache\APCu" (от www-data), рестарт apache2. Redis остался на distributed+locking.php -m → apcu, проба в Apache → APCU:yes, лог nextcloud.log без ошибок APCu.Замеры до/после (localhost VM, warm):
| Проба | До | После |
|---|---|---|
| /login (полный PHP-рендер) | ~0.15 s | ~0.12 s |
| /status.php | ~0.06 s | ~0.04 s |
| LAN через прокси /status.php | 0.26 s, выбросы до 1.4 s | 0.24 s стабильно |
Основной эффект ожидается на DB-тяжёлых операциях (листинги файлов, WebDAV, поиск) — buffer pool теперь вмещает всю БД.
Бэкапы: /root/nc-config.php.bak-preopt-20261011 (config.php до правок). Откат: удалить zz-nextcloud.cnf + рестарт mysql; occ config:system:set memcache.local --value "\OC\Memcache\Redis" + рестарт apache2.
Не сделано (ждёт решения владельца): отключение тяжёлых приложений (memories/recognize/maps/previewgenerator/richdocuments/drawio/forms — список уточняется), переезд на php-fpm + mpm_event (модули в наличии, php8.1-fpm не установлен).
Маршрут: 27.1.6.2 → 28.0.14 → 29.0.16 → 30.0.17 → 31.0.14 — по одному мейджору за шаг (политика Nextcloud), каждый через updater.phar --no-interaction + гейт после шага: /status.php 200, maintenance off, needsDbUpgrade false, 0 ошибок в nextcloud.log, рестарт apache2 (ранбук opcache — см. Incident 10:06).
/root/nc-backup-preupgrade-20261011 — дамп БД 144M (gzip -t OK), tar apps+data 7.5G, config/, app-list.json. Итого ~7.7G.OCA\Recognize\Service\Logger::emergency несовместим с Psr\Log\LoggerInterface в NC 31 (старое приложение на новом коде). Лечение: maintenance on, occ app:disable recognize memories maps previewgenerator, ручной occ upgrade → «Update successful», integrity OK, рестарт apache2, maintenance off.occ app:update --all из App Store; все четыре отключённых обновились и включены: recognize 9.0.9, memories 7.8.2, maps 1.6.0, previewgenerator 5.14.0. Обновлены также text, twofactor_backupcodes, updatenotification, user_status, viewer, epubviewer, quota_warning, side_menu, tasks.https://cloud.gnexus.space/status.php 200.nextcloud-30.0.17.2-1791713615 в data/updater-ocj1jaf8egog/backups/ (можно удалить после периода наблюдения), предбэкапы в /root (7.7G).updater.phar --no-interaction (detached, PPID 1) — обновление Nextcloud 29.0.17 → 30.0.17. Перед этим apache2 рестартовали в 09:42, 09:52, 10:03 (подготовка к обновлению, не сеанс оптимизации rei).occ upgrade) под maintenance mode. hard-panel увидел 503 на /status.php — ожидаемое поведение: Nextcloud в maintenance mode отвечает 503 на все эндпоинты. Стек (apache/mysql/redis) был жив весь апгрейд; вмешательства не требовалось.Update successful), maintenance снят, needsDbUpgrade=false.Downgrading is not supported (from 30.0.17.2 to 29.0.16.1). Причина: apache последний раз рестартовали в 10:03:41 — ДО завершения обновления; opcache с validate_timestamps=0 держал в памяти старый код 29.0.16.1, который падал на уже мигрированной БД 30.0.17.2.USER_AGENT_SAFARI_MOBILE undefined) была только внутри окна апгрейда и не повторяется.Ранбук (обязательно): после КАЖДОГО завершения occ upgrade на этой VM — немедленный рестарт apache2: opcache с validate_timestamps=0 не подхватывает новый код сам, старый код даёт 500 на новой БД.
Отчёт: workspace rei incident_nextcloud_2026-10-11.md.
Серия транзиентных недоступностей cloud.gnexus.space для монитора: hard-panel 26 раз за сутки зафиксировал сбой пробы /status.php (ConnectTimeout ~30 с, дважды ReadTimeout, один эпизод 66 с), каждый раз с самовосстановлением через ~30–66 с. Механизм во всех эпизодах один: проба монитора (192.168.1.150 → internal-proxy .226 → VM nextcloud .152, обе VM на bserv) не проходит TCP-путь на фоне хронического давления памяти на гипервизоре bserv (RAM ~97%, swap 100%, available 1.65–2.3 GB). Nextcloud не при чём: стек внутри VM здоров во всех эпизодах (apache обслуживает пользовательский трафик, cron /3 штатно, логи чисты, uptime непрерывен, пакеты агента без пропусков). Kernel-журнал bserv чист (OOM-событий с 6 окт нет, hung-task/stall нет). Поправка к ранней гипотезе: 3-минутного cron на гипервизоре нет (crontab bserv/root пусты, /etc/cron.d — только e2scrub_all) — триггер нагрузки внутри гостя (cron.php www-data /3 с тяжёлыми recognize/previewgenerator); всплески аллокаций в VM загоняют хост в reclaim/compaction-торможение.
| # | Окно (UTC) | Тип | Длит. | Интервал | События |
|---|---|---|---|---|---|
| 1 | 17:28:41–17:29:12 | ConnectTimeout | 30.4 с | — | — |
| 2 | 19:35:35–19:36:06 | ConnectTimeout | 30.4 с | ~2 ч 07 м | #431/#432 |
| 3 | 19:52:44–19:53:14 | ConnectTimeout | 30.4 с | ~17.3 м | — |
| 4 | 20:10:14–20:10:45 | ConnectTimeout | 30.4 с | ~17.5 м | #435/#436 |
| 5 | 20:37:47–20:38:18 | ReadTimeout | 31.2 с | ~27.5 м | #437/#438 |
| 6 | 20:40:57–20:41:27 | ConnectTimeout | 30.4 с | ~3.9 м | #439/#440 |
| 7 | 21:19:56–21:20:26 | ConnectTimeout | 30.4 с | ~39 м | #441/#442 |
| 8 | 21:31:27–21:31:57 | ConnectTimeout | 30.4 с | ~11.5 м | #443/#444 |
| 9 | 22:05:22–22:05:52 | ConnectTimeout | 30.4 с | ~34 м | #445/#446 |
| 10 | 22:15:43–22:16:15 | ConnectTimeout | 30.4 с | ~10.4 м | #447/#448 |
| 11 | 22:17:21–22:17:52 | ReadTimeout | 30.4 с | ~1.6 м | #449/#450 |
| 12 | 22:23:09–22:23:40 | ConnectTimeout | 30.4 с | ~5.8 м | #451/#452 |
| 13 | 22:27:20–22:27:51 | ConnectTimeout | 31.0 с | ~4.2 м | #453/#454 |
| 14 | 22:31:34–22:32:40 | ConnectTimeout | 66.2 с | ~4.2 м | #455/#456 |
| 15 | 22:40:39–22:41:10 | ConnectTimeout | 30.5 с | ~9.1 м | #457/#458 |
| 16 | 22:49:30–22:50:01 | ConnectTimeout | 30.4 с | ~8.9 м | #459/#460 |
| 17 | 23:01:26–23:01:56 | ConnectTimeout | 30.4 с | ~11.9 м | #461/#462 |
| 18 | 23:17:10–23:17:43 | ConnectTimeout | ~33 с | ~15.7 м | #463/#464 |
| 19 | 23:26:04–23:26:34 | ConnectTimeout | 30.4 с | ~8.9 м | #465/#466 |
| 20 | 23:40:54–23:41:25 | ConnectTimeout | 30.4 с | ~14.8 м | #467/#468 |
| 21 | 23:45:11–23:45:42 | ConnectTimeout | 30.4 с | ~4.3 м | #469/#470 |
| 22 | 23:50:59–23:51:32 | ConnectTimeout | 32.6 с | ~5.8 м | #471/#472 |
| 23 | 23:55:19–23:55:50 | ConnectTimeout | 30.6 с | ~4.3 м | #473/#474 |
| 24 | 00:00:01–00:00:34 (12 окт) | ConnectTimeout | ~30 с | ~4.8 м | #475/#476 |
| 25 | 00:04:14–00:04:44 (12 окт) | ConnectTimeout | 30.4 с | ~4.2 м | #477/#478 |
| 26 | 00:06:56–00:07:29 (12 окт) | ConnectTimeout | 32.8 с | ~2.7 м | #479/#480 |
Плотность: эпизоды 1–5 редкие (интервалы 17,5–39 мин), хвост серии плотный — 8 эпизодов за ~44 мин (22:05–22:49), далее интервалы 9–16 мин с отдельными провалами до 4,2–4,3 мин (эпизоды 13–14, 21); после 23:45 интервалы снова нерегулярные (4,3–5,8–4,8 мин). Хвост серии ускоряется: эпизоды 24–26 с интервалами 4.8 → 4.2 → 2.7 мин — 2.7 мин (эпизод 26) минимум серии и первый интервал <4 мин. Длительности стабильны (~30 с), кроме эпизода 14 (66 с — максимум серии).
Сопутствующее: сканер уязвимостей с 192.168.1.226 в 19:32 UTC (~20 проб несуществующих .php) — шум, к серии отношения не имеет; virsh dommemstat balloon-статистика устаревшая (guest agent в VM не обновляет balloon).
https://cloud.gnexus.space/status.php → 200 за 0.26 с (maintenance=false, needsDbUpgrade=false, v31.0.14.1). bserv 00:03:19 (read-only SSH): RAM 117698/120828 MB (~97%), available 1668 MB — минимум серии (тренд за вечер 2.3 → 2.07 → 1.73 → 1.67 GB), swap free 564 KB, load 4.85/5.00/4.66, vmstat si/so=0, kernel-journal с 23:40 — 0 OOM-событий. Топ RSS qemu: 33.5 GB (nextcloud), 16.7 GB (jellyfin), 10.1 GB (mine).http://192.168.1.176:8000/mcp (ключ из .env navi-1, Host override localhost:8000) — обходной путь работает.Standing risk OOM (Incident 2026-10-06) активен и повышен: серия stall'ов возникает раньше срабатывания oom-killer'а на полностью исчерпанном swap; available опустился до ~1.65 GB (минимум серии, тренд вниз за вечер 2.3 → 2.07 → 1.73 → 1.67 → 1.65 GB). Детальный лог всех эпизодов: workspace rei incident_nextcloud_2026-10-11_evening.md.
reason=crashed (libvirt log).cloud.gnexus.space returned 502 from the internal proxy during the outage. Started manually by the owner 2026-10-07 15:06 UTC; service verified 200 after start.machine-qemu\x2d34\x2dnextcloud.scope) — первый OOM-килл VM с 2026-10-06, standing risk реализовался.virsh start nextcloud; systemd Started Virtual Machine qemu-35-nextcloud, pid 888712, Id 35, -m 32768 — конфиг памяти НЕ изменён).No raw credentials are documented here.