owner: gmikcon status: active last_reviewed: 2026-10-25 review_interval: 90d confidence: high
Internal proxy VPS that receives traffic from the external VPS through OpenVPN and forwards it to internal services.
internal-proxy-vps.ovpn_reserv.hp-proliant-dl380-g6.5.4.0-216-generic.nginx/1.18.0.33 (server name internal-proxy).192.168.1.183 — static via netplan inside the guest (/etc/netplan/01-netcfg.yaml, dhcp4: no; was 192.168.1.226 via DHCP until the 2026-10-16/17 blackout — see the section below).192.168.105.181/24 (interface enp7s0, DHCP from the libvirt network).gnexus.space traffic (inbound via DNAT on the ovpn VM, 192.168.1.150 — the OpenVPN tunnel client is the ovpn VM, not this host).nginx.servicenavi.service (Navi server, agent system API)ssh.serviceopenvpn@client.service — masked/inactive since 2026-10-11 (tunnel moved to the ovpn VM; see 2026-10-25 note below).navi.service (systemd, Type=simple, user ubuntu, enabled)./etc/systemd/system/navi.service./home/ubuntu/navi-1./home/ubuntu/navi-1/.venv/bin/navi-server.8099 (uvicorn, 0.0.0.0:8099).http://127.0.0.1:8099/health./home/ubuntu/navi-1/.env (contains OLLAMA_API_KEY, OLLAMA_HOST=https://ollama.com, embedding settings; no raw key values documented here).ollama_backends.json file exists in the working directory.navi-postgres, image pgvector/pgvector:pg16 (Postgres 16 + pgvector).deploy, file /home/ubuntu/navi-1/deploy/docker-compose.yml, service postgres (container_name: navi-postgres, image: pgvector/pgvector:pg16).container_removed 11:25:00Z → container_added 11:25:20Z, same image pgvector/pgvector:pg16); healthy after restart.pgvector/pgvector:pg16, id 9b05db12a354) on this host — no legacy plain postgres image present; the pgvector image was already in use before the 2026-10-08 recreate.ubuntu (root login denied), docker requires sudo (password in gnexus-creds, secret internal-proxy-vps-creds).Power key pressed + штатная Power-Off последовательность; last -x: shutdown system down Thu Oct 8 11:24), boot 11:24:50 UTC. Краш/OOM/питание/unattended-upgrades исключены./home/gmikcon/Projects/navi-1/... (Errno 2), navi_ui — на localhost:8001 (не слушается).container_removed 17:59:48Z → container_added 18:00:38Z для navi-postgres (pgvector/pgvector:pg16). Триаж по SSH (2026-10-11 ~18:02 UTC): контейнер НЕ пересоздавался — docker inspect: StartedAt=2026-10-08T11:25:01Z, Created=2026-09-09T17:42:17Z, RestartCount=0, health=healthy непрерывно; docker ps показывал "Up 3 days (healthy)".stream copy error: file already closed), агент GHard (hard-monitor.service, MainPID 521, без рестарта с 2026-10-08 11:24:48) пере-детектировал контейнер → пара removed/added. Реального recreate не было./var/lib/nginx/proxy/1/49/0000012491 ровно 1 GiB (Modify 18:00:45) + второй deleted-файл 21 MB; расхождение du↔df ~1.5G. Место освободится при закрытии fd (завершение запроса или nginx reload/restart) — вмешательство не требовалось. Долгосрочно диск поджимают /var/log journal (760M) и access.log (175M, краулер-трафик GPTBot/meta-externalagent на git.gnexus.space с 192.168.1.150).[crit] SSL bad key share и [alert] could not allocate new session in SSL shared cache с клиента 192.168.1.150; SSL session cache периодически переполняется.f669b251 disk_high / 91.8% (порог 90) ~16:19 UTC; за час 76.8%→91.8% (+1.08 GB) на фоне входящего трафика ~35 MB/s./var/lib/nginx/proxy/9/01/0000020019 (deleted) ровно 1 GiB (fd 39) — дефолтный proxy_max_temp_file_size=1024M; du↔df gap ~1.0 GB. Точная копия инцидента 2026-10-11 (там PID 748).jellyfin.gnexus.space; апстрим ~35 MB/s против потребления клиента ~3.5 MB/s → nginx буферизует разницу на диск; в 16:18:54 temp упёрся в кап 1 GiB и перестал расти (nginx троттлит апстрим).jellyfin.gnexus.space не имеет proxy_buffering off. Без директивы 6 из 17 enabled-сайтов: jellyfin, cloud, git, gnexus.space, transmission, bugtrail (у остальных 11 off есть). Медиа-стрим через буферизующий vhost = гарантированный 1 GiB temp на каждый крупный ответ.workspace/incident_internalproxy_disk_2026-10-16.md (navi rei workspace).369dbf93 disk_recovered / 77.0% <85): fd закрыт при завершении стрима — 17:24→17:30 UTC −1.07 GB → 77.0% (плато 91.9–92.0% держалось 16:24–17:24 при трафике ~2 MB/s). SSH-верификация 17:35 UTC (read-only): df 5.2G/7.1G = 78% (1.6G free), deleted-but-open fd у nginx отсутствует (lsof пуст), /var/lib/nginx/proxy 4.0M. Прогноз триажа («место вернётся при закрытии fd») выполнен точно; вмешательство не потребовалось, владельцу не сообщал (восстановление штатное). Открытые пункты без изменений: очистка ~2.1–2.3 GB и proxy_buffering off в jellyfin/cloud/transmission — ждут решения владельца.disk_high #851 / 92.0% (critical) 17:49:37 UTC → disk_recovered #852 77.1% (<85) 18:31:09 UTC (event f18217dc). Второй эпизод за 2 часа после первого (16:19→17:30 UTC).proxy_buffering off); вмешательство не требовалось./ 77.1% (5.55/7.6 GB), /home 5.7%, CPU 1.5%, RAM 0.73/4.1 GB, swap ~0; services 8/8 up; новых событий после #852 нет.proxy_buffering off, каждый крупный стрим/ответ = +1 GiB temp на корневом разделе 7.6 GB. Корневое решение и очистка ~2.1–2.3 GB по-прежнему ждут решения владельца. Отчёт: workspace/incident_internalproxy_disk_2026-10-16.md (раздел «Второй эпизод»).192.168.1.183 (старый .226 освободился); .226 более не отвечает. Обнаружено владельцем утром 2026-10-17..183 2026-10-17: gnsynapse docker-compose.override.yml (extra_hosts: auth.gnexus.space:192.168.1.183, контейнеры пересозданы). Собственные nginx-конфиги хоста на свой адрес не ссылаются.ovpn_reserv оставлен на .183. Временные апстримы nginx (synapse → .29:8013, tgclientmcp → .24:8710) откатлены на .172:8013 / .171:8710, nginx reload..183 закреплён netplan-статикой внутри гостя: /etc/netplan/01-netcfg.yaml (dhcp4: no, addresses 192.168.1.183/24, gateway4 192.168.1.1, DNS 192.168.1.1; файл датирован 11:44 — статика была настроена утром при восстановлении). Проверено rei по SSH: netplan get соответствует, netplan generate OK, cloud-init в VM не установлен (перетирать нечему), enp7s0 (192.168.105.181/24) остаётся на DHCP libvirt-сети. Схема адресации теперь единая: gnsynapse .172, tgclient_mcp .171, ovpn_reserv .183 — статика внутри гостя, pfSense резервации не выдаёт.1ed8c8fd (Synapse reaction) disk_high / 90.3% (порог 90), 2026-10-21 ~16:52 UTC. Реакция rei: триаж + очистка по прямому указанию задачи («при необходимости освободи дисковое пространство») — отложенный пункт очистки из 2026-10-16 реализован./etc/systemd/journald.conf.d/rei-disk-cap.conf — [Journal] SystemMaxUse=200M, MaxRetentionSec=14day; systemd-journald перезапущен, active.proxy_buffering off для jellyfin/cloud/transmission/git/gnexus.space/bugtrail по-прежнему не применено — решение владельца.minecraft.gnexus.space:25565 работает end-to-end. MC status ping через домен и через 51.83.131.93: MOTD A Minecraft Server, версия 26.2 (proto 776), 0/40 игроков; TCP-коннект с 3 внешних нод check-host.net (BR/MD/RU) — OK./etc/nginx/stream-conf.d/minecraft.gnexus.space.conf: listen 25565 → 192.168.1.160:25565)./etc/nginx/sites-available/minecraft.gnexus.space (HTTP-модуль, апстрим .218) лежит мёртвым грузом в sites-available и в sites-enabled отсутствует — не включён, на трафик не влияет.minecraft-tcp-forward.service (socat listen 25565 → 192.168.68.218:25565 — второй NIC хоста mine в libvirt-сети); трафика не получает (PREROUTING DNAT перехватывает первым), безвреден. Отключение — решение владельца.228044325565 (nginx stream → 192.168.1.160:25565, Minecraft)8099 (navi.service)The nginx proxy handles the gnexus.space domain family.
Enabled nginx sites (verified 2026-10-05):
auth.gnexus.spacebugtrail.gnexus.spacecloud.gnexus.spacecreds.gnexus.spacefiles.gnexus.spacefuckjira.gnexus.spacegit.gnexus.spacegnexus.spacehpanel.gnexus.spacejellyfin.gnexus.spacenavi.gnexus.spacesynapse.gnexus.spacetasks.gnexus.spacetgclientmcp.gnexus.spacetranscribe-demo.gnexus.spacetransmission.gnexus.spacevmk-marginator.gnexus.spaceAvailable nginx site files that are not currently confirmed as enabled:
anicusi.gnexus.spacecats.gnexus.spacefdroid.gnexus.spaceferumina.gnexus.spacelytvak.gnexus.spacemail.gnexus.spaceminecraft.gnexus.space (stale HTTP-module file, dead upstream .218; the live Minecraft mapping is the stream config — see 2026-10-25 note)ollama.gnexus.spacesups.gnexus.spacetopics.gnexus.space| Domain | Upstream |
|---|---|
auth.gnexus.space |
http://192.168.1.167 |
bugtrail.gnexus.space |
http://192.168.1.177:80 |
cloud.gnexus.space |
http://192.168.1.152 |
creds.gnexus.space |
http://192.168.1.173 |
files.gnexus.space |
http://192.168.1.157 |
fuckjira.gnexus.space |
http://192.168.1.175:8080 |
git.gnexus.space |
http://192.168.1.156 |
gnexus.space |
http://192.168.1.151 |
hpanel.gnexus.space |
http://192.168.1.176:8000 |
jellyfin.gnexus.space |
http://192.168.1.153:8096 |
navi.gnexus.space |
http://192.168.1.168:8000 |
synapse.gnexus.space |
http://192.168.1.172:8013 |
tasks.gnexus.space |
http://192.168.1.179:8135 |
tgclientmcp.gnexus.space |
http://192.168.1.171:8710 |
transcribe-demo.gnexus.space |
http://192.168.1.75:5173 |
transmission.gnexus.space |
http://192.168.1.154:3000 |
vmk-marginator.gnexus.space |
http://192.168.1.178:8080 |
Stream-level TCP mappings (nginx stream module, /etc/nginx/stream-conf.d/):
| Domain | Upstream |
|---|---|
minecraft.gnexus.space |
tcp://192.168.1.160:25565 (verified live 2026-10-25) |
Proxying is mixed by hostname, path, and ports. SSH forwarding to the internal alex VPS on a custom port is believed to exist and still needs confirmation from nginx or firewall configuration.
bugtrail.gnexus.space issued 2026-09-18 (nginx authenticator, http-01). Files: /etc/letsencrypt/live/bugtrail.gnexus.space/fullchain.pem and privkey.pem, valid until 2026-12-17, CN=bugtrail.gnexus.space, issuer Let's Encrypt (YR2).tasks.gnexus.space issued 2026-09-21 (nginx authenticator, http-01). Files: /etc/letsencrypt/live/tasks.gnexus.space/fullchain.pem and privkey.pem, valid until 2026-12-20. Site tasks.gnexus.space proxies to http://192.168.1.179:8135 (gntodo stack): :80 block (no redirect) + :443 block with the dedicated certificate, client_max_body_size 12m, proxy_set_header Host $host (required — /mcp Host check), X-Forwarded-Proto https, and proxy_buffering off + proxy_read_timeout 300s on /api/ and /mcp/ (SSE). Site created by the Proxy navi instance, :443 block completed by rei (2026-09-21).tgclientmcp.gnexus.space issued 2026-10-05 (nginx authenticator, http-01, by navi rei). Files: /etc/letsencrypt/live/tgclientmcp.gnexus.space/fullchain.pem and privkey.pem, valid until 2027-01-03. Site tgclientmcp.gnexus.space proxies to http://192.168.1.171:8710 (tgclient-mcp): :80 block (no redirect) + :443 block with the dedicated certificate, client_max_body_size 32m (media 20 MB + base64 overhead), proxy_set_header Host $host, X-Forwarded-Proto https, and proxy_buffering off + proxy_read_timeout 300s on /mcp-protocol/ (MCP streamable HTTP). Deploy note: first certbot run glued the :443 directives into the :80 server block — the site was rewritten into two clean blocks (tasks.gnexus.space style).gnexus.space multi-SAN certificate (10 SANs, unchanged by this work).No raw credentials are documented here.