From 13870d6399aa80df30734ad07cfa74cc1d9333dc Mon Sep 17 00:00:00 2001 From: karpenok Date: Thu, 12 Nov 2026 16:57:19 +0700 Subject: [PATCH] =?UTF-8?q?fix(core-net):=20=D0=BD=D0=B5=20=D0=BB=D0=BE?= =?UTF-8?q?=D0=BC=D0=B0=D1=82=D1=8C=20Terraform=20=D0=B8=D0=B7-=D0=B7?= =?UTF-8?q?=D0=B0=20=D0=B7=D0=B0=D0=BF=D1=80=D0=B5=D1=82=D0=B0=20=D0=BD?= =?UTF-8?q?=D0=B0=20/dev/net/tun?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit Токен Proxmox не может пробросить устройство. Остальной стек панели ставится до роли NetBird, а команда для root@pam описана в bootstrap. Co-authored-by: Cursor --- BOOTSTRAP.md | 3 ++- ansible/playbooks/core-net.yml | 4 ++-- ansible/roles/netbird_client/tasks/main.yml | 2 +- terraform/netcore/core-net.tf | 26 --------------------- 4 files changed, 5 insertions(+), 30 deletions(-) diff --git a/BOOTSTRAP.md b/BOOTSTRAP.md index 33ec9eb..c3f46c9 100644 --- a/BOOTSTRAP.md +++ b/BOOTSTRAP.md @@ -33,7 +33,7 @@ Terraform в этом репозитории описывает только у |---|---|---|---|---| | **CT 109** | `pve` | `192.168.1.217` | `gitea` | Gitea (`:3000`), Postgres (`:5432`), Gitea Actions Runner (`dind`) | | **CT 901** | `netcore` | `192.168.1.102` | `core-secrets` | Infisical (`:8080`), Postgres, Redis, Vaultwarden (`:8000`) | -| **CT 902** | `netcore` | `192.168.1.104` | `core-net` | Traefik (`:80`, `:443`); Remnawave Panel (`127.0.0.1:3000`) + Subscription (`127.0.0.1:3010`); клиент NetBird (`/dev/net/tun`); Authentik (`127.0.0.1:9000`) — опционально, по умолчанию выкл. | +| **CT 902** | `netcore` | `192.168.1.104` | `core-net` | Traefik (`:80`, `:443`); Remnawave Panel (`127.0.0.1:3000`) + Subscription (`127.0.0.1:3010`); клиент NetBird (нужен `/dev/net/tun`); Authentik (`127.0.0.1:9000`) — опционально, по умолчанию выкл. | | **CT 903** | `netcore` | `192.168.1.108` | `core-mon` | Prometheus (`:9090`), VictoriaMetrics (`:8428`), Alertmanager (`:9093`), Grafana (`:3000`), Ntfy (`:80`) | ### 1.3. Внешние узлы @@ -164,6 +164,7 @@ API Endpoint (внутренний LAN): `http://192.168.1.102:8080/api` 2. Первый прогон: как у rus-central — `ansible_password` из `/VPS` → `PASS_GER_NOD_02`; роль `host` кладёт ключ и отключает пароль. Роль `remnanode` держит A-запись `yali.gunis.top` в Cloudflare, выпускает LE по **HTTP-01** (порт 80, без TXT `_acme-challenge` в зоне), поднимает remnanode + nginx SelfSteal. 3. В панели нода должна стать зелёной; браузер на `https://yali.gunis.top` — маскировочный сайт. 4. Клиент NetBird ходит на `https://central.gunihome.ru` ключом `remnawave-peers`. Пока peer панели не виден, `NODE_PORT` 2222 остаётся открыт для WAN egress панели. Когда peer `core-net` есть, 2222 разрешён только с его NetBird IP. Публичный `:9100` закрыт: метрики ноды уходят vmagent-ом в VictoriaMetrics на `192.168.1.108:8428` через маршрут `homelab-lan`. В Prometheus эта нода больше не входит. +5. На `core-net` (unprivileged LXC) `/dev/net/tun` сам не появляется. Токен Terraform получает 403: проброс устройства разрешён только `root@pam`. На netcore: `pct set 902 -dev0 /dev/net/tun,mode=0666 && pct reboot 902`, затем ещё раз `ansible-core-net`. До этого панель остаётся на публичном адресе ноды. ### Шаг 5. NetBird (rus-central) и связка с OPNsense 1. Запустить пайплайн **`ansible-rus-central`** в Gitea Actions. Ручной запуск сверяет машину целиком. Push в `roles/rus-central/netbird` ставит только NetBird. diff --git a/ansible/playbooks/core-net.yml b/ansible/playbooks/core-net.yml index 87ea6b7..a5741e3 100644 --- a/ansible/playbooks/core-net.yml +++ b/ansible/playbooks/core-net.yml @@ -5,11 +5,11 @@ roles: - role: core-net/traefik tags: [traefik] - - role: core-net/netbird - tags: [netbird] - role: core-net/remnawave tags: [remnawave] - role: core-net/authentik tags: [authentik] - role: core-net/vmagent tags: [vmagent] + - role: core-net/netbird + tags: [netbird] diff --git a/ansible/roles/netbird_client/tasks/main.yml b/ansible/roles/netbird_client/tasks/main.yml index bd58152..2621c0d 100644 --- a/ansible/roles/netbird_client/tasks/main.yml +++ b/ansible/roles/netbird_client/tasks/main.yml @@ -12,7 +12,7 @@ - name: Нет TUN для NetBird ansible.builtin.fail: - msg: "Нет /dev/net/tun. В LXC для NetBird нужны nesting и устройство /dev/net/tun." + msg: "Нет /dev/net/tun. На core-net это unprivileged LXC: API-токен Proxmox не может пробросить устройство (403, только root@pam). На хосте: pct set 902 -dev0 /dev/net/tun,mode=0666 && pct reboot 902. После перезапуска повторите ansible-core-net." when: not netbird_tun.stat.exists - name: Поставить зависимости NetBird diff --git a/terraform/netcore/core-net.tf b/terraform/netcore/core-net.tf index 86fb40e..a40c732 100644 --- a/terraform/netcore/core-net.tf +++ b/terraform/netcore/core-net.tf @@ -48,30 +48,4 @@ resource "proxmox_virtual_environment_container" "core_net" { features { nesting = true } - - # NetBird на панели поднимает WireGuard. В unprivileged LXC для этого нужен /dev/net/tun. - device_passthrough { - path = "/dev/net/tun" - mode = "0666" - } -} - -# Устройство появляется внутри CT после перезапуска. Срабатывает один раз. -resource "terraform_data" "core_net_tun_reboot" { - depends_on = [proxmox_virtual_environment_container.core_net] - triggers_replace = ["dev-net-tun"] - - provisioner "local-exec" { - command = <<-EOT - set -eu - if [ -z "$${PROXMOX_API_TOKEN:-}" ] || [ -z "$${PROXMOX_ENDPOINT:-}" ]; then - echo "Нет PROXMOX_API_TOKEN или PROXMOX_ENDPOINT. Перезапустите CT 902, чтобы появился /dev/net/tun." - exit 1 - fi - endpoint="$${PROXMOX_ENDPOINT%/}" - curl -fsSk -X POST \ - -H "Authorization: PVEAPIToken=$${PROXMOX_API_TOKEN}" \ - "$endpoint/api2/json/nodes/${var.proxmox_node}/lxc/902/status/reboot" - EOT - } }