fix(core-net): не ломать Terraform из-за запрета на /dev/net/tun
Токен Proxmox не может пробросить устройство. Остальной стек панели ставится до роли NetBird, а команда для root@pam описана в bootstrap. Co-authored-by: Cursor <cursoragent@cursor.com>
This commit is contained in:
1 parent
83fde054b4
commit
13870d6399
4 files changed
+5
-30
No files matched your search
+2
-1
@@ -33,7 +33,7 @@ Terraform в этом репозитории описывает только у
|
|||||||
|---|---|---|---|---|
|
|---|---|---|---|---|
|
||||||
| **CT 109** | `pve` | `192.168.1.217` | `gitea` | Gitea (`:3000`), Postgres (`:5432`), Gitea Actions Runner (`dind`) |
|
| **CT 109** | `pve` | `192.168.1.217` | `gitea` | Gitea (`:3000`), Postgres (`:5432`), Gitea Actions Runner (`dind`) |
|
||||||
| **CT 901** | `netcore` | `192.168.1.102` | `core-secrets` | Infisical (`:8080`), Postgres, Redis, Vaultwarden (`:8000`) |
|
| **CT 901** | `netcore` | `192.168.1.102` | `core-secrets` | Infisical (`:8080`), Postgres, Redis, Vaultwarden (`:8000`) |
|
||||||
| **CT 902** | `netcore` | `192.168.1.104` | `core-net` | Traefik (`:80`, `:443`); Remnawave Panel (`127.0.0.1:3000`) + Subscription (`127.0.0.1:3010`); клиент NetBird (`/dev/net/tun`); Authentik (`127.0.0.1:9000`) — опционально, по умолчанию выкл. |
|
| **CT 902** | `netcore` | `192.168.1.104` | `core-net` | Traefik (`:80`, `:443`); Remnawave Panel (`127.0.0.1:3000`) + Subscription (`127.0.0.1:3010`); клиент NetBird (нужен `/dev/net/tun`); Authentik (`127.0.0.1:9000`) — опционально, по умолчанию выкл. |
|
||||||
| **CT 903** | `netcore` | `192.168.1.108` | `core-mon` | Prometheus (`:9090`), VictoriaMetrics (`:8428`), Alertmanager (`:9093`), Grafana (`:3000`), Ntfy (`:80`) |
|
| **CT 903** | `netcore` | `192.168.1.108` | `core-mon` | Prometheus (`:9090`), VictoriaMetrics (`:8428`), Alertmanager (`:9093`), Grafana (`:3000`), Ntfy (`:80`) |
|
||||||
|
|
||||||
### 1.3. Внешние узлы
|
### 1.3. Внешние узлы
|
||||||
@@ -164,6 +164,7 @@ API Endpoint (внутренний LAN): `http://192.168.1.102:8080/api`
|
|||||||
2. Первый прогон: как у rus-central — `ansible_password` из `/VPS` → `PASS_GER_NOD_02`; роль `host` кладёт ключ и отключает пароль. Роль `remnanode` держит A-запись `yali.gunis.top` в Cloudflare, выпускает LE по **HTTP-01** (порт 80, без TXT `_acme-challenge` в зоне), поднимает remnanode + nginx SelfSteal.
|
2. Первый прогон: как у rus-central — `ansible_password` из `/VPS` → `PASS_GER_NOD_02`; роль `host` кладёт ключ и отключает пароль. Роль `remnanode` держит A-запись `yali.gunis.top` в Cloudflare, выпускает LE по **HTTP-01** (порт 80, без TXT `_acme-challenge` в зоне), поднимает remnanode + nginx SelfSteal.
|
||||||
3. В панели нода должна стать зелёной; браузер на `https://yali.gunis.top` — маскировочный сайт.
|
3. В панели нода должна стать зелёной; браузер на `https://yali.gunis.top` — маскировочный сайт.
|
||||||
4. Клиент NetBird ходит на `https://central.gunihome.ru` ключом `remnawave-peers`. Пока peer панели не виден, `NODE_PORT` 2222 остаётся открыт для WAN egress панели. Когда peer `core-net` есть, 2222 разрешён только с его NetBird IP. Публичный `:9100` закрыт: метрики ноды уходят vmagent-ом в VictoriaMetrics на `192.168.1.108:8428` через маршрут `homelab-lan`. В Prometheus эта нода больше не входит.
|
4. Клиент NetBird ходит на `https://central.gunihome.ru` ключом `remnawave-peers`. Пока peer панели не виден, `NODE_PORT` 2222 остаётся открыт для WAN egress панели. Когда peer `core-net` есть, 2222 разрешён только с его NetBird IP. Публичный `:9100` закрыт: метрики ноды уходят vmagent-ом в VictoriaMetrics на `192.168.1.108:8428` через маршрут `homelab-lan`. В Prometheus эта нода больше не входит.
|
||||||
|
5. На `core-net` (unprivileged LXC) `/dev/net/tun` сам не появляется. Токен Terraform получает 403: проброс устройства разрешён только `root@pam`. На netcore: `pct set 902 -dev0 /dev/net/tun,mode=0666 && pct reboot 902`, затем ещё раз `ansible-core-net`. До этого панель остаётся на публичном адресе ноды.
|
||||||
|
|
||||||
### Шаг 5. NetBird (rus-central) и связка с OPNsense
|
### Шаг 5. NetBird (rus-central) и связка с OPNsense
|
||||||
1. Запустить пайплайн **`ansible-rus-central`** в Gitea Actions. Ручной запуск сверяет машину целиком. Push в `roles/rus-central/netbird` ставит только NetBird.
|
1. Запустить пайплайн **`ansible-rus-central`** в Gitea Actions. Ручной запуск сверяет машину целиком. Push в `roles/rus-central/netbird` ставит только NetBird.
|
||||||
|
|||||||
@@ -5,11 +5,11 @@
|
|||||||
roles:
|
roles:
|
||||||
- role: core-net/traefik
|
- role: core-net/traefik
|
||||||
tags: [traefik]
|
tags: [traefik]
|
||||||
- role: core-net/netbird
|
|
||||||
tags: [netbird]
|
|
||||||
- role: core-net/remnawave
|
- role: core-net/remnawave
|
||||||
tags: [remnawave]
|
tags: [remnawave]
|
||||||
- role: core-net/authentik
|
- role: core-net/authentik
|
||||||
tags: [authentik]
|
tags: [authentik]
|
||||||
- role: core-net/vmagent
|
- role: core-net/vmagent
|
||||||
tags: [vmagent]
|
tags: [vmagent]
|
||||||
|
- role: core-net/netbird
|
||||||
|
tags: [netbird]
|
||||||
@@ -12,7 +12,7 @@
|
|||||||
|
|
||||||
- name: Нет TUN для NetBird
|
- name: Нет TUN для NetBird
|
||||||
ansible.builtin.fail:
|
ansible.builtin.fail:
|
||||||
msg: "Нет /dev/net/tun. В LXC для NetBird нужны nesting и устройство /dev/net/tun."
|
msg: "Нет /dev/net/tun. На core-net это unprivileged LXC: API-токен Proxmox не может пробросить устройство (403, только root@pam). На хосте: pct set 902 -dev0 /dev/net/tun,mode=0666 && pct reboot 902. После перезапуска повторите ansible-core-net."
|
||||||
when: not netbird_tun.stat.exists
|
when: not netbird_tun.stat.exists
|
||||||
|
|
||||||
- name: Поставить зависимости NetBird
|
- name: Поставить зависимости NetBird
|
||||||
|
|||||||
@@ -48,30 +48,4 @@ resource "proxmox_virtual_environment_container" "core_net" {
|
|||||||
features {
|
features {
|
||||||
nesting = true
|
nesting = true
|
||||||
}
|
}
|
||||||
|
|
||||||
# NetBird на панели поднимает WireGuard. В unprivileged LXC для этого нужен /dev/net/tun.
|
|
||||||
device_passthrough {
|
|
||||||
path = "/dev/net/tun"
|
|
||||||
mode = "0666"
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
# Устройство появляется внутри CT после перезапуска. Срабатывает один раз.
|
|
||||||
resource "terraform_data" "core_net_tun_reboot" {
|
|
||||||
depends_on = [proxmox_virtual_environment_container.core_net]
|
|
||||||
triggers_replace = ["dev-net-tun"]
|
|
||||||
|
|
||||||
provisioner "local-exec" {
|
|
||||||
command = <<-EOT
|
|
||||||
set -eu
|
|
||||||
if [ -z "$${PROXMOX_API_TOKEN:-}" ] || [ -z "$${PROXMOX_ENDPOINT:-}" ]; then
|
|
||||||
echo "Нет PROXMOX_API_TOKEN или PROXMOX_ENDPOINT. Перезапустите CT 902, чтобы появился /dev/net/tun."
|
|
||||||
exit 1
|
|
||||||
fi
|
|
||||||
endpoint="$${PROXMOX_ENDPOINT%/}"
|
|
||||||
curl -fsSk -X POST \
|
|
||||||
-H "Authorization: PVEAPIToken=$${PROXMOX_API_TOKEN}" \
|
|
||||||
"$endpoint/api2/json/nodes/${var.proxmox_node}/lxc/902/status/reboot"
|
|
||||||
EOT
|
|
||||||
}
|
|
||||||
}
|
}
|
||||||
Reference in new issue
Block a user