fix(remnawave): пользователи из файла, ротация API-токена без логов
ansible-core-net / deploy (push) Failing after 14s
ansible-core-net / deploy (push) Failing after 14s
users.yml — источник правды (homelab — первый). Именованный токен перевыпускается каждый прогон и пишется в Infisical; stdout/stderr секретов в CI закрыты no_log и redact. Co-authored-by: Cursor <cursoragent@cursor.com>
This commit is contained in:
1 parent
928c04ce9d
commit
e4fc3fce69
4 files changed
+146
-41
No files matched your search
+2
-2
@@ -149,11 +149,11 @@ API Endpoint (внутренний LAN): `http://192.168.1.102:8080/api`
|
|||||||
- `/ci-cd` → `CLOUDFLARE_API`
|
- `/ci-cd` → `CLOUDFLARE_API`
|
||||||
- `/VPS` → `PASS_GER_NOD_02` (пароль нового VPS)
|
- `/VPS` → `PASS_GER_NOD_02` (пароль нового VPS)
|
||||||
2. Запустить **`ansible-core-net`** (полный прогон или `--tags remnawave` после того, как Traefik уже с роутами `rw`/`sub`).
|
2. Запустить **`ansible-core-net`** (полный прогон или `--tags remnawave` после того, как Traefik уже с роутами `rw`/`sub`).
|
||||||
3. Роль поднимает `/opt/remnawave` (panel+db+redis) и `/opt/remnawave/subscription`, создаёт `REMNAWAVE_ADMIN_*`, API-токен `infra-automation`, config profile **`DE-Yali`**, ноду **`Ger-nod-02`**, host **`yali.gunis.top`**, пишет токен и `REMNANODE_SECRET_KEY` в Infisical.
|
3. Роль поднимает `/opt/remnawave` (panel+db+redis) и `/opt/remnawave/subscription`, создаёт `REMNAWAVE_ADMIN_*`, каждый прогон **перевыпускает** API-токен `infra-automation` и кладёт его в Infisical (старый сразу недействителен). Config profile **`DE-Yali`**, сквад `Default-Squad` на inbound Steal-Yali, нода **`Ger-nod-02`**, host **`yali.gunis.top`**. Пользователи — файл `ansible/roles/core-net/remnawave/files/users.yml` (добавление/изменение/удаление = правка файла).
|
||||||
4. Проверить `https://rw.gunihome.ru` и `https://sub.gunihome.ru`.
|
4. Проверить `https://rw.gunihome.ru` и `https://sub.gunihome.ru`.
|
||||||
|
|
||||||
> [!IMPORTANT]
|
> [!IMPORTANT]
|
||||||
> **Логи и новые установки Remnawave:** задача bootstrap всегда с `no_log: true`. В stderr скрипта ответы API с `privateKey` / `SECRET_KEY` / JWT / API-токеном редáctятся (`[REDACTED]`). При отладке **не** снимать `no_log` и не `printf` сырой JSON keygen/x25519/tokens в CI — иначе Reality-ключи и токены утекут в Gitea Actions. Admin JWT к API v3 требует заголовок `X-Remnawave-Client-Type: browser`; постоянная автоматизация — только через `REMNAWAVE_API_TOKEN` (scopes `*`).
|
> **Логи:** bootstrap, запись секретов в Infisical и `.env` — всегда `no_log: true`. stderr API редактит `privateKey` / `SECRET_KEY` / JWT / API-токен / `shortUuid` / пароли клиентов. Не снимать `no_log` и не печатать сырой JSON keygen/tokens. Значение токена не пишется в лог даже при ошибке Infisical.
|
||||||
|
|
||||||
### Шаг 4b. Remnawave Node ger-nod-02 (SelfSteal)
|
### Шаг 4b. Remnawave Node ger-nod-02 (SelfSteal)
|
||||||
1. После успешного `ansible-core-net` (чтобы в Infisical был `REMNANODE_SECRET_KEY`) запустить **`ansible-ger-nod-02`**.
|
1. После успешного `ansible-core-net` (чтобы в Infisical был `REMNANODE_SECRET_KEY`) запустить **`ansible-ger-nod-02`**.
|
||||||
|
|||||||
@@ -0,0 +1,12 @@
|
|||||||
|
# Источник правды для пользователей Remnawave.
|
||||||
|
# Добавление — новая запись. Изменение — правка полей. Удаление — убрать запись.
|
||||||
|
# Пользователь, которого нет в списке, удаляется при следующем прогоне ansible-core-net.
|
||||||
|
# Пароли/UUID клиент генерирует панель; в файл их не класть.
|
||||||
|
users:
|
||||||
|
- username: homelab
|
||||||
|
status: ACTIVE
|
||||||
|
expire_at: "2099-01-01T00:00:00.000Z"
|
||||||
|
description: homelab
|
||||||
|
traffic_limit_bytes: 0
|
||||||
|
traffic_limit_strategy: NO_RESET
|
||||||
|
squad: Default-Squad
|
||||||
@@ -170,6 +170,14 @@
|
|||||||
delay: 5
|
delay: 5
|
||||||
until: remnawave_auth_status.rc == 0
|
until: remnawave_auth_status.rc == 0
|
||||||
|
|
||||||
|
- name: Записать список пользователей
|
||||||
|
ansible.builtin.copy:
|
||||||
|
dest: "{{ remnawave_dir }}/users.json"
|
||||||
|
content: "{{ lookup('file', 'users.yml') | from_yaml | to_json }}"
|
||||||
|
owner: root
|
||||||
|
group: root
|
||||||
|
mode: "0600"
|
||||||
|
|
||||||
- name: Инициализировать админа, API-токен, профиль DE-Yali, ноду и хост
|
- name: Инициализировать админа, API-токен, профиль DE-Yali, ноду и хост
|
||||||
ansible.builtin.shell: |
|
ansible.builtin.shell: |
|
||||||
set -euo pipefail
|
set -euo pipefail
|
||||||
@@ -193,6 +201,7 @@
|
|||||||
RW_HOST_REMARK: "{{ remnawave_host_remark }}"
|
RW_HOST_REMARK: "{{ remnawave_host_remark }}"
|
||||||
RW_PROFILE_FILE: "{{ remnawave_dir }}/profile-de-yali.json"
|
RW_PROFILE_FILE: "{{ remnawave_dir }}/profile-de-yali.json"
|
||||||
RW_PANEL_DOMAIN: "{{ remnawave_panel_domain }}"
|
RW_PANEL_DOMAIN: "{{ remnawave_panel_domain }}"
|
||||||
|
RW_USERS_FILE: "{{ remnawave_dir }}/users.json"
|
||||||
register: remnawave_bootstrap_raw
|
register: remnawave_bootstrap_raw
|
||||||
changed_when: false
|
changed_when: false
|
||||||
failed_when: remnawave_bootstrap_raw.rc != 0
|
failed_when: remnawave_bootstrap_raw.rc != 0
|
||||||
@@ -222,7 +231,7 @@
|
|||||||
- name: Сохранить API-токен и SECRET_KEY ноды в Infisical
|
- name: Сохранить API-токен и SECRET_KEY ноды в Infisical
|
||||||
ansible.builtin.shell: |
|
ansible.builtin.shell: |
|
||||||
set -euo pipefail
|
set -euo pipefail
|
||||||
out=$(infisical secrets set \
|
infisical secrets set \
|
||||||
--domain="${INFISICAL_DOMAIN}" \
|
--domain="${INFISICAL_DOMAIN}" \
|
||||||
--token="${INFISICAL_TOKEN}" \
|
--token="${INFISICAL_TOKEN}" \
|
||||||
--env=prod \
|
--env=prod \
|
||||||
@@ -230,10 +239,7 @@
|
|||||||
--path="/services/remnawave" \
|
--path="/services/remnawave" \
|
||||||
"REMNAWAVE_API_TOKEN=${RW_API_TOKEN}" \
|
"REMNAWAVE_API_TOKEN=${RW_API_TOKEN}" \
|
||||||
"REMNANODE_SECRET_KEY=${RW_NODE_SECRET}" \
|
"REMNANODE_SECRET_KEY=${RW_NODE_SECRET}" \
|
||||||
--silent 2>&1) || {
|
--silent >/dev/null
|
||||||
echo "infisical secrets set failed: ${out}" >&2
|
|
||||||
exit 1
|
|
||||||
}
|
|
||||||
args:
|
args:
|
||||||
executable: /bin/bash
|
executable: /bin/bash
|
||||||
delegate_to: localhost
|
delegate_to: localhost
|
||||||
@@ -244,9 +250,7 @@
|
|||||||
INFISICAL_PROJECT_ID: "{{ lookup('env', 'INFISICAL_PROJECT_ID') }}"
|
INFISICAL_PROJECT_ID: "{{ lookup('env', 'INFISICAL_PROJECT_ID') }}"
|
||||||
RW_API_TOKEN: "{{ remnawave_api_token }}"
|
RW_API_TOKEN: "{{ remnawave_api_token }}"
|
||||||
RW_NODE_SECRET: "{{ remnawave_bootstrap.node_secret | default(lookup('env', 'REMNANODE_SECRET_KEY', default='')) }}"
|
RW_NODE_SECRET: "{{ remnawave_bootstrap.node_secret | default(lookup('env', 'REMNANODE_SECRET_KEY', default='')) }}"
|
||||||
when: >-
|
when: remnawave_api_token | default('') | length > 0
|
||||||
remnawave_bootstrap.token_updated | default(false)
|
|
||||||
or remnawave_need_node_secret
|
|
||||||
changed_when: true
|
changed_when: true
|
||||||
no_log: true
|
no_log: true
|
||||||
|
|
||||||
@@ -268,7 +272,7 @@
|
|||||||
mode: "0644"
|
mode: "0644"
|
||||||
|
|
||||||
- name: Запустить subscription-page
|
- name: Запустить subscription-page
|
||||||
ansible.builtin.command: docker compose -f {{ remnawave_subscription_dir }}/compose.yaml up -d --remove-orphans
|
ansible.builtin.command: docker compose -f {{ remnawave_subscription_dir }}/compose.yaml up -d --force-recreate --remove-orphans
|
||||||
register: remnawave_sub_up
|
register: remnawave_sub_up
|
||||||
changed_when: >-
|
changed_when: >-
|
||||||
'Started' in remnawave_sub_up.stderr or
|
'Started' in remnawave_sub_up.stderr or
|
||||||
|
|||||||
@@ -20,7 +20,7 @@ redact_json() {
|
|||||||
jq 'walk(
|
jq 'walk(
|
||||||
if type == "object" then
|
if type == "object" then
|
||||||
with_entries(
|
with_entries(
|
||||||
if (.key | test("(?i)privateKey|privKey|secretKey|SECRET_KEY|accessToken|apiToken|password|^token$"))
|
if (.key | test("(?i)privateKey|privKey|secretKey|SECRET_KEY|accessToken|apiToken|password|^token$|vlessUuid|trojanPassword|ssPassword|shortUuid|subscriptionUrl"))
|
||||||
then .value = "[REDACTED]"
|
then .value = "[REDACTED]"
|
||||||
else .
|
else .
|
||||||
end
|
end
|
||||||
@@ -87,36 +87,37 @@ else
|
|||||||
AUTH_HDR=(-H "Authorization: Bearer ${access}")
|
AUTH_HDR=(-H "Authorization: Bearer ${access}")
|
||||||
fi
|
fi
|
||||||
|
|
||||||
# Постоянный API-токен: scopes ["*"] (wildcard из GET /tokens/scopes).
|
# Каждый прогон перевыпускает именованный API-токен и гасит предыдущие
|
||||||
# Если создать нельзя — не валим bootstrap; пользователь может положить токен вручную.
|
# (в том числе утёкший). Само значение наружу не печатаем.
|
||||||
if [ -z "${active_token}" ] || [ "${admin_created}" -eq 1 ]; then
|
tokens_json=$(api GET /tokens/ || echo '{"response":[]}')
|
||||||
tokens_json=$(api GET /tokens/ || echo '{"response":[]}')
|
old_uuids=$(printf '%s' "${tokens_json}" | jq -r --arg n "$RW_TOKEN_NAME" '
|
||||||
old_uuid=$(printf '%s' "${tokens_json}" | jq -r --arg n "$RW_TOKEN_NAME" '
|
(.response // .)
|
||||||
(.response // .)
|
| if type=="array" then . elif .tokens then .tokens else [] end
|
||||||
| if type=="array" then . elif .tokens then .tokens else [] end
|
| map(select(.name == $n or .tokenName == $n) | .uuid)
|
||||||
| map(select(.name == $n or .tokenName == $n))
|
| .[]')
|
||||||
| .[0].uuid // empty')
|
for old_uuid in ${old_uuids}; do
|
||||||
if [ -n "${old_uuid}" ]; then
|
[ -n "${old_uuid}" ] || continue
|
||||||
api DELETE "/tokens/${old_uuid}" >/dev/null || true
|
api DELETE "/tokens/${old_uuid}" >/dev/null || true
|
||||||
fi
|
done
|
||||||
|
active_token=""
|
||||||
wildcard=$(api GET /tokens/scopes 2>/dev/null | jq -r '.response.wildcard // "*"')
|
wildcard=$(api GET /tokens/scopes 2>/dev/null | jq -r '.response.wildcard // "*"')
|
||||||
token_payload=$(jq -n --arg n "$RW_TOKEN_NAME" --arg s "${wildcard:-*}" \
|
token_payload=$(jq -n --arg n "$RW_TOKEN_NAME" --arg s "${wildcard:-*}" \
|
||||||
'{name: $n, expiresInDays: 3650, scopes: [$s]}')
|
'{name: $n, expiresInDays: 3650, scopes: [$s]}')
|
||||||
if token_resp=$(api POST /tokens/ -d "${token_payload}"); then
|
if token_resp=$(api POST /tokens/ -d "${token_payload}"); then
|
||||||
created=$(printf '%s' "${token_resp}" | jq -r '
|
created=$(printf '%s' "${token_resp}" | jq -r '
|
||||||
.response.token // .response.apiToken // .token // .apiToken // empty')
|
.response.token // .response.apiToken // .token // .apiToken // empty')
|
||||||
if [ -n "${created}" ]; then
|
if [ -n "${created}" ]; then
|
||||||
active_token="${created}"
|
active_token="${created}"
|
||||||
token_updated=1
|
token_updated=1
|
||||||
else
|
|
||||||
echo "WARN: POST /tokens/ без поля token — положите REMNAWAVE_API_TOKEN вручную" >&2
|
|
||||||
printf \'%s
|
|
||||||
\' "${token_resp}" | redact_json >&2
|
|
||||||
fi
|
|
||||||
else
|
else
|
||||||
echo "WARN: не удалось создать API-токен автоматически — создайте в UI и положите в Infisical /services/remnawave как REMNAWAVE_API_TOKEN" >&2
|
echo "WARN: POST /tokens/ без поля token" >&2
|
||||||
fi
|
fi
|
||||||
|
else
|
||||||
|
echo "WARN: не удалось перевыпустить API-токен" >&2
|
||||||
|
fi
|
||||||
|
if [ -z "${active_token}" ]; then
|
||||||
|
echo "Нет нового API-токена — bootstrap остановлен, секрет в лог не пишем" >&2
|
||||||
|
exit 1
|
||||||
fi
|
fi
|
||||||
|
|
||||||
# SECRET_KEY ноды — отдельный endpoint /api/keygen/ (не ответ create node)
|
# SECRET_KEY ноды — отдельный endpoint /api/keygen/ (не ответ create node)
|
||||||
@@ -286,6 +287,92 @@ if [ -z "${host_uuid}" ]; then
|
|||||||
host_created=1
|
host_created=1
|
||||||
fi
|
fi
|
||||||
|
|
||||||
|
users_changed=0
|
||||||
|
squad_uuid=$(api GET /internal-squads/ | jq -r --arg n "Default-Squad" '
|
||||||
|
.response.internalSquads[]? | select(.name == $n) | .uuid' | head -1)
|
||||||
|
if [ -n "${squad_uuid}" ] && [ -n "${inbound_uuid}" ]; then
|
||||||
|
has_inbound=$(api GET /internal-squads/ | jq -r --arg s "${squad_uuid}" --arg i "${inbound_uuid}" '
|
||||||
|
.response.internalSquads[]? | select(.uuid == $s) | .inbounds[]?.uuid | select(. == $i)' | head -1)
|
||||||
|
if [ -z "${has_inbound}" ]; then
|
||||||
|
squad_body=$(jq -n --arg u "${squad_uuid}" --arg i "${inbound_uuid}" '{uuid: $u, inbounds: [$i]}')
|
||||||
|
api PATCH /internal-squads/ -d "${squad_body}" >/dev/null
|
||||||
|
users_changed=1
|
||||||
|
fi
|
||||||
|
fi
|
||||||
|
|
||||||
|
# Конфиг страницы подписки: дефолт с config=null страница не поднимает.
|
||||||
|
sub_cfgs=$(api GET /subscription-page-configs/ || echo '{"response":{"configs":[]}}')
|
||||||
|
ready=$(printf '%s' "${sub_cfgs}" | jq '[.response.configs[]? | select(.config != null)] | length')
|
||||||
|
if [ "${ready}" = "0" ]; then
|
||||||
|
api POST /subscription-page-configs/ -d '{"name":"Homelab"}' >/dev/null
|
||||||
|
users_changed=1
|
||||||
|
fi
|
||||||
|
|
||||||
|
# Браузер: Accept и User-Agent без учёта регистра, правило BROWSER первым.
|
||||||
|
settings=$(api GET /subscription-settings/ || echo '')
|
||||||
|
if [ -n "${settings}" ]; then
|
||||||
|
patched=$(printf '%s' "${settings}" | jq '
|
||||||
|
.response
|
||||||
|
| .responseRules.rules = (
|
||||||
|
[
|
||||||
|
{
|
||||||
|
name: "Browser",
|
||||||
|
enabled: true,
|
||||||
|
operator: "OR",
|
||||||
|
description: "IaC: HTML-страница подписки",
|
||||||
|
responseType: "BROWSER",
|
||||||
|
conditions: [
|
||||||
|
{headerName: "accept", operator: "CONTAINS", value: "text/html", caseSensitive: false},
|
||||||
|
{headerName: "user-agent", operator: "CONTAINS", value: "Mozilla", caseSensitive: false}
|
||||||
|
]
|
||||||
|
}
|
||||||
|
] + [
|
||||||
|
.responseRules.rules[]?
|
||||||
|
| select(.name != "Browser" and .name != "Browser Subscription" and .responseType != "BROWSER")
|
||||||
|
]
|
||||||
|
)')
|
||||||
|
api PATCH /subscription-settings/ -d "${patched}" >/dev/null \
|
||||||
|
|| api PUT /subscription-settings/ -d "${patched}" >/dev/null \
|
||||||
|
|| echo "WARN: не удалось обновить SRR" >&2
|
||||||
|
fi
|
||||||
|
|
||||||
|
if [ -n "${RW_USERS_FILE:-}" ] && [ -f "${RW_USERS_FILE}" ]; then
|
||||||
|
existing=$(api GET "/users/?size=500" || api GET /users/)
|
||||||
|
desired_names=$(jq -r '.users[].username' "${RW_USERS_FILE}")
|
||||||
|
while IFS= read -r username; do
|
||||||
|
[ -n "${username}" ] || continue
|
||||||
|
want=$(jq -c --arg u "${username}" '.users[] | select(.username == $u)' "${RW_USERS_FILE}")
|
||||||
|
squad_name=$(printf '%s' "${want}" | jq -r '.squad // "Default-Squad"')
|
||||||
|
sid=$(api GET /internal-squads/ | jq -r --arg n "${squad_name}" '.response.internalSquads[]? | select(.name == $n) | .uuid' | head -1)
|
||||||
|
uuid=$(printf '%s' "${existing}" | jq -r --arg u "${username}" '.response.users[]? | select(.username == $u) | .uuid' | head -1)
|
||||||
|
body=$(printf '%s' "${want}" | jq -c --arg sid "${sid}" '{
|
||||||
|
username,
|
||||||
|
status: (.status // "ACTIVE"),
|
||||||
|
expireAt: .expire_at,
|
||||||
|
description: (.description // ""),
|
||||||
|
trafficLimitBytes: (.traffic_limit_bytes // 0),
|
||||||
|
trafficLimitStrategy: (.traffic_limit_strategy // "NO_RESET"),
|
||||||
|
activeInternalSquads: (if $sid == "" then [] else [$sid] end)
|
||||||
|
}')
|
||||||
|
if [ -z "${uuid}" ]; then
|
||||||
|
api POST /users/ -d "${body}" >/dev/null
|
||||||
|
users_changed=1
|
||||||
|
else
|
||||||
|
api PATCH /users/ -d "$(printf '%s' "${body}" | jq -c --arg id "${uuid}" '. + {uuid: $id}')" >/dev/null
|
||||||
|
users_changed=1
|
||||||
|
fi
|
||||||
|
done <<< "${desired_names}"
|
||||||
|
while IFS= read -r row; do
|
||||||
|
[ -n "${row}" ] || continue
|
||||||
|
uname=${row%% *}
|
||||||
|
uuuid=${row#* }
|
||||||
|
if ! printf '%s\n' "${desired_names}" | grep -qx "${uname}"; then
|
||||||
|
api DELETE "/users/${uuuid}" >/dev/null
|
||||||
|
users_changed=1
|
||||||
|
fi
|
||||||
|
done < <(printf '%s' "${existing}" | jq -r '.response.users[]? | "\(.username)\t\(.uuid)"')
|
||||||
|
fi
|
||||||
|
|
||||||
jq -n \
|
jq -n \
|
||||||
--arg api_token "${active_token}" \
|
--arg api_token "${active_token}" \
|
||||||
--arg node_secret "${node_secret}" \
|
--arg node_secret "${node_secret}" \
|
||||||
@@ -298,6 +385,7 @@ jq -n \
|
|||||||
--argjson profile_created "${profile_created}" \
|
--argjson profile_created "${profile_created}" \
|
||||||
--argjson node_created "${node_created}" \
|
--argjson node_created "${node_created}" \
|
||||||
--argjson host_created "${host_created}" \
|
--argjson host_created "${host_created}" \
|
||||||
|
--argjson users_changed "${users_changed}" \
|
||||||
'{
|
'{
|
||||||
api_token: $api_token,
|
api_token: $api_token,
|
||||||
node_secret: $node_secret,
|
node_secret: $node_secret,
|
||||||
@@ -310,5 +398,6 @@ jq -n \
|
|||||||
profile_created: ($profile_created == 1),
|
profile_created: ($profile_created == 1),
|
||||||
node_created: ($node_created == 1),
|
node_created: ($node_created == 1),
|
||||||
host_created: ($host_created == 1),
|
host_created: ($host_created == 1),
|
||||||
changed: (($admin_created + $token_updated + $profile_created + $node_created + $host_created) > 0)
|
users_changed: ($users_changed == 1),
|
||||||
|
changed: (($admin_created + $token_updated + $profile_created + $node_created + $host_created + $users_changed) > 0)
|
||||||
}'
|
}'
|
||||||
Reference in new issue
Block a user