d98ade42ce
The docs folder had drifted into a mixed-language contract: IMPLEMENTATION_SPEC.md was entirely in English while the rest was Russian with English headings. Prose is now Russian throughout; English is kept only where it is technically load-bearing (commands, tool output, config keys, file/module/table names, tc handles) and for terms with no settled Russian equivalent in this context (drift, reconcile, peer, namespace, handshake). docs/README.md now states that contract explicitly. Rewriting the spec surfaced several places where it described intent rather than the code. Corrected against traffic_core/src: - module layout: the spec showed traffic/ and firewall/ as directories with model/inspect/apply submodules. They are single files, and sysctl_tuning.rs was missing from the tree entirely. - data model: Peer was documented as carrying public key, handshake and counters. It carries only ipv4; runtime state lives in a separate PeerRuntime, and there is no desired-state struct at all - it is derived inline from config plus sorted peers. RuntimeTarget.netns_path is a String, not a PathBuf. - interface detection: the spec listed a third step taking the first non-loopback interface with an IPv4 address. No such fallback exists; detection bails with an explicit error, which is safer and is now documented as deliberate. - reconcile: the pseudo-flow folded firewall into reconcile_traffic. They are two independent reconciles with separate locks. - locking: only traffic.lock was documented. There are three locks, and sysctl_tuning.lock has a 30s timeout rather than 10s. Stale-lock recovery via /proc/<pid> was undocumented. - sysctl_tuning: the module also manages /etc/modules-load.d/90-awg2-harness-bbr.conf when BBR is active, and refuses to touch either managed file without its marker. Both docs and the acceptance checklist claimed only the sysctl.d file was written. - status contract: the documented output was outdated. All 15 printed sections are now listed in the order status.rs emits them, including the degraded path when no container is found, and the fact that the Network tuning block is printed between the System service line and the container lines. - swap: size was documented as a constant 2048 MB instead of swap.size_mb, and the /etc/fstab.awg2-harness.bak backup was undocumented. - apply/verify: the tolerated-error lists are now the actual closed sets from the code. Acceptance checklist gained checks for the daemon startup failure policy (sysctl/swap fatal, traffic/firewall not), lock contention and stale-lock recovery, degraded status, the modules-load file, and the marker guard. The stale host wg requirement was dropped from its host-tools item. Every path, table, counter and log string quoted in the docs was verified to exist in the source. cargo test --workspace: 110 + 4 passed.
19 KiB
19 KiB
Чек-лист приёмки перед production-выкладкой
A. Базовая установка
- Хост — Debian 13 amd64.
- Сервер выделенный, без соседних сервисов.
- AmneziaWG/AWG 2.0 или AmneziaWG/AWG 1.5 установлена официальным способом.
- Контейнер
amnezia-awg2илиamnezia-awgзапущен (amnezia-awg3— резерв на будущее, в AmneziaVPN 5.0 такого типа контейнера ещё нет). docker psвидит контейнер.- Можно получить PID контейнера.
/proc/<pid>/ns/netсуществует.- На хосте доступны
ip,tc,docker,nsenter,modprobe. Хостовыйwgне требуется и не проверяется. awg2-harness validate-configпроходит без ошибок.awg2-harness validate-runtimeпроходит без ошибок и не требует установленногоwireguard-tools.
B. Обнаружение peers
awg2-harness statusпоказывает найденный контейнер.awg2-harness statusпоказывает PID/netns контейнера.awg2-harness statusпоказывает найденный интерфейс.- Количество peers совпадает с
docker exec "$C" awg show all allowed-ips. - Peer с несколькими allowed IP даёт отдельный класс на каждый адрес (в этой команде адреса разделены пробелом).
- Offline peers с allowed IP тоже попадают в список shaping.
- IP вне
amnezia.peer_ipv4_cidrне попадают в traffic shaping. - В секции
WireGuard clientsвыводаstatusнет строки, соответствующей самому интерфейсу (столбецPublic keyне содержит приватный ключ устройства). docker exec "$C" readlink -f /usr/bin/wgвозвращает/usr/bin/awg.
C. Контракт топологии traffic
awg2-harness apply-limitsуспешно завершается.- На AWG/WG-интерфейсе есть root qdisc
1: htb. - На AWG/WG-интерфейсе есть root class
1:1сtraffic.root_rate. - Для каждого peer есть class
1:<id>сtraffic.peer_limit. - Для каждого peer есть
fq_codelпод1:<id>. - Для каждого peer есть egress filter
dst peer_ip -> 1:<id>. - Есть ingress qdisc
ffff:на AWG/WG-интерфейсе. - Есть ingress redirect через
mirred ... redirect dev ifb0. ifb0существует и находится в UP state.- На
ifb0есть root qdisc2: htb. - На
ifb0есть root class2:1сtraffic.root_rate. - Для каждого peer есть class
2:<id>сtraffic.peer_limit. - Для каждого peer есть
fq_codelпод2:<id>. - Для каждого peer есть ingress filter
src peer_ip -> 2:<id>. - Class ids начинаются с
traffic.class_start_id, default10. - Peer IP → class id mapping использует стабильный лексикографический контракт: IP сортируются как строки, не numeric IPv4.
D. Идемпотентность и восстановление после drift
- Повторный
apply-limitsне создаёт дубли. - Повторный
apply-limitsне меняет healthy state без причины. - Если удалить root qdisc на AWG/WG-интерфейсе, daemon восстанавливает topology.
- Если удалить ingress qdisc, daemon восстанавливает topology.
- Если удалить ingress redirect filter (
parent ffff:), drift детектируется и topology восстанавливается. - Если удалить
ifb0, daemon восстанавливает topology. - Если сделать
ifb0DOWN, drift детектируется и topology восстанавливается. - Если удалить один peer filter, daemon восстанавливает topology.
- Если изменить
rate/ceilpeer class, drift детектируется и topology восстанавливается. - Если добавить stale peer class/filter, drift детектируется и topology восстанавливается.
- После удаления peer устаревшие class/filter исчезают через rebuild.
- После добавления peer появляются новые class/filter.
E. Самовосстановление в жизненном цикле
docker restart amnezia-awg2→ лимиты восстанавливаются автоматически.systemctl restart docker→ после возвращения контейнера лимиты восстанавливаются автоматически.systemctl restart awg2-harness→ сервис сам находит контейнер и применяет/проверяет лимиты.- Reboot хоста → сервис стартует и восстанавливает лимиты.
- Изменение имени интерфейса на допустимое fallback-имя не ломает detector.
- Если контейнер временно отсутствует, daemon логирует ошибку reconcile и продолжает работу.
- На старте daemon сбой
sysctl_tuningилиswapзавершает процесс, а сбой traffic/firewall только логируется — сервис остаётся живым. - После обрыва потока
docker eventsон перезапускается автоматически (проверяется, например,systemctl restart docker). - Параллельный запуск
apply-limitsво время работы daemon не приводит к гонке: второй процесс ждёт блокировку до 10 секунд и затем сообщаетlock busy timeout. - Устаревший lock-файл после
kill -9не блокирует работу: следующий запуск перезахватывает/run/awg2-harness/traffic.lockпо отсутствию/proc/<pid>.
F. Статус и наблюдаемость
statusпоказывает desired peer limit из конфига, а не hardcoded 70.statusпоказывает egress state.statusпоказывает ingress/ifb state.statusпоказывает WireGuard clients (online/offline, latest handshake, RX/TX, endpoint).statusпоказывает недостающие и устаревшие правила peers: вTraffic actual— строкаreason(например,missing egress class,egress per-peer class set mismatch,duplicate egress class flowid mapping detected), вpeer_table— колонкаdriftпо каждому peer.statusявно показывает частичное состояние и drift, а не общий признак «всё хорошо».statusпоказывает tc filter counters по peer илиfilter statistics: unavailable.- Логи доступны через
journalctl -u awg2-harness. - Отсутствие обязательной host-утилиты (
tc,ip,docker,nsenter) логируется явно с именем утилиты. - Последний reconcile result виден в status или journal.
statusпоказывает последние события reconcile/firewall из/run/awg2-harness/events.log.- Если контейнер не найден,
statusне падает, а переходит в degraded-режим:Peers/WireGuard clientsпоказываютunavailable,Traffic actual—drift: unknown, а секции host firewall, anti-torrent, swap и conntrack продолжают выводиться. - Секции деградируют независимо: ошибка чтения peer state не мешает вывести traffic, firewall и swap.
G. Планировщик перезагрузки
- Если
reboot.enabled = false, сервис не планирует reboot. - Если
reboot.enabled = true, в journal видна запланированная перезагрузка. - Время попадает в окно
window_start_utc–window_end_utc. - Вызов reboot выполняется через
systemctl --no-block reboot.
H. Swap
ensure-swapсоздаёт файл по путиswap.path(в примере/swapfile) размеромswap.size_mb(в примере 2048 MB).- Права на swap-файл —
0600. - Перед перезаписью
/etc/fstabсоздана резервная копия/etc/fstab.awg2-harness.bak. - Если до запуска был активен другой swap, после
ensure-swapон выключен. - После
ensure-swapактивен ровно один swap:/swapfile. - Все старые swap entries удалены из
/etc/fstab. - Для block-device swap выполняется только
swapoffи удалениеfstabentry; block device не удаляется. vm.swappinessиз конфига применён в runtime и сохранён persistently.- Повторный
ensure-swapничего не пересоздаёт и не добавляет дублей.
H2. Сетевой baseline через sysctl
awg2-harness apply-network-tuningуспешно завершается.awg2-harness inspect-network-tuningпоказываетenabled: trueиdrift: no.- Создаётся
/etc/sysctl.d/90-awg2-harness-vpn.conf. /etc/modules-load.d/90-awg2-harness-bbr.confсоздан, если BBR активен, и отсутствует, если BBR неактивен./etc/sysctl.confне изменён.- В обоих managed-файлах первая строка содержит marker
Managed by awg2-harness sysctl_tuning. - Файл без marker по managed-пути не перезаписывается и не удаляется: команда завершается ошибкой.
- В managed-файле отсутствует
udp_wmem_min. net.ipv4.tcp_congestion_controlиnet.core.default_qdiscприсутствуют в managed-файле только при активном BBR.- Runtime apply меняет только drifted keys (
sysctl -w), безsysctl --system. - При
tcp_bbr = autoи недоступном BBR сервис не падает, в статусе есть warning. - При
tcp_bbr = requireи недоступном BBR команда/старт завершается с ошибкой. - При
enabled=falsemanaged-файл удаляется только если содержит managed marker.
I. Anti-torrent guard на nftables
- Если
anti_torrent.enabled = true, в Amnezia netns естьtable inet awg2_harness. - Есть chain
forward_antitorrentс hookforwardи policyaccept. - Правило ограничивает
ip saddr <peer_ipv4_cidr>, default10.8.1.0/24. - Лимит считается per source VPN IP через meter/set, а не глобально по всей подсети.
- Порог совпадает с
anti_torrent.max_connections_per_peer; текущий пример config использует150, более строгий вариант —100. - Drop counter виден в
status. - На first-run без table
awg2-harness apply-firewallсоздаётtable inet awg2_harness, а не падает. - При превышении порога новые flows дропаются, established flows ниже порога не ломаются.
- После restart контейнера nftables rule пересоздаётся в новом netns.
- При
anti_torrent.enabled = falseудаляется/отключается только AWG2-owned nftables state; Docker/Amnezia rules не flush-ятся. statusпоказываетnf_conntrack_count/nf_conntrack_max, если sysctl доступны.
J. Откат
- Известно, как остановить и отключить
awg2-harness.serviceиawg2-reboot-scheduler.service. - Известно, как удалить только AWG2-owned host firewall state (
inet awg2_host_firewall). - Известно, как удалить только AWG2-owned anti-torrent state (
inet awg2_harness) в выбранном namespace. - Известно, как удалить AWG2-owned
tctopology (root,ingress,ifb0) в netns Amnezia. - При необходимости rollback включает удаление пакета
awg2-harnessпосле остановки сервисов. - Rollback проверен на тестовом сервере.
K. Упаковка и релиз
- Package собирается на отдельной Debian 13 amd64 build-machine.
- Production host не требует Rust/cargo/source tree.
./tools/build.sh --packageсоздаётdist/awg2-harness_<version>_amd64.deb.dist/SHA256SUMSвалидирует checksum пакета.- Пакет ставит бинарь в
/usr/sbin/awg2-harness. - Пакет ставит unit в
/lib/systemd/system/awg2-harness.service. - Пакет не устанавливает
/etc/awg2-harness/config.tomlавтоматически. - Пакет не включает/не стартует сервис автоматически.
- Пакет не имеет
Depends/Recommendsнаdocker.io; установка Amnezia/Docker внешняя. apt install ./awg2-harness_<version>_amd64.debне устанавливает и не заменяет Docker.apt install ./awg2-harness_<version>_amd64.debпроходит на clean Debian 13 Amnezia host.- После ручной установки config
awg2-harness validate-configпроходит. - Сервис стартует только после явного
systemctl enable --now awg2-harness.service.
K2. Документация и UX установки
- README не утверждает, что AmneziaVPN ожидает public key.
- Документация явно разделяет private key для AmneziaVPN и public key для
authorized_keys. - Есть пример заполнения AmneziaVPN fields:
Server IP address [:port],SSH Username,Password or SSH private key. - Описаны Windows пути
%USERPROFILE%\.ssh\amnezia_keyи%USERPROFILE%\.ssh\amnezia_key.pub. - Описан runtime config bootstrap из
/usr/share/doc/awg2-harness/repo/config.example.toml. - Clean install подтверждает, что
/etc/awg2-harness/config.tomlне создаётся автоматически.
K3. AmneziaDNS
- AmneziaDNS установлен из приложения AmneziaVPN.
- Контейнер
amnezia-dnsв состоянии healthy. docker inspect amnezia-dnsпоказывает"53/tcp":nullи"53/udp":null.amnezia-dnsи активный AWG-контейнер (amnezia-awg2,amnezia-awg3илиamnezia-awg) подключены к одной Amnezia DNS Docker-сети.- Публичный DNS-запрос к
<server-public-ip>:53не резолвит домены; допустимыconnection refused,timeoutилиno servers could be reached. - DNS-резолвинг у VPN-клиента работает при активном подключении.
- AWG2 host firewall не открывает
53/tcpи53/udp.
L. Host firewall (порты и безопасность SSH)
awg2-harness validate-configпадает, если отсутствует секция[host_firewall].apply-firewallне блокирует SSH наhost_firewall.ssh_port(default2323).- После
apply-firewallпортhost_firewall.amnezia_port(default443) доступен по всем протоколам изhost_firewall.amnezia_protocols. - Если эксплуатационно требуется закрыть legacy SSH
22, это явно подтверждено проверкой доступа наssh_portперед закрытием22. - При
host_firewall.enabled = falseудаляется только таблицаinet awg2_host_firewall. - Повторный
apply-firewallидемпотентен и не вносит лишних изменений в healthy state. - При невалидном
host_firewall.amnezia_protocols(icmp,foo, дубли)validate-configзавершается ошибкой. - После
docker restartanti-torrent правила продолжают восстанавливаться корректно и не ломаются host firewall логикой. - Проверено, где реально проходит VPN-трафик в вашей Docker-схеме (
INPUTvsFORWARD) и это отражено в эксплуатационной заметке. - Для release-кандидата зафиксирован итог проверки
INPUTvsFORWARDна реальном сервере (команды/логи/вывод) и подтверждено, что текущие правила firewall покрывают реальный путь трафика. statusпоказывает блокDocker/Amnezia port pathс полямиdocker_userland_proxy,published_udp_portи note про Docker-managedFORWARD.statusпоказывает поляhost_forward_policy_dropиdocker_forward_rules_presentв блокеDocker/Amnezia port path.- Если
docker_userland_proxy=falseиFORWARD policy DROP, при отсутствии явных Docker accept-признаковstatusвыводит warning, ноawg2-harnessне изменяетFORWARDавтоматически. - Сверено соответствие:
config host_firewall.amnezia_port↔ опубликованный Docker UDP host port ↔docker exec amnezia-awg2 awg show(listening port). - При нескольких UDP bindings без однозначного соответствия
host_firewall.amnezia_portдиагностикаpublished_udp_portпоказываетunknown(ambiguous), а не произвольный первый порт. - Для диагностики FORWARD используется best-effort проверка:
iptables -S FORWARDи fallback черезnft list ruleset;statusне падает при недоступности одной из команд.