Files
vps-manager/scripts/restore_migration_bundle.py
T
gouki f09c0f6e4b fix(review): 处理全量审查剩余项(M4-M8/M11/M12 + 21 条 low)
后端
- asset_service: delete_asset 先清 subdomains/site_certs 子表(SQLite 不强制
  FK 且 assets.id 无 AUTOINCREMENT,删最大 id 后新建会复用 rowid 导致孤儿误挂);
  metrics.db 清理改 best-effort,不再让已成功的删除返回 500
- provider_service: slug 唯一约束竞态补 IntegrityError 兜底(与 account_service 一致)
- account_service/sync_service: raise HTTPException 补 from e,保留原始异常链
- sync_service: 删死代码 _load_config;新增 BalanceUnsupported,平台无余额接口时
  计入 skipped 而不是静默当作失败;到期日写库前归一
- ai: 删掉 OpenAI 早已下线的 billing 余额接口实现,能力探测如实报「不支持」
- adapters/base: _overridden 改走 MRO,中间层基类实现的能力不再被误判为未实现
- core/timeutils: 删死代码 utcnow_iso(注释声称 Z 后缀,实际输出 +00:00)
- main: lifespan 退出时 await 被 cancel 的清理任务,避免 pending task 被销毁
- ssl_service: 写 site_certs/subdomains 前校验 asset_id 存在,杜绝悬空引用;
  到期阈值贯穿 _judge_status/_apply_probe/check_one/check_all_site_certs
- routers/credentials、accounts: 明文密码 GET 补 Cache-Control: no-store
- routers/stats: /stats/expiring 的 Query 描述与实际语义对齐(不设下界,含已过期)

Agent
- collector: 解析 sshd_config 的 Include(含 sshd_config.d/*.conf,按 sshd 语义
  「首次出现的值生效」),未显式配置的关键字按编译默认值判定,消除假 pass;
  防火墙检测改用 iptables -S 统计 -A 规则行并读 INPUT 策略(-L -n 恒有链头输出)
- reporter: 4xx(除 429)不再重试直接退出,429 优先按 Retry-After 退避

安全与部署
- core/security: require_agent_key 改为对外 fail-closed——tailnet/本机放行,
  外部来源未配 AGENT_KEY 时一律 401(此前全放行,而服务默认监听 0.0.0.0,
  公网上任何人可伪造监控指标与安全检查结果)
- main: 启动时把「未配 API_KEY/AGENT_KEY 则外部来源不可用」打进日志
- run.sh: HOST/PORT 可用环境变量覆盖,并说明默认 0.0.0.0 的权衡
- deploy/setup.sh: 新装时自动生成随机 API_KEY/AGENT_KEY 并提示同步到各 VPS;
  注册 vps-cert-check.timer
- deploy/vps-cert-check.{service,timer}: 新增每日 09:30 的站点证书到期探测
  (此前 check_site_certs.py 没有任何 unit,证书提醒不会自动跑)
- deploy/update.sh: sync_units 对 timer 用 enable --now(新增 timer 只 restart
  不会建开机自启软链),主服务 unit 变更后额外 restart;pip 安装失败不再被吞
- scripts/check_site_certs.py: threshold 参数真正生效并打印
- scripts/make_migration_bundle.py: 缺 assets.db 直接 abort;umask 077 + chmod 600
  (包内含 .env 的 MASTER_KEY 与 escrow,不能默认 644 落在 /tmp)
- scripts/restore_migration_bundle.py: 校验之外补必备文件预检,缺文件在触碰
  目标机状态之前就 abort

前端
- store: 拆分列表口径 assets 与统计口径 allAssets(无筛选时同源,不重复请求);
  删除已无消费者的 expiring/loadExpiring(每次 loadAll 白发一个请求)
- dashboard/monitor/providers/subscriptions/modals: 统计与计数改用 allAssets,
  资产页的筛选(含统计卡片点击跳转带的筛选)不再让其他视图的数字缩水
- modals: 账号同步后补 loadOverview;settings: 导入后改 loadAll
- api: countdownText 支持 unit/empty 选项,monitor/domains 各自的实现改为委托,
  assets/domains/subscriptions 的到期列不再直出「(-3天)」
- servers: cpu/mem/disk 百分比统一判空,采样缺项不再渲染「null%」
- assets: 同步 AI 余额的结果提示区分 skipped(平台无余额接口)与 failed
- modals: 修正凭据库头注释——2FA 动态码是选填 + 可事后补验,与实现一致

测试
- 新增 tests/test_agent_collector.py(8 条)、tests/test_security.py(11 条)
- 全量 113 passed;改动 JS 均通过 node --check,deploy 脚本通过 bash -n
- 浏览器实测:筛选态下总览/监控中心/平台页/付费资产的统计仍为全量口径,
  到期文案与 null 百分比渲染正确,console 零报错
2026-09-23 10:15:52 +00:00

128 lines
5.5 KiB
Python
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
"""迁移恢复:校验并解包迁移包到目标部署目录
在新机器运行(前提:已跑 deploy/setup.sh 完成代码/venv/units 部署):
sudo systemctl stop vps-manager vps-manager-update.timer
.venv/bin/python scripts/restore_migration_bundle.py <bundle.tar.gz> [--app-dir /opt/vps-manager]
sudo systemctl start vps-manager
行为:
- 按 manifest.sha256 逐文件校验,任一不匹配即拒绝恢复(防传输损坏/调包)
- 目标机现有 data/ 与 .env 先备份为 *.pre-restore-<ts>(可回滚)
- 解包 data/(两库 + escrow + backups)与 .env(chmod 600)
- 打印后续手工步骤(serve/agent/CORS/源机 timer 下线,见 docs/migration-runbook.md)
"""
import argparse
import hashlib
import shutil
import sys
import tarfile
import tempfile
from datetime import datetime
from pathlib import Path
def sha256_file(path: Path) -> str:
h = hashlib.sha256()
with path.open("rb") as f:
for chunk in iter(lambda: f.read(1 << 20), b""):
h.update(chunk)
return h.hexdigest()
def main() -> int:
ap = argparse.ArgumentParser(description="校验并恢复 vps-manager 迁移包")
ap.add_argument("bundle", help="迁移包 tar.gz 路径")
ap.add_argument("--app-dir", default="/opt/vps-manager", help="目标部署目录")
args = ap.parse_args()
bundle = Path(args.bundle)
app_dir = Path(args.app_dir)
if not bundle.exists():
print(f"[abort] 迁移包不存在:{bundle}", file=sys.stderr)
return 2
if not (app_dir / "app" / "main.py").exists():
print("[abort] 目标目录不像已部署的 vps-manager(缺 app/main.py),请先跑 deploy/setup.sh",
file=sys.stderr)
return 2
work = Path(tempfile.mkdtemp(prefix="vps-restore-"))
try:
with tarfile.open(bundle) as tar:
try:
# Python >= 3.11.4/3.12:官方数据过滤器(防路径穿越/硬链接等)
tar.extractall(work, filter="data")
except TypeError:
# 新机自带旧版 Python(如 3.10)无 filter 参数:手工校验成员路径
for m in tar.getmembers():
if m.name.startswith("/") or ".." in Path(m.name).parts:
print(f"[abort] 包内路径异常,拒绝解包:{m.name}", file=sys.stderr)
return 2
tar.extractall(work)
root = work / "bundle"
manifest_sha = root / "manifest.sha256"
if not manifest_sha.exists():
print("[abort] 包内缺 manifest.sha256,拒绝恢复", file=sys.stderr)
return 2
print("[1/4] 校验包内文件…")
listed: set[str] = set()
for line in manifest_sha.read_text(encoding="utf-8").splitlines():
if not line.strip():
continue
digest, name = line.split(" ", 1)
listed.add(name)
target = root / name
if not target.exists():
print(f"[abort] 包内缺文件:{name}", file=sys.stderr)
return 2
actual = sha256_file(target)
if actual != digest:
print(f"[abort] 校验和不匹配:{name}\n 期望 {digest}\n 实际 {actual}",
file=sys.stderr)
return 2
print(f" ok {name}")
# 必备文件预检:校验和只能证明「已列出的文件完好」,发现不了「压根没打进包」。
# 缺 assets.db/.env 还往下走的话,目标机 data/ 与 .env 已被移走,
# 恢复出的却是空库,而且还会报「恢复成功」
missing = [
name for name in ("data/assets.db", ".env")
if name not in listed or not (root / name).exists()
]
if missing:
print(f"[abort] 迁移包缺必备文件:{', '.join(missing)}(尚未触碰目标机状态)",
file=sys.stderr)
return 2
ts = datetime.now().strftime("%Y%m%d_%H%M%S")
print("[2/4] 备份目标机现有状态…")
for src, tag in ((app_dir / "data", f"data.pre-restore-{ts}"),
(app_dir / ".env", f".env.pre-restore-{ts}")):
if src.exists():
dst = app_dir / tag
shutil.move(str(src), str(dst))
print(f" {src} -> {dst}")
print("[3/4] 恢复 data/ 与 .env…")
shutil.move(str(root / "data"), str(app_dir / "data"))
shutil.move(str(root / ".env"), str(app_dir / ".env"))
(app_dir / ".env").chmod(0o600)
escrow = app_dir / "data" / "master_key.escrow"
if escrow.exists():
escrow.chmod(0o600)
print("[4/4] 恢复完成。后续手工步骤(详见 docs/migration-runbook.md):")
print(" 1. systemctl start vps-manager && curl 127.0.0.1:8000/health 比对 version/commit")
print(" 2. tailscale serve --bg --https=443 http://127.0.0.1:8000(设备名沿用旧名可保持 URL 不变)")
print(" 3. .env 的 CORS_ORIGINS 加入新 HTTPS 域名(若 URL 变化)")
print(" 4. 各被管 VPS 的 /etc/vps-agent.env:VPS_MANAGER_URL 指向新地址后 restart vps-agent")
print(" 5. 确认新机数据无误后,源机 disable 全部 timer 并 stop 服务(防双写/双通知)")
print(" 6. 删除本迁移包与源机上的包副本(等同最高机密)")
return 0
finally:
shutil.rmtree(work, ignore_errors=True)
if __name__ == "__main__":
sys.exit(main())