后端
- asset_service: delete_asset 先清 subdomains/site_certs 子表(SQLite 不强制
FK 且 assets.id 无 AUTOINCREMENT,删最大 id 后新建会复用 rowid 导致孤儿误挂);
metrics.db 清理改 best-effort,不再让已成功的删除返回 500
- provider_service: slug 唯一约束竞态补 IntegrityError 兜底(与 account_service 一致)
- account_service/sync_service: raise HTTPException 补 from e,保留原始异常链
- sync_service: 删死代码 _load_config;新增 BalanceUnsupported,平台无余额接口时
计入 skipped 而不是静默当作失败;到期日写库前归一
- ai: 删掉 OpenAI 早已下线的 billing 余额接口实现,能力探测如实报「不支持」
- adapters/base: _overridden 改走 MRO,中间层基类实现的能力不再被误判为未实现
- core/timeutils: 删死代码 utcnow_iso(注释声称 Z 后缀,实际输出 +00:00)
- main: lifespan 退出时 await 被 cancel 的清理任务,避免 pending task 被销毁
- ssl_service: 写 site_certs/subdomains 前校验 asset_id 存在,杜绝悬空引用;
到期阈值贯穿 _judge_status/_apply_probe/check_one/check_all_site_certs
- routers/credentials、accounts: 明文密码 GET 补 Cache-Control: no-store
- routers/stats: /stats/expiring 的 Query 描述与实际语义对齐(不设下界,含已过期)
Agent
- collector: 解析 sshd_config 的 Include(含 sshd_config.d/*.conf,按 sshd 语义
「首次出现的值生效」),未显式配置的关键字按编译默认值判定,消除假 pass;
防火墙检测改用 iptables -S 统计 -A 规则行并读 INPUT 策略(-L -n 恒有链头输出)
- reporter: 4xx(除 429)不再重试直接退出,429 优先按 Retry-After 退避
安全与部署
- core/security: require_agent_key 改为对外 fail-closed——tailnet/本机放行,
外部来源未配 AGENT_KEY 时一律 401(此前全放行,而服务默认监听 0.0.0.0,
公网上任何人可伪造监控指标与安全检查结果)
- main: 启动时把「未配 API_KEY/AGENT_KEY 则外部来源不可用」打进日志
- run.sh: HOST/PORT 可用环境变量覆盖,并说明默认 0.0.0.0 的权衡
- deploy/setup.sh: 新装时自动生成随机 API_KEY/AGENT_KEY 并提示同步到各 VPS;
注册 vps-cert-check.timer
- deploy/vps-cert-check.{service,timer}: 新增每日 09:30 的站点证书到期探测
(此前 check_site_certs.py 没有任何 unit,证书提醒不会自动跑)
- deploy/update.sh: sync_units 对 timer 用 enable --now(新增 timer 只 restart
不会建开机自启软链),主服务 unit 变更后额外 restart;pip 安装失败不再被吞
- scripts/check_site_certs.py: threshold 参数真正生效并打印
- scripts/make_migration_bundle.py: 缺 assets.db 直接 abort;umask 077 + chmod 600
(包内含 .env 的 MASTER_KEY 与 escrow,不能默认 644 落在 /tmp)
- scripts/restore_migration_bundle.py: 校验之外补必备文件预检,缺文件在触碰
目标机状态之前就 abort
前端
- store: 拆分列表口径 assets 与统计口径 allAssets(无筛选时同源,不重复请求);
删除已无消费者的 expiring/loadExpiring(每次 loadAll 白发一个请求)
- dashboard/monitor/providers/subscriptions/modals: 统计与计数改用 allAssets,
资产页的筛选(含统计卡片点击跳转带的筛选)不再让其他视图的数字缩水
- modals: 账号同步后补 loadOverview;settings: 导入后改 loadAll
- api: countdownText 支持 unit/empty 选项,monitor/domains 各自的实现改为委托,
assets/domains/subscriptions 的到期列不再直出「(-3天)」
- servers: cpu/mem/disk 百分比统一判空,采样缺项不再渲染「null%」
- assets: 同步 AI 余额的结果提示区分 skipped(平台无余额接口)与 failed
- modals: 修正凭据库头注释——2FA 动态码是选填 + 可事后补验,与实现一致
测试
- 新增 tests/test_agent_collector.py(8 条)、tests/test_security.py(11 条)
- 全量 113 passed;改动 JS 均通过 node --check,deploy 脚本通过 bash -n
- 浏览器实测:筛选态下总览/监控中心/平台页/付费资产的统计仍为全量口径,
到期文案与 null 百分比渲染正确,console 零报错
128 lines
5.5 KiB
Python
128 lines
5.5 KiB
Python
"""迁移恢复:校验并解包迁移包到目标部署目录
|
||
|
||
在新机器运行(前提:已跑 deploy/setup.sh 完成代码/venv/units 部署):
|
||
sudo systemctl stop vps-manager vps-manager-update.timer
|
||
.venv/bin/python scripts/restore_migration_bundle.py <bundle.tar.gz> [--app-dir /opt/vps-manager]
|
||
sudo systemctl start vps-manager
|
||
|
||
行为:
|
||
- 按 manifest.sha256 逐文件校验,任一不匹配即拒绝恢复(防传输损坏/调包)
|
||
- 目标机现有 data/ 与 .env 先备份为 *.pre-restore-<ts>(可回滚)
|
||
- 解包 data/(两库 + escrow + backups)与 .env(chmod 600)
|
||
- 打印后续手工步骤(serve/agent/CORS/源机 timer 下线,见 docs/migration-runbook.md)
|
||
"""
|
||
|
||
import argparse
|
||
import hashlib
|
||
import shutil
|
||
import sys
|
||
import tarfile
|
||
import tempfile
|
||
from datetime import datetime
|
||
from pathlib import Path
|
||
|
||
|
||
def sha256_file(path: Path) -> str:
|
||
h = hashlib.sha256()
|
||
with path.open("rb") as f:
|
||
for chunk in iter(lambda: f.read(1 << 20), b""):
|
||
h.update(chunk)
|
||
return h.hexdigest()
|
||
|
||
|
||
def main() -> int:
|
||
ap = argparse.ArgumentParser(description="校验并恢复 vps-manager 迁移包")
|
||
ap.add_argument("bundle", help="迁移包 tar.gz 路径")
|
||
ap.add_argument("--app-dir", default="/opt/vps-manager", help="目标部署目录")
|
||
args = ap.parse_args()
|
||
|
||
bundle = Path(args.bundle)
|
||
app_dir = Path(args.app_dir)
|
||
if not bundle.exists():
|
||
print(f"[abort] 迁移包不存在:{bundle}", file=sys.stderr)
|
||
return 2
|
||
if not (app_dir / "app" / "main.py").exists():
|
||
print("[abort] 目标目录不像已部署的 vps-manager(缺 app/main.py),请先跑 deploy/setup.sh",
|
||
file=sys.stderr)
|
||
return 2
|
||
|
||
work = Path(tempfile.mkdtemp(prefix="vps-restore-"))
|
||
try:
|
||
with tarfile.open(bundle) as tar:
|
||
try:
|
||
# Python >= 3.11.4/3.12:官方数据过滤器(防路径穿越/硬链接等)
|
||
tar.extractall(work, filter="data")
|
||
except TypeError:
|
||
# 新机自带旧版 Python(如 3.10)无 filter 参数:手工校验成员路径
|
||
for m in tar.getmembers():
|
||
if m.name.startswith("/") or ".." in Path(m.name).parts:
|
||
print(f"[abort] 包内路径异常,拒绝解包:{m.name}", file=sys.stderr)
|
||
return 2
|
||
tar.extractall(work)
|
||
root = work / "bundle"
|
||
manifest_sha = root / "manifest.sha256"
|
||
if not manifest_sha.exists():
|
||
print("[abort] 包内缺 manifest.sha256,拒绝恢复", file=sys.stderr)
|
||
return 2
|
||
print("[1/4] 校验包内文件…")
|
||
listed: set[str] = set()
|
||
for line in manifest_sha.read_text(encoding="utf-8").splitlines():
|
||
if not line.strip():
|
||
continue
|
||
digest, name = line.split(" ", 1)
|
||
listed.add(name)
|
||
target = root / name
|
||
if not target.exists():
|
||
print(f"[abort] 包内缺文件:{name}", file=sys.stderr)
|
||
return 2
|
||
actual = sha256_file(target)
|
||
if actual != digest:
|
||
print(f"[abort] 校验和不匹配:{name}\n 期望 {digest}\n 实际 {actual}",
|
||
file=sys.stderr)
|
||
return 2
|
||
print(f" ok {name}")
|
||
|
||
# 必备文件预检:校验和只能证明「已列出的文件完好」,发现不了「压根没打进包」。
|
||
# 缺 assets.db/.env 还往下走的话,目标机 data/ 与 .env 已被移走,
|
||
# 恢复出的却是空库,而且还会报「恢复成功」
|
||
missing = [
|
||
name for name in ("data/assets.db", ".env")
|
||
if name not in listed or not (root / name).exists()
|
||
]
|
||
if missing:
|
||
print(f"[abort] 迁移包缺必备文件:{', '.join(missing)}(尚未触碰目标机状态)",
|
||
file=sys.stderr)
|
||
return 2
|
||
|
||
ts = datetime.now().strftime("%Y%m%d_%H%M%S")
|
||
print("[2/4] 备份目标机现有状态…")
|
||
for src, tag in ((app_dir / "data", f"data.pre-restore-{ts}"),
|
||
(app_dir / ".env", f".env.pre-restore-{ts}")):
|
||
if src.exists():
|
||
dst = app_dir / tag
|
||
shutil.move(str(src), str(dst))
|
||
print(f" {src} -> {dst}")
|
||
|
||
print("[3/4] 恢复 data/ 与 .env…")
|
||
shutil.move(str(root / "data"), str(app_dir / "data"))
|
||
shutil.move(str(root / ".env"), str(app_dir / ".env"))
|
||
(app_dir / ".env").chmod(0o600)
|
||
escrow = app_dir / "data" / "master_key.escrow"
|
||
if escrow.exists():
|
||
escrow.chmod(0o600)
|
||
|
||
print("[4/4] 恢复完成。后续手工步骤(详见 docs/migration-runbook.md):")
|
||
print(" 1. systemctl start vps-manager && curl 127.0.0.1:8000/health 比对 version/commit")
|
||
print(" 2. tailscale serve --bg --https=443 http://127.0.0.1:8000(设备名沿用旧名可保持 URL 不变)")
|
||
print(" 3. .env 的 CORS_ORIGINS 加入新 HTTPS 域名(若 URL 变化)")
|
||
print(" 4. 各被管 VPS 的 /etc/vps-agent.env:VPS_MANAGER_URL 指向新地址后 restart vps-agent")
|
||
print(" 5. 确认新机数据无误后,源机 disable 全部 timer 并 stop 服务(防双写/双通知)")
|
||
print(" 6. 删除本迁移包与源机上的包副本(等同最高机密)")
|
||
return 0
|
||
finally:
|
||
shutil.rmtree(work, ignore_errors=True)
|
||
|
||
|
||
if __name__ == "__main__":
|
||
sys.exit(main())
|