Archived
为什么:文件 IO 这条线上 to_thread 用得过宽。凡是「单文件 exists / unlink / stat」 这类微秒级元数据操作,线程调度开销(几十微秒起)比操作本身还大,套 to_thread 只是 给同步调用加了层异步外壳,不产生任何并发收益;真正需要卸载的是整库复制、ZIP 整段 拷贝、SQLite 探测这类活。本批按这个口径把两端都摆正,并顺手修掉一处真实缺陷。 改动: - web/routers/admin_site.py 备份上传:原 `content = await f.read()` 会把整库一次性 读进内存(端点对外无大小上限,等于给了上传方一个内存放大器),落盘后还要把文件 重新打开读一次头。改为 _save_upload_stream 按 1 MiB 逐块搬运——内存占用恒为一块, 文件头在写第一块时就地截获(省掉那趟回读)。仍属阻塞 IO,故保留在 to_thread 里。 - web/routers/admin_site.py backup_list:撤掉仅为一次 stat 而拆出的嵌套函数 + to_thread,直接在事件循环里做完。 - web/routers/admin.py:save_cookie / logout / _get_cookie_info 四处 to_thread 改 直接调用——它们读写 1KB 级的 cookie.txt,全程不碰网络。 - music_api/qr_client.py:logout() 的 print 改 logger。该方法既被 CLI 也被 admin 端点调用,在 web 语境里 print 会把内容直接喷到服务端 stdout,绕过 logging 配置、 无法被收集,也污染容器日志。 - auth_system/backup.py:三处单文件 unlink(占位文件回滚、删备份、裁剪 pre_restore_) 改直接同步;把只为配合 to_thread 而拆出的 _backup_path_sync 并回 backup_path。 保留在线程里的:整库 copy2 / os.replace、glob + N 次 stat、SQLite 探测、以及持 跨线程锁的 _reserve_backup_path(内联会让事件循环等一把别的线程可能持有的锁)。 - web/routers/delivery.py:两处 os.path.exists 改直接同步(带 ASYNC240 行内豁免, 与 core/db.py、auth_system/db.py 同一写法),顺带删掉随之未使用的 asyncio 导入。 - pyproject.toml / uv.lock:移除 aiofiles。它全仓零引用,且底层同样是 to_thread—— 对 1KB 的 cookie 文件不会带来任何真异步收益。 验证: - uv run ruff check . → All checks passed! - uv run pyright → 0 errors, 0 warnings, 0 informations - uv run pytest → 392 项,0 失败 / 0 error / 0 skipped (含 test_admin_backup_upload 四条:接受真实 SQLite / 缺字段拒 / 后缀拒 / 后缀对但内容非库必须拒且不留半成品) - data/site.db sha256 前后一致(a19f5dbf…6487),无 -wal/-shm 残留
185 lines
7.1 KiB
Python
185 lines
7.1 KiB
Python
# -*- coding: utf-8 -*-
|
||
"""管理员扫码登录 / Cookie 管理 / 操作记录。
|
||
|
||
端点:
|
||
- POST /api/v1/admin/qr/create ↔ Flask /admin/qr/create
|
||
- POST /api/v1/admin/qr/check ↔ Flask /admin/qr/check
|
||
- POST /api/v1/admin/cookie/status ↔ Flask /admin/cookie/status
|
||
- POST /api/v1/admin/cookie/delete ↔ Flask /admin/cookie/delete
|
||
- POST /api/v1/admin/logs ↔ Flask /admin/logs
|
||
|
||
鉴权:管理员密码闸(文案"需要管理员权限,请使用管理员账号登录"),
|
||
与 auth_system.admin_required 的文案不同,故本模块用本地 admin 闸保持逐字对齐。
|
||
|
||
说明:QRLoginManager 已异步化(直接 await)。QRLoginClient 的 save_cookie/logout/
|
||
_get_cookie_info 是**微秒级本地文件操作**——读写 1KB 级的 cookie.txt、os.replace、
|
||
unlink,全程不碰网络;对它们走 to_thread,线程调度开销比操作本身还大,且并不产生
|
||
任何并发收益。故直接同步调用(to_thread 在这里只是给同步 API 套了层异步外壳)。
|
||
"""
|
||
import asyncio
|
||
import logging
|
||
from typing import Annotated
|
||
|
||
from fastapi import APIRouter, Depends, Request
|
||
|
||
from core.state import GLOBAL_MUSIC_U_CACHE, REQ_LOG, VIP_CACHE
|
||
from web import ratelimit
|
||
from web.deps import SiteUser, current_user
|
||
from web.errors import AppError
|
||
from web.request_utils import request_data as _request_data
|
||
from web.request_utils import safe_int as _safe_int
|
||
from web.response import error, success
|
||
|
||
router = APIRouter()
|
||
|
||
logger = logging.getLogger('web.admin')
|
||
|
||
|
||
async def _require_admin(user: Annotated[SiteUser | None, Depends(current_user)]) -> SiteUser:
|
||
"""管理员闸(文案与历史实现逐字对齐)。"""
|
||
if user is None or not user.is_admin:
|
||
raise AppError('需要管理员权限,请使用管理员账号登录', 403)
|
||
return user
|
||
|
||
|
||
AdminUser = Annotated[SiteUser, Depends(_require_admin)]
|
||
|
||
|
||
|
||
|
||
|
||
def _admin_client():
|
||
from music_api.qr_client import QRLoginClient
|
||
return QRLoginClient()
|
||
|
||
|
||
def _reset_caches() -> None:
|
||
"""Cookie 变更后清 VIP 探测缓存与全局 MUSIC_U 缓存。"""
|
||
VIP_CACHE['data'] = None
|
||
VIP_CACHE['ts'] = 0.0
|
||
GLOBAL_MUSIC_U_CACHE['v'] = None
|
||
GLOBAL_MUSIC_U_CACHE['ts'] = 0.0
|
||
|
||
|
||
async def _render_qr_svg(unikey: str) -> str:
|
||
def _build() -> str:
|
||
import qrcode
|
||
from qrcode.image.svg import SvgPathImage
|
||
qr = qrcode.QRCode(error_correction=qrcode.constants.ERROR_CORRECT_M) # type: ignore[attr-defined]
|
||
qr.add_data(f'https://music.163.com/login?codekey={unikey}')
|
||
qr.make(fit=True)
|
||
svg = qr.make_image(image_factory=SvgPathImage).to_string()
|
||
return svg.decode('utf-8') if isinstance(svg, bytes) else svg
|
||
|
||
return await asyncio.to_thread(_build)
|
||
|
||
|
||
@router.post('/admin/qr/create')
|
||
async def admin_qr_create(_admin: AdminUser, request: Request):
|
||
"""生成管理员登录二维码(返回 SVG)。"""
|
||
await ratelimit.guard(request, bucket='free', limit=30, window=60)
|
||
try:
|
||
client = _admin_client()
|
||
unikey = await client.qr_manager.generate_qr_key()
|
||
except Exception:
|
||
return error('服务暂时不可用,请稍后再试', 500)
|
||
if not unikey:
|
||
return error('生成二维码失败', 500)
|
||
try:
|
||
svg = await _render_qr_svg(unikey)
|
||
except Exception:
|
||
return error('服务暂时不可用,请稍后再试', 500)
|
||
return success({'unikey': unikey, 'qr_svg': svg, 'expires_in': 180}, '二维码生成成功')
|
||
|
||
|
||
@router.post('/admin/qr/check')
|
||
async def admin_qr_check(_admin: AdminUser, request: Request):
|
||
"""轮询二维码登录状态,成功时自动保存 Cookie。"""
|
||
await ratelimit.guard(request, bucket='free', limit=30, window=60)
|
||
data = await _request_data(request)
|
||
unikey = data.get('unikey')
|
||
if not unikey:
|
||
return error('缺少 unikey 参数')
|
||
try:
|
||
client = _admin_client()
|
||
code, cookie_dict = await client.qr_manager.check_qr_login(unikey)
|
||
except Exception:
|
||
return error('服务暂时不可用,请稍后再试', 500)
|
||
|
||
if code == 803:
|
||
musu_u = cookie_dict.get('MUSIC_U', '')
|
||
if not musu_u:
|
||
return error('登录成功但未获取到 Cookie', 500)
|
||
cookie = f'MUSIC_U={musu_u};os=pc;appver=8.9.70;'
|
||
if cookie_dict.get('__csrf'):
|
||
cookie += f"__csrf={cookie_dict['__csrf']};"
|
||
saved = client.save_cookie(cookie)
|
||
if not saved:
|
||
return error('登录成功但 Cookie 保存失败', 500)
|
||
_reset_caches()
|
||
logger.info('二维码登录成功,Cookie 已自动保存')
|
||
info = client._get_cookie_info()
|
||
return success({'status': 'success', 'cookie_info': info}, '登录成功,Cookie 已保存')
|
||
if code == 801:
|
||
return success({'status': 'waiting'}, '等待扫码')
|
||
if code == 802:
|
||
return success({'status': 'scanned'}, '已扫码,请在手机上确认登录')
|
||
if code == 800:
|
||
return success({'status': 'expired'}, '二维码已过期')
|
||
return success({'status': 'error', 'code': code}, f'登录状态异常({code})')
|
||
|
||
|
||
@router.post('/admin/cookie/status')
|
||
async def admin_cookie_status(_admin: AdminUser, request: Request):
|
||
"""获取当前 Cookie 状态。"""
|
||
await ratelimit.guard(request, bucket='free', limit=30, window=60)
|
||
try:
|
||
client = _admin_client()
|
||
info = client._get_cookie_info()
|
||
return success(info, '获取 Cookie 状态成功')
|
||
except Exception:
|
||
return error('服务暂时不可用,请稍后再试', 500)
|
||
|
||
|
||
@router.post('/admin/cookie/delete')
|
||
async def admin_cookie_delete(_admin: AdminUser, request: Request):
|
||
"""删除(清除)Cookie,备份后删除,可重新扫码登录。"""
|
||
await ratelimit.guard(request, bucket='free', limit=30, window=60)
|
||
try:
|
||
client = _admin_client()
|
||
ok = client.logout()
|
||
if not ok:
|
||
info = client._get_cookie_info()
|
||
return error(
|
||
f"Cookie 清除失败(文件仍存在:{info.get('file_exists')},"
|
||
f"可能被占用或为挂载点,请手动删除)", 500)
|
||
_reset_caches()
|
||
logger.info('管理员已清除 Cookie')
|
||
info = client._get_cookie_info()
|
||
return success(info, 'Cookie 已清除')
|
||
except Exception:
|
||
return error('服务暂时不可用,请稍后再试', 500)
|
||
|
||
|
||
@router.post('/admin/logs')
|
||
async def admin_logs(_admin: AdminUser, request: Request):
|
||
"""用户 IP 解析/下载记录(分页,最新在前)。"""
|
||
await ratelimit.guard(request, bucket='free', limit=30, window=60)
|
||
data = await _request_data(request)
|
||
try:
|
||
page = max(1, _safe_int(data.get('page'), 1))
|
||
page_size = max(1, min(50, _safe_int(data.get('page_size'), 10)))
|
||
except ValueError:
|
||
return error('参数格式错误')
|
||
logs = list(reversed(REQ_LOG))
|
||
total = len(logs)
|
||
start = (page - 1) * page_size
|
||
items = logs[start:start + page_size]
|
||
return success({
|
||
'total': total,
|
||
'page': page,
|
||
'page_size': page_size,
|
||
'pages': max(1, (total + page_size - 1) // page_size),
|
||
'items': items,
|
||
}, '获取操作记录成功')
|