Archived
snowy-yang
046225e38d
为什么：aria2p 内部是 requests + websocket-client 的同步实现，每个 RPC 都是一次 「同步网络 IO 藏在 to_thread 里」——线程池跑得再满也不产生真正的并发，每次轮询 还要额外付一次线程跳转。这是本项目最后一处此类残留，删掉后整个进程的网络 IO 都走同一个 aiohttp 连接池。 改动： - music_downloader/_aria2.py 整体重写：新增 _Aria2Rpc，直接向 aria2 的 JSON-RPC 2.0 端点发 getVersion / addUri / tellStatus / forceRemove / removeDownloadResult，一律走 core.http_client.request_once（不重试，与 aria2p 口径一致）；新增 Aria2RpcError 承载 HTTP 200 + error 对象的协议错误。 - _abort 逐条复刻 aria2p.remove(force=True, files=?, clean=True) 语义：终态走 removeDownloadResult；在途先 forceRemove 再清结果表；控制文件 .aria2 无条件 删除（clean=True 默认）；仅当 files 且主移除成功才删数据文件。 - get_backend / _try_start 改原生异步：asyncio.Lock 单飞 + await rpc.get_version() 探活，不再用 to_thread 包 subprocess.Popen；超时路径改 to_thread(_reap) 回收。 - 新增 Protocol _Rpc / _ProcessHandle（补 returncode 声明）——只声明本模块真正 调用的方法，测试据此用轻量替身驱动状态机，不必依赖真实 aria2 进程。 - pyproject.toml 删 aria2p 依赖并同步更新过时注释；uv lock 连带移除 8 个传递 依赖：requests / urllib3 / websocket-client / charset-normalizer / loguru / platformdirs / win32-setctime。至此全仓无任何 requests 栈。 - tests/test_aria2.py 重写为 21 项用例（_FakeRpc / _FakeProc / _LiveProc / _FakeHTTP 替身），新增终态体积守卫、_try_start 三分支（就绪重试 / 超时不就绪 杀进程 / 进程提前退出）与 JSON-RPC 信封四例。 - tests/test_downloader.py 的 get_backend 替身由同步 lambda 改为协程——调用点 已直接 await，同步替身会被 await 成 None 而报 TypeError。 验证（在 aria2p 已物理移除的环境上复核，故能真正证明无残留依赖）： - uv run ruff check . → All checks passed! - uv run pyright → 0 errors, 0 warnings, 0 informations - uv run pytest → 392 项，0 失败 / 0 error / 0 skipped（基线 382，净增 10） - data/site.db sha256 前后一致（a19f5dbf…6487），无 -wal/-shm 残留
128 lines
5.6 KiB
TOML
128 lines
5.6 KiB
TOML
# -*- coding: utf-8 -*-
|
||
[project]
|
||
name = "yunmusic-assistant"
|
||
version = "3.0.0"
|
||
description = "云村小助手 · 网易云音乐解析/下载服务（FastAPI + asyncio + aiohttp）"
|
||
requires-python = ">=3.12"
|
||
dependencies = [
|
||
"fastapi>=0.115,<1.0",
|
||
"uvicorn[standard]>=0.30,<1.0",
|
||
"aiohttp>=3.10,<4.0",
|
||
"aiosqlite>=0.20,<1.0",
|
||
"aiofiles>=24.1",
|
||
"itsdangerous>=2.2,<3.0",
|
||
"cryptography>=50.0,<51.0",
|
||
"qrcode>=7.0,<8.3",
|
||
"python-multipart>=0.0.9",
|
||
"filetype>=1.2.0",
|
||
"mutagen>=1.48.1",
|
||
]
|
||
|
||
[dependency-groups]
|
||
dev = [
|
||
"pytest>=8.0",
|
||
"pytest-asyncio>=0.24",
|
||
"ruff>=0.6",
|
||
"pyright>=1.1.390",
|
||
"httpx>=0.27",
|
||
"httpx2>=2.13.1",
|
||
]
|
||
|
||
# 应用工程（非库）：不把自身装进环境，避免 uv 扫描顶层模块
|
||
[tool.uv]
|
||
package = false
|
||
|
||
# ============ Ruff：静态检查 + 导入排序 + 格式化 ============
|
||
[tool.ruff]
|
||
target-version = "py312"
|
||
line-length = 120
|
||
extend-exclude = [".venv", ".zcode", "templates", "static", "frontend", "data"]
|
||
|
||
[tool.ruff.lint]
|
||
# E/F 基础错误、I 导入排序、B bugbear、UP 升级、C4 推导式、ASYNC 异步陷阱、S 安全、RUF
|
||
select = ["E", "F", "W", "I", "B", "UP", "C4", "ASYNC", "S", "RUF"]
|
||
ignore = [
|
||
"E501", # 行宽交给 formatter，不强制
|
||
"S101", # 生产代码外的 assert（测试/断言脚本）
|
||
"S104", # 绑定 0.0.0.0（服务端有意为之）
|
||
"S110", # try/except/pass（本项目「失败静默降级」策略）
|
||
"S112", # try/except/continue
|
||
"S324", # hashlib.md5 用于非安全场景（上游签名口径）
|
||
"S603", "S607", # subprocess（打包/运维脚本）
|
||
"UP009", # 保留 `# -*- coding: utf-8 -*-` 文件头（全项目既有约定）
|
||
"RUF001", "RUF002", "RUF003", # 全角字符（中文注释/文案，误报）
|
||
# ---- 以下为「有意保留」，已被逐条论证为协议/设计约束，非待修缺陷 ----
|
||
"RUF012", # 常量类可变默认值：APIConstants/PodcastConstants 是常量表，非实例状态
|
||
"S305", # AES-ECB：网易云 weapi 协议**要求**的加密模式，非可自由选择
|
||
"S311", # randrange：生成上游 requestId（协议随机数），非安全用途
|
||
"ASYNC250", # input()：music_api.qr_client 交互式 CLI 的人类输入，异步化无意义
|
||
"S310", # urllib：仅用于音频 Range 代理的 URL 校验路径
|
||
]
|
||
|
||
[tool.ruff.lint.per-file-ignores]
|
||
"tests/**" = ["S", "ASYNC"]
|
||
".zcode/**" = ["S", "ASYNC", "F"]
|
||
# ASYNC109：timeout 参数是有意 API——直接转发给 aiohttp 的 ClientTimeout，
|
||
# 不是「用 sleep 当超时」的反模式。
|
||
"core/http_client.py" = ["ASYNC109"]
|
||
# ASYNC109：timeout 是**总下载时限**（交给 aria2 轮询循环判定），不是「用 sleep 当超时」。
|
||
# ASYNC240：搬迁后才出现的阻塞文件操作只有 unlink（删残片/控制文件）——目录项删除，
|
||
# 微秒级且不碰网络，卸载到线程的调度开销大于操作本身，与 downloader.py 同口径。
|
||
"music_downloader/_aria2.py" = ["ASYNC109", "ASYNC240"]
|
||
# ASYNC230/240：残留的阻塞文件系统调用都是**本地元数据/短写**——exists()/stat()/
|
||
# os.replace()/往 .part 顺序写分块，微秒级且不碰网络，卸载到线程的调度开销大于操作
|
||
# 本身。真正的重活（mutagen 全量重写标签、zipfile 整段拷贝、shutil.rmtree、同步
|
||
# SQLite 落库）都已各自 to_thread 卸载；aria2 的 RPC 已改为手写原生异步实现
|
||
# （music_downloader/_aria2.py），不再是阻塞调用。
|
||
"music_downloader/downloader.py" = ["ASYNC230", "ASYNC240"]
|
||
"services/podcast.py" = ["ASYNC230", "ASYNC240"]
|
||
"services/batch.py" = ["ASYNC240"]
|
||
# ASYNC110：暂停闸门轮询的是**跨线程**置位的 threading.Event 与任务表状态——置位方
|
||
# 在请求线程/监控线程，不属于本事件循环，故不能用 asyncio.Event 取代（见 _taskcore
|
||
# 模块 docstring 的取消/暂停载体说明）。
|
||
"services/_taskcore.py" = ["ASYNC110"]
|
||
|
||
[tool.ruff.lint.isort]
|
||
known-first-party = ["core", "web", "services", "music_api", "auth_system", "music_downloader"]
|
||
|
||
[tool.ruff.format]
|
||
quote-style = "preserve"
|
||
|
||
# ============ Pyright：类型检查 ============
|
||
[tool.pyright]
|
||
# 全量纳入（Flask 巨石删除后不再有例外清单）
|
||
# 顶层模块与 tests 此前不在名单里——「pyright 0 错误」只覆盖了 core/web/services，
|
||
# 而早期 requests→aiohttp 迁移的遗留恰好全部躲在漏检的顶层模块中，故补齐。
|
||
include = [
|
||
"core",
|
||
"web",
|
||
"services",
|
||
"tests",
|
||
"music_api",
|
||
"auth_system",
|
||
"music_downloader",
|
||
"_mkpkg.py",
|
||
]
|
||
exclude = [".venv", ".zcode", "data", "downloads", "templates", "static", "frontend"]
|
||
venvPath = "."
|
||
venv = ".venv"
|
||
pythonVersion = "3.12"
|
||
typeCheckingMode = "standard"
|
||
reportMissingImports = true
|
||
# standard 比 basic 多出「变量可能未绑定 / 实参类型不符 / 无意义重定义 / 未使用符号」
|
||
# 等**可执行缺陷**（basic 全部漏报，实测 standard 多报 7 处真实缺陷），
|
||
# 故作为门禁级别；strict 的 reportUnknown* 需要给全部第三方库补存根，暂不启用。
|
||
# 以下三项在 standard 下已由类型系统覆盖，降为 warning 以避免第三方存根不全的噪声
|
||
reportOptionalMemberAccess = "warning"
|
||
reportAttributeAccessIssue = "warning"
|
||
|
||
# ============ Pytest ============
|
||
[tool.pytest.ini_options]
|
||
asyncio_mode = "auto"
|
||
testpaths = ["tests"]
|
||
addopts = "-q"
|
||
# 本工程不装进环境（package = false），且 tests/ 无 __init__.py，
|
||
# 故必须显式把项目根加入 import 路径——否则裸跑 `pytest` 时
|
||
# `import core` 必然 ModuleNotFoundError（只有 `python -m pytest` 才碰巧能用）。
|
||
pythonpath = ["."]
|