基底:#251 头 174b631(堆叠于 #242 feat-ci-expand 之上), 基线 origin/main aebc6238;本轨不改 #251 已定语义、不动 workflow 门槛、不删检查、不加 skip。 lint(ruff E,F@120):109 -> 10 - F401 43 -> 0:删未用导入;try/except 双绑定的名字出现 “打地鼠”(删 except 分支后 try 分支又被标出),两分支 均已核对正文无引用后清掉;MCP 三模块的 Error 名不删, 改走 importlib 属性绑定(见下),两路径绑定都保留。 - E702 40 -> 0:全在 host.py main() 的 argparse 段,纯分行, tokenize 按分号 token 拆(含 2377 行多行语句只断首个分号); 一次 5 空格缩进失误已回滚重做并以 ast + 全量 host 测试验证。 - E501 13 -> 0:host.py 5 项随 E702 分行连带清掉;mcp_server 3 项把描述拆成相邻字面量(AST 比对 24 条工具描述与原值 完全一致,注意 ruff 按东亚宽度计长,CJK 算 2);test_host 5 项断开 git commit 参数表。 - E402 8 -> 10:生产侧 2 项清掉(db.py _re、github_app _base64 移到顶部,之前无引用、无重名);剩余 10 项全是 tests/ 的 sys.path 前置 import(6 项旧 + 4 个新测试文件 沿用同一既定模式),移上去会破坏单文件直跑,有意保留。 - F841 4 -> 0:只去绑定、不删调用(run_task、DB 入队、 tarfile 上下文、git 提交),各有注释与原测试/新测试覆盖; host dispatch_from_branch 新增真实 git 仓库回归测试。 - F811 1 -> 0:server 本地 _row_get 与 peer_messages.row_get 逐行相同,删本地定义,全部调用点解析到同一 import; 新增 test_server_row_get(同一对象 + 三路行为)。 mypy(生产范围):24 -> 0,零新增 type: ignore - no-redef 9 -> 0:MCP 三模块 try/except 两次 from-import 改 importlib.import_module + 属性绑定(cloud 优先、flat copy 回落、内层 ImportError 同样回落,语义与原来一致; flat-copy 子进程测试证实回落后 __module__ 为顶层名); server _row_get 随 F811 消除。 - arg-type 10 -> 0:harness2_tasks shared 改 TypedDict 逐键精确类型;CodexProbeAdapter 补 no-op validate_tree (_adapter_validate 本就跳过缺失方法,行为一致)。 - var-annotated 3 -> 0:sub2api _SHARED_ADMIN/_login_slots、 verify-multiuser RESULTS 加精确注解。 - assignment/misc 2 -> 0:marker_tools ZoneInfo 先声明 Any 再 try import(草稿先验 mypy 通过)。 bandit:总数 286 不变,High 仍 4 项,全在 host.py,本轨不改 (属第 3 项白名单轨范围),只做 triage: - 1319 run_verify:无插值,整串验测命令,管道/&& 须 shell 语义(新增 test_host_run_verify 断言管道与 && 真实生效)。 - 1497 notify:模板来自算子配置,三处插值全部 shlex.quote, 证据为既有 test_notify_failure_quotes_shell_metacharacters (; touch 与 $(touch ) 不执行)。 - 2099/2103 goal verify:无插值,任务配置验测串,同 run_verify。 - 无新增 High;pip-audit 0 漏洞。 覆盖率(同口径三套件 coverage 计量):75.96% -> 77.87% (22392 行/缺 5385 -> 22437 行/缺 4963,显示 76% -> 78%) - client.py 0% -> 90%(pipe 假子进程 + main 分支) - run_parallel.py 0% -> 97%、migrate 包装 0% -> 95% - playwright_mcp 37% -> 62%、imagegen_mcp 47% -> 79%、 websearch_mcp 51% -> 86%、deploy.py 56% -> 77% - verify-multiuser 0% -> 27%(仅 check/req helper;main() 是主机侧真实多用户实弹验证,按门禁不建生产任务、 不以 mock 冒充,仍为缺口) - host.py 55% -> 57%(文件 2020 -> 2060 行系 E702 分行 的计量口径变化,非代码膨胀) - 未到 85%:门槛保持 75% 不动,不删低覆盖模块出统计口径; 缺口主力仍是 server.py / worker.py / host.py 大文件, 下一阶段须针对性深测,非本轨快赢可及。 验证:三套件 1576 -> 1629 项全过(tests 127、cloud/tests 1449 skipped=4、deploy/tests 53);ruff E9 通过;mypy 0; bandit High 4(同上);pip-audit 0 漏洞;试跑产物已删, 提交后工作树干净。
106 lines
3.7 KiB
Python
106 lines
3.7 KiB
Python
"""run_parallel.py 单测(CI 第二阶段覆盖率:基线 0%)。
|
|
|
|
不跑真实 client.py/codex:只断言 main() 拼出的子进程命令
|
|
(可执行文件、client.py 路径、cwd 解析、sandbox 默认值、
|
|
approval-policy、codex-home 透传)与成功计数/返回码——
|
|
命令构造与汇总正是本文件的全部逻辑。
|
|
"""
|
|
|
|
import io
|
|
import json
|
|
import os
|
|
import sys
|
|
import tempfile
|
|
import unittest
|
|
from contextlib import redirect_stdout
|
|
from pathlib import Path
|
|
from unittest import mock
|
|
|
|
REPO_ROOT = Path(__file__).resolve().parents[1]
|
|
sys.path.insert(0, str(REPO_ROOT))
|
|
|
|
import run_parallel as rp_mod
|
|
|
|
|
|
class FakePopen:
|
|
seen = []
|
|
|
|
def __init__(self, cmd):
|
|
self.cmd = cmd
|
|
FakePopen.seen.append(cmd)
|
|
self._rc = 0
|
|
|
|
def wait(self):
|
|
return self._rc
|
|
|
|
|
|
class RunParallelTest(unittest.TestCase):
|
|
def _run(self, jobs, extra_args):
|
|
FakePopen.seen = []
|
|
with tempfile.TemporaryDirectory() as tmp:
|
|
jobs_path = os.path.join(tmp, "jobs.json")
|
|
with open(jobs_path, "w", encoding="utf-8") as f:
|
|
json.dump(jobs, f)
|
|
argv = ["run_parallel.py", "--jobs", jobs_path] + extra_args
|
|
with mock.patch.object(rp_mod.subprocess, "Popen", FakePopen), \
|
|
mock.patch.object(sys, "argv", argv):
|
|
out = io.StringIO()
|
|
with redirect_stdout(out):
|
|
rc = rp_mod.main()
|
|
return rc, list(FakePopen.seen), out.getvalue()
|
|
|
|
def test_commands_and_all_success(self):
|
|
jobs = [{"cwd": "job-a", "prompt": "review a"},
|
|
{"cwd": "/tmp/abs-b", "prompt": "review b",
|
|
"sandbox": "workspace-write"}]
|
|
rc, seen, out = self._run(jobs, ["--codex-home", "/tmp/ch"])
|
|
self.assertEqual(rc, 0)
|
|
self.assertEqual(len(seen), 2)
|
|
client = os.path.join(rp_mod.HERE, "client.py")
|
|
self.assertEqual(seen[0], [sys.executable, client,
|
|
"--prompt", "review a",
|
|
"--cwd", os.path.join(rp_mod.HERE, "job-a"),
|
|
"--sandbox", "read-only",
|
|
"--approval-policy", "never",
|
|
"--codex-home", "/tmp/ch"])
|
|
self.assertEqual(seen[1][5], "/tmp/abs-b")
|
|
self.assertEqual(seen[1][7], "workspace-write")
|
|
self.assertIn("2/2", out)
|
|
|
|
def test_one_failure_returns_1(self):
|
|
class FailingPopen(FakePopen):
|
|
def __init__(self, cmd):
|
|
super().__init__(cmd)
|
|
self._idx = len(FakePopen.seen)
|
|
|
|
def wait(self):
|
|
return 1 if self._idx == 2 else 0
|
|
|
|
jobs = [{"cwd": "/tmp/a", "prompt": "x"},
|
|
{"cwd": "/tmp/b", "prompt": "y"}]
|
|
FakePopen.seen = []
|
|
with tempfile.TemporaryDirectory() as tmp:
|
|
jobs_path = os.path.join(tmp, "jobs.json")
|
|
with open(jobs_path, "w", encoding="utf-8") as f:
|
|
json.dump(jobs, f)
|
|
with mock.patch.object(rp_mod.subprocess, "Popen",
|
|
FailingPopen), \
|
|
mock.patch.object(sys, "argv",
|
|
["run_parallel.py", "--jobs",
|
|
jobs_path]):
|
|
out = io.StringIO()
|
|
with redirect_stdout(out):
|
|
rc = rp_mod.main()
|
|
self.assertEqual(rc, 1)
|
|
self.assertIn("1/2", out.getvalue())
|
|
|
|
def test_empty_jobs_returns_0(self):
|
|
rc, seen, out = self._run([], [])
|
|
self.assertEqual(rc, 0)
|
|
self.assertEqual(seen, [])
|
|
self.assertIn("0/0", out)
|
|
|
|
|
|
if __name__ == "__main__":
|
|
unittest.main()
|