admin/codex-app-server
1
0 Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
376 Commits 3 Branches 0 Tags
e81ba8d2bfc6bd86b1ada6ccf1f04c4ff5dd77ce
Commit Graph
6 Commits
Author SHA1 Message Date
host 6f39ab3945 feat: 浏览器二期后端：远控服务 + ref 快照 + server 代理 
- playwright_remote.py（新）：MCP 进程内 Unix socket HTTP 服务，
  监听 worktree/.browser-remote.sock；GET /state、GET /stream
  （SSE 画面流）、POST /input、POST /control（接管/交还）。
  线程契约（实测）：Playwright 同步调用只能在创建页面的线程，
  所以 HTTP 线程只读属性/读最新帧/入队，MCP 主循环用
  select 轮询（50ms） draining 输入并 pump screencast 帧
  （无 ack 则 CDP 首帧后停流）。
- 画面流走 CDP screencast 帧（学 chrome-devtools-mcp），不用
  定时截图；ffmpeg 录像暂不做。
- snapshot_refs/click_ref（学 playwright-mcp 的 ref 机制）+
  mouse_move/key_press/type_text；agent 工具在 holder=user 时
  直接报错，等用户交还。
- server.py：/tasks/{id}/browser/{state,stream,input,control}
  代理到 worktree socket，复用任务鉴权与 worktree 解析；
  会话不存在时 503（轮次结束即消失是设计）。
- 播种器：MCP 脚本是系统文件，版本变化时刷新老租户旧脚本
  （script_refreshed 打日志），否则远控只对新项目生效；
  新增 playwright_remote.py 进播种清单。
- 队列遮蔽修复：cloud/queue.py 会遮蔽 stdlib queue，改用
  SimpleQueue（deque+锁），仓库模式与 flat-copy 两路都通。
- 测试：新 20 项（remote 服务、server 代理、ref/输入/
  screencast fake），全量 1354 项通过（skipped 4）。
 2026-10-30 06:44:24 +08:00
host 814fe8f7c2 feat: 浏览器一期：坐标点击 + live 截图 
- browser_click_at(x, y)：视口坐标点击（1280x800、左上角
  原点），越界与非数字拒绝；live 视图里用户在截图上的
  点击落点就走这个工具。
- browser_live_shot：固定文件 browser-live.png + 状态
  sidecar browser-live.json（URL/标题/时间戳），watcher
  轮询一个稳定路径即可；技能要求每次动作后都调一次，
  保持画面最新。
- MCP 新增 browser_click_at / browser_live_shot 两个工具；
  技能补 live 视图一节；测试 9 项（含 fake mouse、越界、
  live 文件与状态读回）。
 2026-10-30 06:19:55 +08:00
host c9a483282d feat: 浏览器自动化 MCP（Playwright）+ browser-automation 技能 
- playwright_browser.Browser：单页 Chromium，navigate /
  snapshot（正文 8000 字截断标记）/ click / fill / evaluate /
  screenshot（工作区内）/ close；启动参数 --no-sandbox +
  --disable-dev-shm-usage（runsc + 1003 用户实测必需），
  代理显式传给 launch（Chromium 在 Linux 下不稳定地读 env
  代理），浏览器路径 PLAYWRIGHT_BROWSERS_PATH=/opt/ms-playwright。
- playwright_mcp：stdio MCP，7 个 browser_* 工具，同一进程
  单 Browser 实例；测试用 fake browser / fake factory。
- worker：--playwright-mcp flag，_tenant_dirs 播种两个脚本 +
  [mcp_servers.playwright]，_prepare_tenant 写 env（代理 +
  浏览器路径，MCP 子进程不继承 Codex 进程 env，镜像 ENV
  在此必须重写，缺了会报 Executable doesn't exist）。
- 技能 browser-automation：JS 页、翻页、表单、截图时用，
  静态页优先 web_fetch / web_search；截图须 PIL 读回验证。
- 镜像（层构建，非本 PR）：FROM latest + fonts-noto-cjk +
  playwright + chromium（npmmirror）+ install-deps，3.77GB；
  runsc + 1003 + docker-codex 条件下 JS 执行、example.com
  标题、截图均已实测通过。
 2026-10-30 05:14:09 +08:00
host e13a95067c feat: 图片改图 MCP 工具 image_edit 
- imagegen.edit：POST multipart /v1/images/edits，输入图
  必须是工作区内 plain basename 且存在（上限 20MB），产出
  必须是新文件、绝不覆盖输入；响应解析与 generate 共用
  _save_image_response（url 或 b64_json、下载落盘、格式探测）。
- imagegen_mcp 新增 image_edit 工具；image-workflow 技能
  改图分支从“无专用工具”改为用 image_edit。
- 测试：multipart 体含提示词与原图字节、输入缺失/同名/
  路径逃逸拒绝、MCP 列表含 image_edit；全量相关 16 项过。
实测依据（2026-10-30）：中转站图片分组 key 调
gpt-image-2.5-flare edits 返回 200，URL 图为真实 PNG
1024x1024、909K，usage 含输入图 token（1659 image tokens）。
 2026-10-30 04:05:00 +08:00
host 33bd14638f feat: 图片生成 MCP 工具 image_generate（中转站图片分组） 
- cloud/imagegen.py：POST /v1/images/generations，解析 url 或
  b64_json，下载落盘到工作区；basename 校验防路径逃逸；
  缺 IMAGE_GEN_API_KEY 时明确报未配置，绝不回退任务自己
  的分组 2 key（分组 2 allow_image=False，回退只会 404）。
- cloud/imagegen_mcp.py：stdio MCP，工具 image_generate。
- worker --imagegen-mcp：租户 codex-home 播种脚本与
  [mcp_servers.imagegen]，容器启动前写 env（系统级
  IMAGE_GEN_* + 代理 + NO_PROXY 网关 host）。
- image-workflow 技能：有 image_generate 时用它生成，
  无工具或报未配置时明说无法生成；改图暂无专用工具。
- 测试：imagegen 9 项 + worker 播种/env 3 项。
实测依据（2026-10-30）：分组 4 key 调 gpt-image-2.5-flare
返回 200，URL 图为真实 PNG 1024x1024；此前分组 4 账号
schedulable=False 时全模型 404，调度开启后恢复。
部署注意（主机侧，不在代码里）：env 需配 IMAGE_GEN_API_KEY；
Tinyproxy 白名单需加 qinglanapi.top（下载返回图 URL 用）；
autoscaler 需加 --imagegen-mcp。
 2026-10-30 02:53:30 +08:00
host 8a26d1973c align: ChatGPT Codex 对齐第一批：技能包 + 对照表 
对照用户提供的 ChatGPT Codex 工具目录，区分可对齐与
不照搬：核心编程工作流已对齐，ChatGPT 托管专属
（CUA、宠物、Docs/Sites 连接器、图片生成模型）不在
开源宿主编排层范围，不凭空宣称对齐。

第一批只补技能层，不改 worker、不改生产行为：
- cloud/skills/live-info：天气/时区/股票/体育，查一级
  来源、带来源和快照时间，绝不编数字。
- cloud/skills/document-tools：LaTeX/Word/PDF/表格/
  演示文稿，先核查工具、缺了明说、产出后重读验证。
- cloud/skills/image-workflow：已有图片处理 + 生成工具
  已配置时才生成，未配置时明说、绝不顶替。
- docs/chatgpt-codex-alignment.md：逐项对照表与不照搬
  的诚实边界，方向为自动化编程任务平台。
- cloud/tests/test_chatgpt_codex_skills.py：校验技能
  frontmatter、名字与目录一致、正文非空、无密钥占位。

验证：新测试 2 项全过。播种进租户 codex-home、 worker
改动、CUA/连接器/图片模型均不在本批，另行评审。
 2026-10-30 01:16:49 +08:00