待验证90% 置信事实时间未知
Codex团队利用macOS的辅助功能框架(Accessibility Framework)提取界面的结构化语义树(Accessibility Tree),而非完全依赖截图来理解界面
1
来源数
90%
置信度
中期 (~90 天)
时效性
2026/6/1
首次发现
有效期至:2026/8/30
来源
实测OpenAI Codex Computer Use:AI自动操控Mac桌面全流程体验
bilibili量子菠萝_
涉及实体
相关事实
待验证Codex使用独立于用户的虚拟光标,通过macOS辅助功能API中的AXUIElement接口直接对目标界面元素执行操作,而非模拟系统级鼠标键盘事件71% 相似已验证Codex支持macOS Apps插件和Computer Use插件,前者用于构建原生macOS应用,后者让Codex操控电脑进行自动化测试70% 相似待验证Windows平台由于更开放的输入法和钩子机制,系统级AI文本补全工具比macOS更早成熟。67% 相似待验证OpenAI 的 Operator、Anthropic 的 Computer Use 以及微软的 UFO Agent 框架均将 Accessibility Tree 作为主要的页面感知通道67% 相似待验证Codex可以结合Excalidraw等MCP工具自动生成系统架构图66% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/23386API
curl https://kongchang.com/api/v1/knowledge/claims/23386MCP
get_claim(id=23386)