待验证60% 置信事实时间未知
application-use使用macOS Accessibility API实现桌面自动化,该API可以枚举任意应用窗口中的UI元素层级树,获取按钮、文本框、菜单项的位置、标签、状态等属性
2
来源数
60%
置信度
长期有效
时效性
2026/6/1
首次发现
来源
涉及实体
相关事实
待验证在桌面场景中,智能体通常通过辅助功能 API(如 macOS 的 Accessibility API)或屏幕截图加视觉识别来操控应用界面。79% 相似待验证Windows-MCP 核心依赖 Windows UI Automation(UIA)框架,将桌面界面翻译成结构化的层级文本文档,为每个按钮和窗口提取元数据与坐标78% 相似已验证macOS 提供 Accessibility API 和系统级事件监听机制,允许应用在授权后获取活跃窗口、文档标题、URL 等上下文信息而无需侵入性屏幕截图78% 相似待验证macOS 的辅助功能框架基于 AX API,允许授权应用通过 AXUIElement 对象树访问其他应用的 UI 元素78% 相似待验证Prequel的自动缩放功能通过macOS辅助功能API(Accessibility API)获取界面元素位置和层级关系实现UI元素识别78% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/29243API
curl https://kongchang.com/api/v1/knowledge/claims/29243MCP
get_claim(id=29243)