UI-Evol：计算机使用知识演化

原文链接： UI-Evol: Automatic Knowledge Evolving for Computer Use Agents [102]

论文信息

• 年份：2025 [102]
• 作者：Ziyun Zhang, Xinyi Liu, Xiaoyi Zhang, Jun Wang, Gang Chen, Yan Lu [102]
• 作者背景（研究领域）：计算机使用代理/知识演化 [102]
• 前后血缘关系（同主题）：前序：OSWorld；后续：无（计算机使用知识演化方向代表）

主旨

UI-Evol 的主旨是通过自动化知识演化机制保持计算机使用代理对 UI 变化的适应能力，使其在动态界面中持续有效。[102]

背景与问题定义

论文指出 UI 环境变化快，代理很容易因界面更新而失效。静态知识库无法长期支撑代理执行，需要引入自动化的知识演化流程。[102]

方法与机制

UI-Evol 构建 UI 知识更新机制，自动检测界面变化并更新操作策略。系统通过持续学习与知识对齐，保持代理对新界面的可用性。[102]

实验与结果

实验显示，自动化知识演化显著提高了代理在 UI 变更场景下的稳定性与成功率。[102]

关键数据结果

• 知识演化机制提升了代理在动态 UI 环境中的长期稳定性。[102]

工程启示（优化点）

• 构建可持续更新的 UI 知识库，避免能力老化。
• 追踪 UI 变化并触发自动更新流程。
• 在回归集中纳入新界面样本，监控退化。
• 将知识演化过程与权限管理对齐，降低风险。

局限与延伸

UI-Evol 需要高质量的 UI 变化检测与标注，维护成本较高。延伸方向包括：更自动化的 UI 变化识别、跨应用知识迁移，以及与安全策略结合的演化治理。[102]