微软发布全新 Agent 操作系统 UFO²,深度整合 Windows 与智能自动化
微软宣布重磅升级其开源项目 AgentUFO,推出了全新的 UFO² 版本,该版本新增了操作系统功能,并与 Windows 系统实现了深度集成。此举不仅增强了自动化任务的执行效率,还使得用户能够更便捷地进行复杂操作。
UFO² 的一个显著特点是其能够直接调用 Windows 的原生 API 和 COM 接口。这种方式相比传统的机器人流程自动化(RPA),能够在执行复杂业务时更加高效且精准。例如,在 Excel 中将表格数据转换为图表,传统 RPA 需要模拟多次点击鼠标,而 UFO² 则可以通过一次 API 调用轻松完成,避免了视觉定位和鼠标模拟的繁琐。
通过测试数据显示,UFO² 在自动化任务的成功率方面,显著高于 OpenAI 的 Operator。在不同的测试场景中,UFO² 的成功率分别达到了30.5% 和32.7%,而 Operator 的成功率仅为20.8% 和14.3%。此外,UFO² 在处理复杂任务和跨应用操作的表现上也明显优于 Operator,其在非标准界面的适应性更强。
UFO² 的核心控制组件 HostAgent 负责解析用户指令、管理应用程序生命周期和协调 AppAgents 的执行。当用户通过自然语言发出自动化指令时,HostAgent 会将任务分解为一系列子任务,并将其分配给相应的 AppAgents 执行。
每个 AppAgent 专注于特定的 Windows 应用程序,能够以更高的效率执行任务。UFO² 还引入了混合控制检测机制,结合视觉输入与应用程序的元数据,提升了系统对 GUI 元素的感知能力。这一创新使得 AppAgent 能够在标准和非标准环境中都能稳定工作。
另一个值得注意的创新是 UFO² 的画中画模式。这一功能实现了自动化任务与用户主桌面的隔离,用户可以在主桌面上正常操作,而自动化任务则在独立的虚拟桌面中运行。这种设计提升了用户体验,降低了系统干扰和潜在安全风险。
UFO² 的这些新功能展现了微软在自动化领域的最新技术进步,为用户提供了更加高效、灵活的工作环境。

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
阶跃星辰开源图像编辑模型 Step1X-Edit
阶跃星辰宣布开源图像编辑大模型Step1X-Edit,性能达到开源 SOTA。 根据介绍,该模型总参数量为19B(7B MLLM + 12B DiT),具备语义精准解析、身份一致性保持、高精度区域级控制三项关键能力;支持11类高频图像编辑任务类型,如文字替换、风格迁移、材质变换、人物修图等。 “一句话总结:Step1X-Edit,不只能“改图”,更能“听得懂、改得准、保得住”。” 阶跃星辰方面表示,Step1X-Edit 首次在开源体系中实现 MLLM 与 DiT 的深度融合,在编辑精度与图像保真度上实现大幅提升。在最新发布的图像编辑基准 GEdit-Bench 中,Step1X-Edit 在语义一致性、图像质量与综合得分三项指标上全面领先现有开源模型,比肩 GPT-4o 与 Gemini 2.0 Flash。 模型特点 语义精准解析:支持自然语言描述的复杂组合指令,指令无需模板,能够灵活应对多轮、多任务编辑需求,同时支持对图像中文字进行识别、替换与重构; 身份一致性保持:编辑后能稳定保留人脸、姿态与身份特征,适用于虚拟人、电商模特、社交图像等高一致性场景; 高精度区域级控制:支持对指...
- 下一篇
OceanBase 任命 CTO 杨传辉担任 AI 战略一号位
OceanBase CEO 杨冰发布全员信,宣布全面进入 AI 时代,并启动人才和组织体系升级。着力打造“DATA × AI”核心能力,构建 AI 时代的数据底座。 杨冰认为,AI 将重塑一切。“OceanBase 将全面进入 AI 时代,我们有信心打造出 AI 时代最好的数据底座,这是时代赋予我们的机遇和责任!” 具体举措包括: 任命 CTO 杨传辉担任 AI战略一号位,全面统筹A1战略制定和技术产品落地。 成立 AI平台与应用部,由杨传辉Acting,ODC、OAS 两个团队合并到 AI平台与应用部,蔡飞志、王赫加入该团队全力推进“DATAxAI”平台的搭建与应用开发,该团队将核心打造 RAG、AI平台、知识库等能力。 在原有 OceanBase 底层引擎团队里,新成立 A1引擎组由席华锋负责,单海康、黄人煌加入该团队,聚焦打造AI推理引擎,席华锋继续向韩富晟汇报,原席华锋负责的系统组也直接向韩富晟汇报。 全员信全文如下:
相关文章
文章评论
共有0条评论来说两句吧...