腾讯WorkBuddy上线电脑操控能力,无需接口即可后台操作软件
摘要
腾讯WorkBuddy正式上线电脑操控(Computer Use)能力,可识别页面与客户端界面并执行点击、输入、滚动等操作,无需目标软件开放接口。该功能处于公测阶段,支持macOS与Windows,需客户端升级至5.11.0及以上版本并完成授权。
腾讯WorkBuddy于11月20日宣布上线电脑操控(Computer Use)能力,使AI助手可以直接对电脑界面执行操作。与依赖软件接口的常规方案不同,该能力通过识别当前页面、理解客户端界面来完成任务,因此目标软件无需开放接口,操作也能在后台进行。
从使用方式看,用户只需在对话框中描述任务,Buddy便会根据任务意图调用相应的电脑操作,包括点击、输入和滚动。执行过程中,用户可通过侧边小窗查看进度;任务结束后,Buddy会汇报执行结果。
该功能目前处于公测体验阶段,覆盖macOS与Windows两大平台。用户需将客户端更新至5.11.0及以上版本,并手动开启功能、完成相关授权。官方同时提示,界面识别效果会因软件不同而存在差异。
在安全层面,腾讯建议用户在涉及登录、授权、支付、提交、删除等敏感操作时保持在场,实时监控执行过程。这一提醒也反映出,电脑操控能力在提升自动化效率的同时,仍需人工对关键环节进行把关。
本文由新大陆基于公开信息编辑整理
信息来源:IT之家 IT之家原文 ↗