千问办公的电脑操控:能点能填,但边界在哪

2026-08-17

一、它真正对付的是「这个东西没有 API」

先说清楚什么处境下你会想起这个功能。

你手上有个二十年前的内网管理后台,只能在浏览器之外的客户端里点;或者一个设计工具,参数藏在四级菜单里,一次调三十个文件;再或者某个系统的数据只能在窗口里看,没有导出按钮,也没有开放接口。这类活儿的共同点是:逻辑一点都不难,难的是没有一个「程序能调用的入口」,只能靠人一下一下点。

千问办公帮助文档里的《电脑操控》页,对应的就是这块。文档的原话是让 QwenWork「直接『看到』和『操控』你的电脑屏幕——点击按钮、填写表单、切换应用」,并给这项能力起了个名字:Computer Use。

文档把它的使用场景列了四条,值得逐条看,因为这四条基本框定了它的适用面:操作没有 API 的桌面应用(文档举的例子是「在设计工具中调参数、在管理后台批量修改设置」)、跨应用工作流、GUI 验证与测试、信息收集整合(从没有导出功能的应用中提取数据)。

这一页里还藏着一句很关键的分流提示,官方自己写的:「对于网页任务,优先使用浏览器自动化——它比电脑操控更快更精准。」这句话的分量比它的位置大——它等于官方先给出了取舍口径:网页里的事别走电脑操控。后面第四节还会回到这一点。

顺带交代一句立场:我们没有开通千问办公的付费账号,也没有实际操作过这个产品,本文全部内容都是帮助中心文档的口径,不涉及任何界面外观、操作手感和执行效果的描述。

二、官方文档写明的开启路径与前置条件

文档把这个功能的启用拆成了三层:系统要求、连接器开关、系统权限。三层缺一层都用不了。

第一层,系统要求。《电脑操控》页的「系统要求」只有两行:macOS 14 或更高版本;需要授予辅助功能和屏幕录制权限。

第二层,连接器开关。 文档写明使用电脑操控前,需要先在连接器中开启「计算机控制」,给出的路径是「扩展 → 连接器」,在其中找到「计算机控制」卡片开启。文档还列出了开启时弹窗给出的三条能力说明,措辞逐字是:「AI 增强工具——提供桌面自动化能力:点击、输入、滚动、截图等桌面操控工具」「始终遵守权限——Computer Use 运行时会在需要时自行处理系统权限」「一切由你掌控——你可以随时在此弹窗关闭该连接器」。

第三层,两项系统权限。 文档写明开启连接器后、首次使用时会引导授予两项权限,各自的用途写得很直白:辅助功能权限用于读取应用的 UI 元素树,并执行点击、输入等操作;屏幕录制权限用于截取应用窗口的屏幕画面。屏幕录制这一项文档给了具体位置:在系统设置的「隐私与安全性」→「屏幕录制」中添加 QwenWork。

三层都过了之后,还有一个执行策略要选。文档给的是三档:

策略文档说明
每次询问(默认)AI 每次需要操控桌面时都会先征求你的确认
自动执行AI 直接执行桌面操作,无需逐次确认
禁用完全关闭电脑操控功能

这张表是本篇最该记住的一处。默认值是「每次询问」,另外两档都是你自己去改的结果。文档在「注意事项」里也写了对应建议:对于高风险场景,建议使用「每次询问」策略。

至于怎么触发,文档写的是在对话中直接描述需要在图形界面中完成的任务,QwenWork 会自动判断并启用电脑操控——也就是说没有一个「进入电脑操控模式」的独立入口,是模型按任务描述自行判断的。执行时文档描述的流程是四步循环:截屏、操作描述、实际操作、结果确认。文档同时提醒:过程中避免手动操作当前被 AI 控制的应用或窗口,你的操作可能与 AI 的动作冲突。

三、边界在哪:这一段才是重点

平台边界。 《电脑操控》页的系统要求只写了 macOS 14 或更高版本。帮助中心里确实另有一份《Windows 安装指南》,最低配置写的是 Windows 10(64-bit)或更高版本、x86_64 架构、500 MB 可用空间,但我们在那一页里没有找到关于电脑操控的对应说明,《电脑操控》页的系统要求里也没有出现 Windows。文档就写到这里,我们不替它推断 Windows 侧的情况。

授权的语义。 这一条必须原样引:文档写的是「授予访问权限意味着授予操控权限。启用后,AI 能以你的身份驱动电脑上的其他应用,效果等同于你本人操作。不需要时请在设置中禁用。」这不是那种开了也没什么影响的开关——辅助功能加屏幕录制两项权限凑齐,意味着一个能读屏、能模拟键鼠的进程以你本人的身份在你的桌面上活动。文档自己给了三条具体风险,我们照抄:部分操作不可撤销,AI 在桌面应用中执行的操作(如发送消息、删除文件)可能无法撤回;屏幕内容会被截取,屏幕上可见的任何内容(包括敏感信息)都可能被捕获,文档建议运行自动化前关闭含密码或私密数据的窗口;网络操作谨慎,如果 AI 操作了含有你登录状态的应用,它可以代你发送邮件、提交表单。

明确做不到的部分。 文档的「使用限制」写了三条:验证码和二步验证——AI 无法完成 CAPTCHA、短信验证码、人脸识别等操作,需要你手动介入;速度——电脑操控需要截屏和分析画面,比纯文本操作慢;精确度——界面复杂或元素密集时,AI 的点击精度可能不够高,如果操作失败,文档建议尝试描述得更具体。第一条是硬边界:任何一条流程中间横着验证码,它就走不到底,你得在场。后两条是文档自述的性质,我们没有跑过,不做任何量化描述。

几处口径需要自己对着看。 帮助中心里有两处表述和《电脑操控》页对不上,我们只陈述差异,不推断原因:

其一,《连接器》页把「内置连接器」列成三项——浏览器、macOS 应用、Microsoft 365,其中并没有「计算机控制」这一项;而《电脑操控》页写明要在「扩展 → 连接器」里开启的正是「计算机控制」。两处不一致。

其二,《系统设置》页有一张系统权限表,其中「辅助功能」一行的用途写的是「监听全局快捷键,用于快捷唤起等功能」;而《电脑操控》页写的是辅助功能权限用于读取应用的 UI 元素树并执行点击、输入等操作。同一项系统权限,两页给出的用途表述不同。

和定时任务组合时要多看两眼。 《定时任务》页写明每次触发时 QwenWork 拥有与你手动发起对话时完全一样的能力,括号里举的连接器是「浏览器自动化、macOS 原生应用」,并没有单独点名电脑操控。同一页还写明定时任务由本地桌面客户端调度、仅在电脑保持唤醒时运行,设备休眠或关机时该次执行会被跳过且不会自动补执行。想把无人值守的界面操作挂成定时任务,这两条得放在一起看:能力清单里没点名,加上休眠即跳过。

截屏内容怎么处理,文档没有说明这一点。 帮助中心的《隐私与安全》页,开篇的「适用范围」写明它说明的是本产品「在Web端以及钉内收集、使用、存储和保护用户数据的方式」,适用于通过钉钉客户端访问的个人用户以及为企业成员开通权限的组织管理员。桌面端电脑操控过程中产生的那些截屏,走的是什么链路、保留多久、是否离开本机,我们在这份文档里没有找到对应说明。这一条在把它用到含敏感信息的桌面之前,值得你自己去帮助中心和相关协议里再确认一遍。

最后是产品阶段。 千问办公官网的品牌标识旁挂着 Beta 角标,页头与页脚各一处,品牌链接的无障碍标签逐字写的是「千问办公 Beta 官网首页」。功能、权益与套餐随版本变动,本文引用的文档表述都可能在下一个版本变掉,以官网最新说明为准。

四、什么时候值得开,什么时候压根不必

值得开的情形,基本就是文档列的那四类的现实版:目标应用既没有命令行也没有插件,你想做的事只存在于图形界面里;或者流程横跨好几个桌面应用,需要来回切窗口搬数据;或者你要从一个没有导出功能的应用里把数据抠出来。这些场合下,别的路子确实是堵死的。

不必开的情形,第一条是网页任务。 官方自己写了优先用浏览器自动化,理由文档也给了——更快更精准。要顺带说一句边界:《连接器》页写明浏览器连接器目前仅支持 Chromium 内核的浏览器(如 Chrome、Edge),Safari 和 Firefox 暂不支持。

第二条,你只是想让 AI「看一眼」当前窗口。 帮助中心另有《应用快照》,写明的是捕获最前方应用的截图与可读文本并自动插入当前对话的输入框,同样需要辅助功能与屏幕录制两项权限,但那一页写明的动作止于「捕获并插入输入框」,页内没有出现驱动鼠标键盘的描述。只要你的诉求是「把这个界面的内容给它看」,那用不到能点能填的那一套。

第三条,流程里有验证码、短信码或人脸识别。 文档已经写明这些它完不成,需要你手动介入,别指望它无人值守跑通。

还有一条不算「开不开」,而是「怎么开」:文档在《Web端使用链路》里给了一张任务类型表,「桌面应用操作」那一行的要点写的是「明确应用、路径、目标,以及是否允许提交或删除」,配套口径是「计算机控制;高风险操作采用每次询问」。这和《电脑操控》页的建议是一致的——涉及提交、发送、删除的动作,把执行策略留在默认的「每次询问」上,别图省事切成「自动执行」。

以下是通用做法、并非千问办公官方文档内容,仅供你自行判断:把这类高权限能力用在含敏感数据的机器上之前,先想清楚出问题时的回滚路径,因为文档已经明说了部分桌面操作无法撤回。


本文依据千问办公官方帮助中心(qwenwork.cn/docs)于 2026-08-17 的公开内容整理。 我们没有开通付费账号,也没有实际操作过该产品,因此不涉及界面外观、操作手感与生成质量的任何描述。 该产品官网标注为 Beta 阶段,功能、权益与套餐随版本变动,文中涉及价格与权益的表述均为复述官方文档原文, 请以官网最新说明为准。

安全与合规相关做法请结合自身环境评估,本文不构成安全方案建议。

想系统学会用 AI?报名体系课或加入会员,照着学、照着用。