字节跳动旗下 AI 助手豆包近期对其工作场景的电脑操作能力完成升级,屏幕点击精度与执行速度均有提升。用户可在对话中直接提出操作电脑的需求,经授权后,豆包工作将自动查看电脑屏幕,并模拟鼠标与键盘操作相关应用。
此次升级的核心变化在于技能录制功能。在原有跨应用操作、浏览器操作录制的基础上,用户现在可以将完整的电脑操作演示过程保存为可复用技能。具体路径为在对话界面“更多技能”中选择“录制操作生成技能”,完成授权后按日常习惯操作电脑,并通过语音补充具体要求。例如整理文件时,可同时说明“只整理这个文件夹,文件按日期命名”,将操作范围与命名规则一并交代。录制期间,豆包工作会记录鼠标点击、输入文字和窗口内容,用户可随时取消,官方同时提示使用时应避免展示账号密码等敏感信息。录制结束后,操作流程与语音讲解将被整理为个人技能,下次执行同类任务时选用对应技能并说明本次处理对象即可,无需重复解释操作步骤。
任务执行方式上,用户可在“设置→工作任务模式设置”中开启“允许豆包在锁屏时工作”。开启并授权后,豆包工作可在 Mac 锁屏状态下继续执行需要操作电脑的任务;用户离开电脑时,可通过手机向该设备下达任务并查看返回结果,解锁后可随时接管。该功能要求 Mac 保持开机、联网,豆包客户端持续运行且设备保持唤醒。
从行业视角看,Computer Use 正成为 AI Agent 落地真实工作场景的关键能力,其价值取决于对软件界面的操作精度与任务连续性。豆包工作此次将操作演示沉淀为可调用技能,并支持锁屏后持续执行,指向的是降低重复交代成本与减少人工值守这两类实际痛点。对普通用户而言,这意味着部分重复性操作可交由 AI 承担,时间与精力得以转向判断、创作及依赖经验的工作环节。
该文观点仅代表作者本人,企服科学平台仅提供信息存储空间服务。