豆包工作近期完成电脑操作能力升级,核心变化集中在三方面:屏幕点击精度与速度提升,操作更准更快;新增“录制操作生成技能”功能,可将用户演示过程保存为可复用技能;支持Mac锁屏后继续执行需要操作电脑的任务,并可通过手机远程下达任务、查看结果。
在具体使用上,用户经授权后可直接在对话中提出操作电脑的需求,豆包工作会自动查看屏幕并模拟人工鼠标和键盘操作相关应用。此前豆包工作已支持跨应用操作、将浏览器操作录制成技能,此次将录制范围扩展到电脑操作本身。用户可在对话界面“更多技能”中找到“录制操作生成技能”,按提示完成授权后像平时一样操作电脑,并通过语音补充要求。例如整理文件时,可说明“只整理这个文件夹,文件按日期命名”,将操作范围和命名规则一并交代清楚。录制期间,豆包工作会记录鼠标点击、输入文字和窗口内容,用户可随时取消;官方也提醒使用时应避免展示账号密码等敏感信息。
录制结束后,豆包工作会将操作流程和讲解整理成个人技能。下次执行同类任务时选用对应技能,再说明此次要处理的对象和要求,即可省去重复解释操作步骤。这意味着多步操作、临时条件和处理习惯能够从一次演示沉淀为可调用的技能,减少同类任务的重复说明成本。
任务执行方面,用户可进入“设置→工作任务模式设置”,开启“允许豆包在锁屏时工作”。启动并授权后,豆包工作可在Mac锁屏时继续执行需要操作电脑的任务。用户离开电脑时,还能通过手机向这台锁屏的Mac下达任务,并在手机上查看返回结果;回到电脑前,解锁后可随时接管。该能力适用于需要连续执行、又不便一直守在电脑前的任务场景。使用时,Mac需保持开机、联网,豆包客户端持续运行,设备保持唤醒。
随着AI Agent向真实工作场景延伸,Computer Use正成为其操作软件、执行任务的重要能力。豆包工作此次升级,让用户熟悉的操作方法可以保存为可复用技能,并支持任务在Mac锁屏后继续执行,有助于减少重复交代和持续守在电脑前的负担。对于普通用户而言,这意味着有机会把一部分重复操作交给AI,将更多时间和精力留给判断、创作及需要经验的工作,让AI释放生产力的价值逐步落到日常流程中。从产业角度看,大模型应用层正从“对话助手”向“任务执行者”演进,操作电脑、跨应用调度、技能沉淀等能力成为差异化竞争点,也对授权安全、隐私保护与任务可靠性提出更高要求。