当地时间11月19日,谷歌为macOS版Gemini应用上线“电脑操控”功能,美国地区英语用户可逐步使用。该功能让AI直接操作Mac桌面应用、访问本地文件并浏览网页,独立完成多步骤任务。

用户用自然语言描述需求后,Gemini可在多个应用间切换,执行点击、输入、填表、菜单操作等。谷歌给出的例子包括批量处理照片、从本地PDF提取信息并填入在线表单、依据实时数据生成演示文稿,以及整理商品信息后发布到二手交易平台。
运行时,Gemini在独立后台窗口执行任务,不占用当前主屏幕和鼠标光标;聊天界面会显示实时操作预览,用户能随时查看、暂停或停止,关键操作需先确认。
权限上,用户可自行决定Gemini能访问哪些应用,而非一次性开放整台电脑的操控权限。该功能要求Apple Silicon芯片、macOS Sequoia 15.0或更高版本,用户须年满18岁,并使用符合条件个人Google账号及Google AI Plus、Pro或Ultra订阅。
发布时间点恰逢苹果调整macOS应用权限管理。苹果11月16日开发者公告称,macOS 27.3 Beta 2引入设备控制、数据访问和完全磁盘访问权限变化。原有设备控制与数据访问设置被拆开,用户可指定应用控制哪些程序或访问哪些文件夹,并可选择每次请求都需确认。
苹果还将增加透明度提示:当应用借相关权限控制其他应用时,菜单栏会出现提示标识。苹果指出,完全磁盘访问权限可能让Mac上的各类数据面临风险,因此希望用更细致的权限设置让用户了解应用可访问和控制的范围。此次权限调整早于谷歌发布该功能,并非针对Gemini临时作出,而被视为与AI智能体普及带来的安全风险有关。