Gemini Mac 版加入 Computer Use 代用家操作桌面應用程式
Google 為 Mac 版 Gemini App 加入 Computer Use 功能,可以跨越本機桌面應用程式同網頁,代用家完成多步驟工作。之前 Mac App 內的 Task 功能(前稱 Gemini Spark)只可以存取本機檔案,配合 @Gmail 或 @Google Calendar 等 Connected Apps 使用;新功能則可以直接代用家按滑鼠、打字,包括瀏覽選單同填寫表格。
Computer Use 會在一個「隔離背景視窗」內運作,用家可以在對話中即時看到預覽,主螢幕同游標則維持空閒,可以繼續做其他事。
安全設計:一按即停 登入同付款會暫停
- 用家隨時可以一按停止 Gemini 的操作。
- 用家自行選擇 Gemini 可以使用哪些應用程式。
- 遇到登入同付款時,Google 會暫停操作,敏感動作需要用家確認先會繼續。
Google 表示,不少日常工作橫跨桌面應用程式同網站,而兩者之間往往無法連接,Computer Use 可以在背景處理繁瑣步驟,節省用家時間,同時不會佔用螢幕同游標。
四大應用場景
- 加快創作流程:在常用設計軟件批量為相片調色,或者建立複雜的 3D 場景。
- 免去手動填表:從本機 PDF 擷取重量、尺寸同地址,填寫多欄運費報價表。
- 即時數據變簡報:從不同地區的即時儀表板擷取數據同截圖,在 Google Slides 製作簡報。
- 批量上架二手物品:分析本機資料夾內的衣物相片、搜尋定價、記錄物品資料,並在轉售平台準備上架。
使用方法是在提示中加入 @Computer use。在 Customize > Connectors 內,新增的「Desktop」應用程式包括 Blender 同 Autodesk Fusion,連同原有的 Git 同 Obsidian 一齊使用。
Computer Use 即日起以美式英文推出,適用於 Google AI Plus、Pro 同 Ultra 訂閱用家。
延伸閱讀:
- YouTube Music 加入 Gemini 圖示 一按即開 Ask Music
- Google 推出 Gemini 4 Neon Carbon 級推理、Flash 級速度
- Google AI Ultra 升級 月費包 YouTube Premium Family 每月慳 $208
來源:9to5Google
