人工智能

Claude Computer Use 讓 AI 操作電腦畫面 同時推出手機遙距操控 Claude

Published by
Lawton

 

Anthropic 公布 Claude 新一輪代理型 AI 功能,令 Claude 可在 Claude Cowork 與 Claude Code 內直接操作電腦畫面、開啟檔案、控制瀏覽器及執行開發工具,同時亦將手機遙距派工功能 Dispatch 進一步連結桌面工作流程。新功能現以研究預覽形式開放予 Claude Pro 與 Max 訂戶,其中 Computer Use 目前只支援 macOS。

 

Computer Use 運作機制

Computer Use 先選用最精準工具處理工作,例如連結 Slack 或 Google Calendar 連結器。若無對應連結器,Claude 才會直接控制瀏覽器、滑鼠、鍵盤與畫面,自行捲動、點擊及切換應用程式完成任務。Anthropic 表示系統會先要求用戶明確授權,亦會掃描模型 activation 以偵測指令插入(prompt injection)等風險,用戶亦可隨時叫停操作。

辦公與開發助手定位

官方將這套能力定位為辦公與開發助手,適合整理本地檔案與多個資料來源、建立試算表、在 IDE 內修改程式碼並執行測試,甚至操作沒有 API 或連結器的內部工具。惟 Anthropic 亦表示 Computer Use 仍屬早期階段,處理複雜任務或需重試,透過畫面操作速度亦會慢過直接整合。官方建議先在可信應用程式上使用,並避免接觸敏感資料。

 

Dispatch 跨平台協作

Dispatch 則將同一條 Claude 對話延伸至手機與桌面,令用戶外出時用手機指令工作,回到電腦再接手同一工作脈絡。官方支援頁面顯示,Dispatch 需要最新版 Claude Desktop 與手機應用程式、Pro 或 Max 訂閱,以及兩部裝置保持連網。Claude 完成任務後會將試算表、備忘錄、比較表或 pull request 等結果回傳至對話串,亦可設定每日或每週自動執行例行工作。值得留意的是,支援頁面列出 Dispatch 可配合 macOS 或 Windows x64 版 Claude Desktop 使用,惟 Computer Use 目前只支援 macOS,意味兩者覆蓋範圍未完全相同。

 

安全治理與風險管理

今次更新反映代理型 AI 市場正由展示能力走向安全治理,因為手機指令現可經 Claude 觸發桌面裝置讀取、搬移甚至刪除本地檔案,亦能控制瀏覽器與其他應用程式。美國 NIST 早前啟動 AI Agent Standards Initiative,方向正是推動代理型 AI 互通與安全標準。市場接下來除了比拼功能,亦會更重視權限控管與風險防護。

 

資料來源:AnthropicClaude SupportNIST

 

Published by
Lawton