Adobe 在年度 Max 大會上公開多項代號「Sneaks」的實驗性 AI 工具,為相片、影片及音訊編輯帶來嶄新方式。這些工具能夠將單一影格修改即時套用至整段影片、輕鬆操控影像光源,以及修正錄音中的發音錯誤。
Project Frame Forward 是其中最令人驚艷的實驗項目,讓影片編輯者無需使用遮罩即可在片段中添加或移除任何元素。Adobe 示範展示了 Frame Forward 如何在影片首個影格中識別、選取及移除一名女子,並以自然背景取代,效果類似 Photoshop 的 Context-aware Fill 或 Remove Background 功能,整個移除過程只需數次點擊便能自動套用至整段影片。
用戶亦可透過繪畫位置並以 AI 提示描述內容,將物件插入影片影格中。這些變更同樣會套用至整段影片。示範更顯示插入的物件具備情境感知能力,例如生成的水窪會反映影片中原有貓隻的移動。
Project Light Touch 運用生成式 AI 重塑相片中的光源。此工具可改變光線方向,令房間看起來如同由原本未開啟的燈具照明,並讓用戶控制光線與陰影擴散程度。工具更可插入動態光源,在編輯畫布上拖曳操作,實時地讓光線繞過或穿透人物及物件,例如從內部照亮南瓜,並將周遭環境從日間轉換至夜間。這些經處理的光源色彩亦可調整,讓用戶能夠調節暖度或創造鮮艷的 RGB 效果。
Project Clean Take 是一項全新編輯工具,可透過 AI 提示改變語音發音方式,無需重新錄製影片或音訊片段。用戶可改變說話者聲音的表達方式或情感,例如讓其聽起來更快樂或充滿疑問,或在保留原說話者聲音特徵的情況下完全替換字詞。工具更可自動將背景噪音分離為個別音源,讓用戶能選擇性調整或靜音特定聲音,有助保留整體音訊質素同時改善語音清晰度。
Adobe 在 Max 大會上展示的 Sneaks 還包括 Project Surface Swap,可即時改變物件及表面的材質或紋理;Project Turn Style 可透過旋轉方式編輯影像中的物件,如同處理 3D 影像;以及 Project New Depths,讓用戶將相片當作 3D 空間編輯,當插入物件時系統會識別其應否被周遭環境部分遮擋。
這些 Sneaks 實驗項目目前並未向公眾開放使用,也不保證會成為 Adobe Creative Cloud 軟件或 Firefly 應用程式的正式功能。不過許多功能,例如 Photoshop 的 Distraction Removal 及 Harmonize 工具,最初亦是以 Sneaks 項目起步,因此這些實驗性功能未來有機會以某種形式提供給創意工作者使用。
來源:Adobe