Adobe 的實驗性 AI 工具可以使用單幀處理整個視頻

Adobe 在 Max 會議上展示了其正在開發的一些實驗性 AI 工具，這些工具提供了直觀編輯照片、視頻和音頻的新方法。這些實驗被稱為“潛行”，其中包括一些工具，可以立即將對一幀所做的任何更改應用於整個視頻，輕鬆操縱圖像中的光線，並修復錄音中的錯誤發音。

Project Frame Forward 是視覺上更令人印象深刻的潛行功能之一，它允許視頻編輯器在不使用遮罩的情況下添加或刪除素材中的任何內容，這是選擇對像或人物的耗時過程。相反，Adobe 的演示展示了 Frame Forward 識別、選擇和刪除視頻第一幀中的女性，然後用看起來自然的背景替換她，類似於 Context Aware Fill 或 Background Removal 等 Photoshop 工具。只需點擊幾下，此刪除就會自動應用於整個視頻。

用戶還可以通過在想要放置的位置繪製對象並使用 AI 提示描述要添加的內容來將對象插入視頻幀中。這些更改將類似地應用於整個視頻。該演示表明，這些導入的對像也可以進行上下文感知，顯示創建的水坑反映了視頻中已有貓的運動。

另一個工具是 Project Light Touch，它使用遺傳人工智能來重塑照片中的光源。它可以改變照明方向，使房間看起來像是被原始圖像中未點亮的燈照亮，並允許用戶控制光和影的擴散。它還可以引入動態照明，可以在編輯畫布上拖動，實時彎曲人和物體周圍和後面的光線，例如從內部照亮南瓜並將環境從白天變成夜晚。這些受控光源的顏色也可以調整，讓您可以修改暖度或創建生動的類似 RGB 的效果。

Project Clean Take 是一款新的編輯工具，可以使用人工智能提示改變語音傳遞方式，從而無需重新錄製視頻或音頻剪輯。用戶可以改變某人聲音的表達方式或情感——例如，使其聽起來更快樂或更好奇——或者完全替換單詞，同時保留原始說話者的語音識別特徵。它還可以自動將環境噪音分成單獨的來源，以便用戶可以有選擇地調整或靜音特定的聲音，有助於保留整體聲音，同時提高語音清晰度。

這些只是 Adob​​​​e Max 活動中展示的一小部分。其他值得注意的參考文獻包括： 項目表面交換它允許您立即更改物體和表面的材質或紋理， 項目周轉風格 通過像 3D 圖像一樣旋轉對象來將對象處理為圖像 項目新深度它允許您像處理 3D 空間一樣處理照片，確定導入的對象何時應被環境部分覆蓋。您可以詳細閱讀有關每個預覽的更多信息 在 Adob​​​​e 博客上。

預告片不公開可供使用，並且不保證成為 Adob​​​​e Creative Cloud 軟件或 Firefly 應用程序中的官方功能。然而，許多功能，例如 Photoshop 的散焦和混合工具，最初都是作為潛行項目開始的，因此這些實驗性功能的某些版本很可能在未來可供創意人員使用。