Home 科學技術 Adobe 的實驗性 AI 工具可以使用單幀編輯整個視頻

Adobe 的實驗性 AI 工具可以使用單幀編輯整個視頻

136
0
Adobe 的實驗性 AI 工具可以使用單幀編輯整個視頻

在 Max 會議上,Adobe 展示了一些實驗性 AI 工具,這些工具提供了直觀編輯照片、視頻和音頻的新方法。這些實驗被稱為“潛行”,其中包括一些工具,可以立即應用對整個視頻每幀所做的任何更改,輕鬆更改圖像中的照明,以及糾正錄音中的發音錯誤。

視覺上更令人印象深刻的潛行之一是“Project Frame Forward”,它允許視頻編輯器在不使用遮罩的情況下從素材中添加或刪除某些內容——這是選擇對像或人物的耗時過程。相反,Adobe 的顯示屏在定位、選擇和刪除視頻第一幀中的女性時向前顯示幀,然後用看起來自然的背景替換她,類似於上下文感知填充或刪除背景等 Photoshop 工具。只需點擊幾下,此刪除操作就會自動應用於整個視頻。

用戶可以通過在視頻幀中繪製想要放置的位置來插入對象,並通過 AI 提示解釋要添加的內容。這些更改將應用​​於整個視頻。該演示表明,這些插入的對像也可以感知上下文,顯示生成的水坑,反映了視頻中已有貓的運動。

另一個工具是 Project Light Touch,它使用生成式人工智能來重建照片中的光源。它可以改變照明方向,使房間看起來被原始圖像中未打開的燈照亮,並允許用戶控制光和影的傳播。它還可以插入可拖動到編輯畫布上的動態照明,實時彎曲人物和物體周圍和後面的光線,從內部照亮南瓜,並從白天到晚上改變周圍的環境。這些受控光源的顏色也可以調整,讓您可以調整暖度或創建類似 RGB 的強大效果。

Project Clean Take 是一款新的編輯工具,可以使用人工智能提示改變語音的解釋方式,從而無需重新錄製視頻或音頻剪輯。用戶可以改變某人聲音背後的表達方式或情感——例如,讓他們聽起來高興或好奇——或者完全替換單詞,同時保留原始說話者聲音的顯著特徵。它可以自動將背景聲音分離為單獨的源,以便用戶可以選擇或靜音特定的聲音,有助於保留整體音頻,同時提高語音清晰度。

這些只是 Adob​​​​e Max 活動中展示的部分鞋款。還有其他重要參考 項目面積轉換它允許您立即改變物體和表面的材質或形狀, 項目轉向風格 用於通過像 3D 圖像一樣旋轉圖像來編輯圖像中的對象,以及 項目新深度允許您將照片編輯為 3D 空間,該空間可檢測插入的對象何時被周圍環境部分遮擋。您可以在此處閱讀有關每個預覽的更多信息 在 Adob​​​​e 博客上

預告片不公開可供使用,並且不保證成為 Adob​​​​e Creative Cloud 軟件或 Firefly 應用程序中的官方功能。 Photoshop 的許多功能(例如“消除乾擾”和“協調”工具)最初是作為秘密項目推出的,但這些實驗功能的某些版本很可能在未來可供創意人員使用。

來源連結