Adobe 正在為電影製作人提供新的高效 AI 音頻工具，可以快速為視頻添加適合背景的背景音樂和旁白。重新設計的 Adobe Firefly AI 應用程序中引入了配樂和生成語音功能，而 Adobe 正在開發一種新的基於 Web 的視頻製作工具，該工具將許多 AI 功能與簡單的編輯時間線相結合。
生成音軌工具在 Firefly 應用程序中以公開測試版形式推出，其工作原理是評估上傳的視頻，然後生成一系列自動與素材同步的樂器音頻剪輯。用戶可以通過從提供的預設（例如 Loofy、嘻哈、古典、EDM 等）中進行選擇來決定音樂風格，或者在提供的文本提示界面中描述所需的氛圍 – 要求它更加感傷、更具攻擊性。該工具還根據上傳的視頻片段提出提示，可以將其用作起點。
Adobe 高效 AI 主管 Alexandre Kostin 表示：“我們希望幫助用戶提示音樂。這是我們需要開發的新功能，因此為了使其更容易、更易於訪問，如果您向我們提供您的剪輯，我們將預測該剪輯會搭配什麼類型的音樂。” 邊緣。 “但我們還為您提供了這種瘋狂自由的方法，您可以選擇剪輯的氛圍、風格和目標。”
創建音軌為每個提示提供四種不同的音頻剪輯變體，每個剪輯的長度最多為五分鐘。生成配樂的 Firefly AI 模型是根據許可內容進行訓練的，這意味著創作者不會冒視頻因版權罷工而被刪除的風險。 “我們從 IP 所有者那裡購買音樂和聲音，因此我們有信心以商業安全的方式提供它們，”卡斯汀說。
Firefly 的生成語音工具也推出了公共測試版，可用於為文本轉視頻項目創建畫外音。它提供由 Adobe Firefly 語音模型或 ElevenLabs 提供支持的 50 多種語音，支持 20 多種語言。用戶可以微調速度、音調和情感，並手動糾正具有地區差異的名稱或單詞的發音。
正在開發的另一個電影製作工具是 Firefly 視頻編輯器，Adobe 將其描述為“用於創建、組織、修剪和排序剪輯的多軌時間線編輯器”。它將 Adobe 用於創建畫外音、音軌和標題的各種工具結合到一個基於 Web 的應用程序中，並具有逐幀編輯功能和样式預設。 Firefly Video Editor 將於下個月推出內測版，潛在用戶將加入等候名單以搶先體驗。
