【環球網科技綜合報道】9月12日,據科技媒體engadget消息,adobe公司近日宣布,將於今年晚些時候推出其最新的ai視頻工具——firefly。這一創新工具旨在通過強大的快捷方式,幫助電影編輯者輕鬆地從文本、靜止圖像和現有視頻中創建高質量的ai剪輯。
firefly系列工具包括文本轉視頻、generative extend以及圖像轉視頻等ai功能,它們將作為adobe premiere pro的補充技術,為視頻編輯者提供前所未有的便捷。藉助這些工具,編輯者能夠輕鬆完成諸如在鏡頭間隙中導航、移除場景中不需要的對象、平滑跳躍切換以及搜索完美b-roll等任務,從而節省大量時間並專註於創意探索。
其中,firefly text-to-video功能允許用戶根據文本提示創建ai生成的視頻,同時提供攝像機角度、動作和縮放的控制工具。這一功能能夠填補時間軸上的鏡頭空白,甚至將靜態參考圖像轉換為逼真的ai視頻。adobe表示,其視頻模型在自然世界的視頻表現方面尤為出色,有助於即時創建定場鏡頭或b-roll,降低製作成本。
adobe
在宣傳視頻中,adobe展示了多個令人印象深刻的示例。通過詳細的文字提示,firefly能夠生成火山噴發的定場鏡頭、野花叢中放鬆的狗以及迷你羊毛怪物的舞會等場景。這些高質量的輸出證明了該工具在電視、電影和商業製作中的巨大潛力。
此外,adobe的圖像轉視頻功能也備受矚目。該功能始於上傳的圖像,通過文本提示將其轉換為生動的視頻。在演示中,一對走過森林小溪的情侶場景被ai生成的片段完美填補,展示了該工具在鏡頭空白填補方面的卓越能力。
值得注意的是,adobe強調其firefly視頻模型在設計上是安全的,並且只使用公司有權使用的內容進行訓練。該公司表示,其生成式ai模型僅在adobe stock數據庫上進行訓練,該數據庫包含4億張經過精心挑選的圖片、插圖和視頻,不包含知識產權、商標或可識別的字符。同時,adobe也明確表示,從未使用用戶的作品進行訓練。
據悉,adobe的firefly視頻模型將於今年晚些時候推出測試版。