即插即用,完美相容:SD社群的圖生影片外掛I2V-Adapter來了

根據機器之心1 月14 日報道,近期,由快手主導的一項新研究成果《I2V-Adapter: A General Image-to-Video Adapter for Video Diffusion Models》發布,該研究引入了一個創新的圖像到視訊轉換方法,提出了一種輕量級適配器模組,即I2V-Adapter,它能夠在不需要改變現有文字到視訊生成(T2V)模型原始結構和預訓練參數的情況下,將靜態圖像轉換成動態影片。相較於現有方法,I2V-Adapter 大幅減少了可訓練參數(最低可達22M,為主流方案例如Stable Video Diffusion [1] 的1%),同時具備與Stable Diffusion [2] 社區開發的客製化T2I 模型(DreamBooth [3]、Lora [4])與控制工具(ControlNet [5])的兼容性。透過實驗,研究者證明了I2V-Adapter 在產生高品質視訊內容方面的有效性,為I2V 領域的創意應用開闢了新的可能性。

Total
0
Shares
Related Posts