Wan2.1 VACE：阿里巴巴的影片生成利器，ComfyUI 實作教學
事件開頭短結論： 阿里巴巴推出 Wan2.1 VACE，一個整合了文字、圖片等控制訊號的影片生成模型，並提供了開源的程式碼與模型權重。 本文將帶領大家了解 Wan2.1 VACE 的特色，並透過 ComfyUI 逐步實作，讓您也能輕鬆將文字或圖片轉成影片。
事件重點：
- 強大功能： Wan2.1 VACE 能夠根據文字描述、圖片甚至影片等輸入，生成高品質影片。
- 支援多語言： 支援中文和英文文字生成，讓創作更具彈性。
- 開放資源： 提供程式碼、模型權重等資源，方便使用者學習和應用。
- ComfyUI 實作： 本文將介紹如何在 ComfyUI 中完成 Wan2.1 VACE 的影片生成範例。
Wan2.1 VACE 簡介
Wan2.1 VACE 是阿里巴巴 Tongyi Lab 開發的視覺生成模型，是一個全方位的影片生成和編輯工具。 它能將文字描述或圖片轉換成影片，讓使用者可以透過輸入提示詞並選擇解析度，或上傳圖片搭配提示詞來生成影片。
ComfyUI 實作教學
本教學將引導您在 ComfyUI 中實作 Wan2.1 VACE 影片生成。 由於 ComfyUI 的使用較為進階，建議對 ComfyUI 有初步了解後再進行操作。
- 模型下載與載入：
首先，您需要下載 Wan2.1 VACE 的模型檔案。您可以從 Hugging Face 或其他資源庫中取得模型檔案，並將其放置在 ComfyUI 的正確路徑下。 -
ComfyUI 流程建構：
接下來，您需要在 ComfyUI 中建立流程。流程的建構方式取決於您要生成的影片類型，例如：- 文字轉影片： 建立文字輸入節點，輸入您的文字提示。
- 圖片轉影片： 上傳圖片，並建立圖片輸入節點。
- 影片編輯： 輸入影片，並設定編輯參數。
- 節點連接與參數調整：
將輸入節點與 Wan2.1 VACE 相關的節點連接起來。根據您的需求，調整各個節點的參數，例如：- 解析度： 選擇生成影片的解析度。
- 提示詞： 設定提示詞的強度。
- 其他參數： 根據 Wan2.1 VACE 的文件說明，調整其他相關參數。
- 影片生成：
完成流程建構和參數調整後，即可執行 ComfyUI 流程，生成您的影片。
VACE 在 ComfyUI 中的應用
VACE 模型現在支援兩種模型 (1.3B 和 14B) 和兩種主要解析度 (480P 和 720P)。 輸入支援任何解析度，但為了獲得最佳效果，影片尺寸應落在特定範圍內。
個人心得
Wan2.1 VACE 的推出，無疑為影片創作領域帶來了新的可能性。 其強大的功能和開放的資源，讓更多人能夠參與到影片創作中。 透過 ComfyUI 的實作，即使沒有專業的影片製作經驗，也能輕鬆生成令人驚豔的影片。 儘管目前 AI 影片生成的技術仍在不斷發展中，但 Wan2.1 VACE 已經展現了其潛力，未來可期。
參考閱讀
- https://github.com/Wan-Video/Wan2.1
- https://www.wan-ai.org/
- https://wan.video/
- https://huggingface.co/spaces/Wan-AI/Wan2.1
