By accepting you will be accessing a service provided by a third-party external to https://www.incgmedia.com/
AI 影片編輯工具 Dreamix，支援上傳圖片與影片，只需要輸入文字即可生成與編輯影片！
2022 年可說是 AI 技術發展蓬勃的一年，影響了許多不同領域，連藝術領域也不例外，自 AI 生成繪圖工具推出後便掀起一波浪潮。日前，一群 AI 開發人員推出了一款新工具 Dreamix，可以輸入圖片或影片，接著透過文字指示，即可生成或編輯影片，可說是十分方便。現在就跟著映CG 一探究竟這項超強研究！
可支援上傳圖片或影片，生成新的影片
為了提高動態的可編輯性，研究團隊設計了一種混合目標，運用於遮蔽原先影片的目標物，以符合文字提示的內容，並同時對影片進行微調。另外，團隊還引入了新的圖像動畫架構，透過簡單的圖像處理，將圖像轉換為粗略的影片，接著再透過影片編輯器進行動畫處理。而此工具可用來執行三種不同的模式，產生新的影片。
1. 影片編輯（Video Editing）
輸入影片和文字提示，Dreamix 可編輯影片，並同時保持原有的色彩、姿勢、目標大小與構圖，並產出時間上一致的影片。以下方影片為例，Dreamix 輸入猴子在吃東西的影片（左），接著輸入文字提示「一隻熊隨著歡快的音樂跳舞與跳躍。」最後，影片就變成一隻正在跳舞的熊（右）。
2. 圖像生成影片（Image-to-Video）
Dreamix 也可輸入圖像與文字，建立一支新的影片。從下方影片為例，它能夠為靜態圖像注入複雜的動態。從原先一幅簡單的山水風景畫，輸入「鳥在天空上飛，鏡頭縮放後，拍到一支水牛在河中洗澡」等文字，就生成了符合文字描述的影片。
3. 系列圖像生成影片（Subject Driven Video Generation）
另外，Dreamix 也可給定幾張顯示同一主題的圖像，提取視覺特徵，再為其製作動畫。以下方影片為例，輸入幾張玩具熊的照片，輸入「熊走路」等文字，即可輸出所要的影像。
