Animatediff Motion Adapter V1 5 3
AnimateDiff是一種能夠利用現有Stable Diffusion文生圖模型創建視頻的技術,通過插入運動模塊層實現圖像幀間的連貫運動。
下載量 800
發布時間 : 12/18/2023
模型概述
該技術通過向凍結的文生圖模型中插入運動模塊層,並在視頻片段上進行訓練以提取運動先驗知識,使圖像幀之間產生連貫的運動。支持將運動模塊應用於現有Stable Diffusion模型。
模型特點
運動模塊適配
通過MotionAdapter和UNetMotionModel為現有Stable Diffusion模型添加運動能力
視頻連貫性
在ResNet和注意力塊後插入運動模塊,確保圖像幀間運動的連貫性
模型兼容性
可與多種Stable Diffusion文生圖模型結合使用,如示例中的Realistic Vision V5.1
模型能力
文本到視頻生成
圖像動畫化
視頻風格遷移
使用案例
創意內容生成
日落動畫生成
根據文本描述生成連貫的日落場景動畫
示例展示了16幀的日落場景動畫,包含漁船、海浪、海鷗等元素
數字藝術創作
藝術風格動畫
將藝術風格圖像轉化為動畫
精選推薦AI模型
Llama 3 Typhoon V1.5x 8b Instruct
專為泰語設計的80億參數指令模型,性能媲美GPT-3.5-turbo,優化了應用場景、檢索增強生成、受限生成和推理任務
大型語言模型
Transformers 支持多種語言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一個基於SODA數據集訓練的超小型對話模型,專為邊緣設備推理設計,體積僅為Cosmo-3B模型的2%左右。
對話系統
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基於RoBERTa架構的中文抽取式問答模型,適用於從給定文本中提取答案的任務。
問答系統 中文
R
uer
2,694
98