研發背景
2025年7月28日,阿里巴巴通義萬相實驗室開源了視頻生成大模型Wan2.2,該模型是通義萬相視覺生成模型系列的一部分,支持在消費級顯示卡上生成視頻。Wan2.2在技術架構上將MoE(混合專家)架構引入視頻擴散模型,並包含了美學控制系統。自2025年2月以來,通義萬相系列模型在開源社區的累計下載量超過500萬。
技術特點
通義萬相Wan2.2-T2V-A14B與Wan2.2-I2V-A14B是業界首個使用MoE架構的視頻生成模型,該架構根據擴散模型的去噪過程,將模型分為高噪聲專家模型與低噪專家模型,分別負責前期去噪與整體布局以及後期去噪與細節完善,使得總參數量27B的模型在同參數規模下可節省約50%的計算資源消耗。模型首創電影級美學控制系統,將光影、色彩、鏡頭語言三大電影美學元素參數化,整合為12個美學維度,提供超過60項專業級參數供用戶精細調控。在複雜運動生成能力上,Wan2.2針對四類動態表現進行了重點最佳化:構建了面部原子動作和情緒表情系統以生成細膩微表情;構建了豐富的手部動作系統;提升了模型對角色間位置關係、力量傳遞的理解以生成符合物理規律的多人互動動作;增強了高強度複雜體育運動的穩定性,減少動作失真。
統一視頻生成模型Wan2.2-TI2V-5B採用了自研的高壓縮率3D VAE架構,在高度、寬度和時間維度上實現了16×16×4的壓縮比,信息壓縮率提升至64,這使得模型僅需約22GB顯存即可在消費級顯示卡上部署運行,生成720P解析度、24fps的高清視頻。
Wan2.2-Animate模型採用雙模式架構實現角色動作遷移與環境感知,支持動作模仿與角色扮演兩種模式。該模型將角色信息、環境信息與動作信息規範化至統一表示格式,針對身體運動採用基於骨骼信號的追蹤方案,針對面部表情則提取隱式特徵進行捕捉,兩者結合動作重定向模組實現高精度復刻,並配備了獨立的光照融合LoRA模組以解決角色替換時的光照不一致問題。
Wan2.2-S2V模型支持單張圖片結合音頻生成分鐘級動態視頻。技術層面融合了文本引導的全局運動控制和音頻驅動的細粒度局部運動,為提升音頻控制精度引入了AdaIN和CrossAttention兩種控制機制。為實現分鐘級長視頻的穩定生成,採用了層次化幀壓縮技術,將歷史參考幀的長度從數幀拓展至73幀,模型還支持多解析度訓練與推理,可適應豎屏短視頻、橫屏影視劇等不同場景。
產品功能
5B版本統一視頻生成模型支持文生視頻和圖生視頻,可在消費級顯示卡部署。
發展歷程
2025年7月28日,
阿里巴巴開源了視頻生成模型通義萬相Wan2.2。
2025年9月19日,阿里通義萬相全新動作生成模型Wan2.2-Animate正式開源。
2025年11月,阿里通義萬相開源Wan2.2實時換臉技術引發公眾關注與討論。
開源與生態
2025年7月28日,
阿里巴巴開源了視頻生成模型通義萬相Wan2.2,包括
文生視頻(Wan2.2-T2V-A14B)、圖生視頻(Wan2.2-I2V-A14B)和統一視頻生成(Wan2.2-TI2V-5B)三款模型。此後,團隊陸續開源了音頻驅動的視頻生成模型
Wan2.2-S2V(2025年8月)和動作生成模型
Wan2.2-Animate(2025年9月)。
開發者可通過主流開源平台下載模型和代碼。對於希望集成到產品或工作流中的企業和開發者,有平台提供了相應的API調用服務。普通用戶也可通過相關套用體驗模型功能。
Wan2.2開源後,在開發者社區中產生了一定反響。開源1個月內,GitHub上出現了超過120個基於該模型的衍生工具。自2025年2月以來,
通義萬相系列模型在開源社區的累計下載量已突破500萬。
Wan2.2的開源也促進了其商業化套用,部分第三方平台已集成Wan2.2系列模型,為用戶提供無需本地部署的商業化API服務。
為鼓勵社區探索模型能力,官方發起了如“萬相妙思 ”等全球創作活動,激勵創作者利用Wan2.2的視頻生成能力進行藝術創作。