阿里万相视频生成大模型宣布开源:8.2GB 显存就能跑,测试超越 Sora

发布时间:2025-02-26 11:13:53 来源:互联网

本站 2 月 25 日消息,阿里云今日宣布旗下视觉生成基座模型万相 2.1(Wan)开源。

此次开源采用最宽松的 Apache2.0 协议,14B 和 1.3B 两个参数规格的全部推理代码和权重全部开源,同时支持文生视频和图生视频任务,全球开发者可在 Github、HuggingFace 和魔搭社区下载体验。

据介绍,14B 万相模型在指令遵循、复杂运动生成、物理建模、文字视频生成等方面表现突出,在评测集 VBench 中,万相 2.1 以总分 86.22% 的成绩超越 Sora、Luma、Pika 等国内外模型,位列榜首。1.3B 版本测试结果不仅超过了更大尺寸的开源模型,甚至还接近部分闭源模型,同时能在消费级显卡运行,号称“仅需 8.2GB 显存就可以生成 480P 视频”,适用于二次模型开发和学术研究。

万相视频模型架构图

在算法设计上,万相基于主流 DiT 架构和线性噪声轨迹 Flow Matching 范式,研发了高效的因果 3D VAE、可扩展的预训练策略等。以 3D VAE 为例,为了高效支持任意长度视频的编码和解码,万相在 3D VAE 的因果卷积模块中实现了特征缓存机制,从而代替直接对长视频端到端的编解码过程,实现了无限长 1080P 视频的高效编解码。此外,通过将空间降采样压缩提前,在不损失性能的情况下进一步减少了 29% 的推理时内存占用。

万相团队的实验结果显示,在运动质量、视觉质量、风格和多目标等 14 个主要维度和 26 个子维度测试中,万相均达到了业界领先表现,并且斩获 5 项第一。

本站附开源地址:

    Github:https://github.com/Wan-Video

    HuggingFace:https://huggingface.co/Wan-AI

    魔搭社区:https://modelscope.cn/organization/Wan-AI

本周热门攻略

1
91看片:平台面临的法律、道德与安全问题未来如何应对挑战

91看片:平台面临的法律、道德与安全问题未来如何应对挑战

2025/02/02

2
亚欧一二三四区:区域划分与国际合作的深远影响

亚欧一二三四区:区域划分与国际合作的深远影响

2024/11/07

3
jm漫画网页版入门 jm漫画网页版传送门

jm漫画网页版入门 jm漫画网页版传送门

2024/10/08

4
阿拉伯妇女毛发旺盛现象背后的秘密:究竟是遗传还是其他因素影响?

阿拉伯妇女毛发旺盛现象背后的秘密:究竟是遗传还是其他因素影响?

2025/01/16

5
51吃瓜揭秘:台北娜娜的汉字故事,背后隐藏着怎样的秘密?

51吃瓜揭秘:台北娜娜的汉字故事,背后隐藏着怎样的秘密?

2024/12/19

6
X老B和XB的区别是什么?它们在网络用语中有哪些不同的使用场景?

X老B和XB的区别是什么?它们在网络用语中有哪些不同的使用场景?

2024/12/27

7
如何从DNA和RNA的杂交片段中获得信息?

如何从DNA和RNA的杂交片段中获得信息?

2024/10/13

8
九幺9·1旧版安装玩命加载中,如何解决九幺9·1版本安装问题及常见加载卡顿现象

九幺9·1旧版安装玩命加载中,如何解决九幺9·1版本安装问题及常见加载卡顿现象

2024/11/07

9
为什么FUQER100%XXXXHD成为高清视频资源的标配?探索高清内容的未来发展与趋势

为什么FUQER100%XXXXHD成为高清视频资源的标配?探索高清内容的未来发展与趋势

2025/01/07

10
为什么宝宝腿张大水喷出来了?教你如何应对这个问题!

为什么宝宝腿张大水喷出来了?教你如何应对这个问题!

2024/10/28