首页 / 资讯中心 / 文章详情

把 Wan2.2 丢进“中国版 Sora”考场:这场大横评,真该补上“动画”这一科

把 Wan2.2 丢进“中国版 Sora”考场:这场大横评,真该补上“动画”这一科 ★ FEATURED ARTICLE
把 Wan2.2 丢进“中国版 Sora”考场这场大横评真该补上“动画”这一科【免费下载链接】Wan2.2-Animate-2-14B项目地址: https://ai.gitcode.com/hf_mirrors/Wan-AI/Wan2.2-Animate-2-14B最近这半年科技媒体的保留节目就是“中国版 Sora 大横评”。七八款国产视频大模型排排坐比谁的水花更真、谁的镜头更稳、谁的物理规律不崩评论区吵得比春晚还热闹。但看多了你会发现一个不对劲的地方这场考试好像漏了一整科。文生视频考的是“无中生有”——你说一句话它给你造一个新世界。可普通人真正天天想干的往往是另一件事我有一张照片能不能让它动起来还别变样这一科叫角色动画。而今年 8 月阿里通义实验室把 Wan-Animate-2 的模型权重直接开源了Apache 2.0 协议相当于有人默默把这张卷子答完还贴在了公告栏上。一、横评为什么总漏掉这一科说白了不是不想考是不好打分。文生视频的题目好出给一句提示词谁生成的画面更漂亮、更符合描述一眼能看出来。动画这一科的题目长这样给你一张人物照片再给你一段别人跳舞的视频让照片里的人把这段舞完整跳一遍。难点立刻来了脸不能变换了就是“恐怖片”身材不能走样猫不能跳着跳着变成狗衣服、发型、背景得稳住手指、眼神、嘴角这些细节还得跟上节奏。这就像让一个演员戴着面具演完整场戏面具还不能歪。评分维度太多之前那些横评表格里干脆就没有这一栏。可这恰恰是最有商业价值的一栏。短剧、带货、数字人直播、二创动画全都卡在这儿。二、它到底是个啥一句话讲明白Wan-Animate-2 干的事特别朴素你给它一张角色图再给它一段参考视频它就让图里的角色把视频里的动作原封不动演一遍。打个比方以前的 AI 视频像“凭空画一个新角色”这个模型像“请了一位替身演员”——导演你举着一段样板录像说就照这个跳但脸得用我给的这张。真正的技术分歧在“怎么学动作”上。老办法是先让机器把参考视频“翻译”成骨架点、关节点再把骨架套到你的照片上。这中间隔了一层就像隔着毛玻璃临摹姿势大概对但手指怎么捏、衣服怎么飘、表情怎么变全糊掉了。镜头稍微一偏人还可能“飘”。Wan-Animate-2 换了个思路不翻译了直接把原片怼给模型看让它一边看一边画。省掉中间那道“失真”的工序细节自然就保住了。三、三个最让人“哎哟”的地方1. 换谁都能演身材还不走样官方放出的演示里有穿着深蓝制服、系红蝴蝶结的银灰虎斑猫跳女团舞有机器人跳舞有轮滑、拉小提琴、情侣共舞甚至还有《冰雪奇缘》艾莎这种二次元角色。关键在于它是“跨身份”的真人视频教一只猫跳舞猫的体型、比例、毛发都得是猫自己的不能硬套成人的骨架。这一条过去是同类开源模型翻车最多的地方。2. 一句话就能换机位这是真新鲜以前做这类动画机位是“焊死”的——参考视频从哪个角度拍你生成出来就只能是什么角度。想换个侧面重拍。Wan-Animate-2 加了个“文字控机位”的能力你在提示词里写“右前方 60 度”“俯拍”“平视正面”画面视角就跟着变而人物的动作不变、周围环境也保持连贯。这相当于你雇了个摄影师还能用嘴指挥他绕着人转。为了让模型学会这件事团队甚至在虚幻引擎里搭了个虚拟摄影棚绕着角色布了 12 个方位、4 个高度一共 48 个机位挨个拍再拿这些素材教模型认角度。3. 不止一个人还能“一个带一群”多人场景也支持一个人跳画面里出现好几个人一起跳或者几个人各自对应不同的动作。演示里有双人舞、米奇和伙伴的合舞、一群猫一起蹦。对做内容的团队来说这意味着群舞、群像这类以前最烧钱烧人的镜头有了新的解法。四、还有一版是给“直播”准备的这次开源里其实藏着两个模型一个是画质优先的基础版一个是速度优先的蒸馏版。论文里还提到一个更狠的 Lite 版本专门冲实时。它的成绩是在 400×720 分辨率下跑到每秒 24 帧四张显卡分工流水线作业——一张管“读图”两张管“画”一张管“出片”。24 帧是什么概念就是肉眼看着不卡的视频。这意味着数字人主播、虚拟客服、实时互动直播这类场景从“录好再播”变成了“你动它就动”。而且长视频最怕的“越播越糊、越播越崩”论文里专门用一个“错误缓冲”的机制去治训练时故意让模型看到自己会犯的错让它提前习惯。所以长时间连续生成画面不会一代不如一代。五、成绩单跟闭源大佬同台没输团队做了一次盲测请用户从五个维度打分画质、动作自然度、身份保持、动作准确度、表情准确度外加一个总评。对手是三位上一代 Wan-Animate、字节的 Dreamina、快手的可灵 MotionControl。结果是对比上一代七成以上的对比中用户更偏爱新版对比 Dreamina多数场景下新版更受欢迎对比可灵 MotionControl基本打成平手多数人认为质量相当。值得注意的是最后一句Dreamina 和可灵背后都是更大的闭源视频底模而 Wan-Animate-2 是完全跑在开源底座上的。一个开源选手跟商业平台打平这才是这次开源最值得说的地方。六、普通人能玩吗说实话有点门槛先把丑话说前头这不是家用笔记本能跑的东西。官方给的配置参考是——720P 生成需要 8 张 A800 显卡480P 也要 2 张 A800。模型文件本身 30GB 出头加上文本编码器、图像编码器、VAE全部下完差不多 50GB。但门槛正在快速降低魔搭上有官方在线体验不用装环境点点就能试蒸馏版10 步就能出片还不用双倍计算速度提升明显主流的 AI 绘画工作流ComfyUI和几个主流推理框架都已经接好了社区出低显存方案只是时间问题官方还提供了一键启动的网页界面能在本地开一个“上传图片、上传视频、点生成”的操作台。还有个特别接地气的小细节官方建议先用一个大模型把参考图“描述”成一段文字格式是“人物外观长什么样 背景是什么样”再把这段文字喂给模型。说白了就是给化妆师递一张角色小卡她穿浅蓝色校服衬衫、领口有白边、胸前有一枚圆形徽章。模型拿到这张卡画起来就稳得多。七、谁最该盯着这个模型短剧和广告团队真人拍一遍动作换成不同演员、不同体型甚至换成卡通形象电商和带货模特的动作复用换人换装不用重拍数字人直播Lite 版本就是为这个准备的实时跟动作、跟表情动画二创和同人让喜欢的角色跳当下的热门舞游戏和影视预演一句“俯拍”就能看到不同机位的效果省掉一遍遍搭场景。写在最后回到开头那个话题。我们评判“中国版 Sora”谁更强比的往往是“它能不能凭空造出一个惊艳的世界”。但真正落到生意和日常里的是另一件事它能不能让一个角色稳稳当当演完这十秒钟脸不崩、手不糊、衣服不乱。这一科之前没人认真考。现在有人交了卷还是开源的。那么问题来了如果你手里有一张照片——可能是你自己、你家猫、你画了一半的原创角色——你最想让它演哪段视频评论区聊聊说不定下一个刷屏的 demo 就从这儿来。【免费下载链接】Wan2.2-Animate-2-14B项目地址: https://ai.gitcode.com/hf_mirrors/Wan-AI/Wan2.2-Animate-2-14B创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
阅读完成 · 觉得有帮助?
咨询建站