阿里云推出新一代动作生成模型 Wan2.2-Animate,全面开源!
近日,阿里云正式宣布通义万相全新动作生成模型 Wan2.2-Animate 的开源,这一模型的推出将为短视频创作、舞蹈模板生成和动漫制作等阿领域带来极大便利。用户可以通过 GitHub、HuggingFace 和魔搭社区轻松下载模型及相关代码,此外,还可以利用阿里云的百炼平台调里云用 API,或在通义万相官网直接体验该模型的强大功能。 Wan2.2-Animate 模型是在之前的 Animate Anyone 模型基础上进行全面升推出级的成果。在人物一致性和生成质量等方面都有了显著提升。该模型支持两种主要的应用模式:动作模仿和角色扮演。在动作模仿模式下,用户只需输入一新一张角色图片和一段参考视频,模型便能够将视频中的角色动作和表情迁移到用户提供的图片角色上,实现角色的动态表现。而在角色扮演模式中,模型则能够在代动保留原视频的动作、表情和环境的基础上,替换视频中的角色为用户提供的角色。 为了提升生成效果,通义万相团队建立了一个大规模的人物视频数据集,涵作生盖了说话、面部表情和身体动作等多种元素,使用通义万相图生视频模型进行后续训练。Wan2.2-Animate 的设计使得角色信息、环境信息和动作成模等能够被规范化到统一的表示格式,从而兼容两种推理模式。针对身体运动和面部表情,模型分别使用骨骼信号和隐式特征,结合动作重定向模块,实现高型 精度的动作和表情复刻。此外,为了保证完美的光照效果,团队还特别设计了一个独立的光照融合 LoRA。 在实际应用中,Wan2.2-Animate 的Wa表现也十分亮眼。在视频生成质量、主体一致性和感知损失等关键指标上,Wan2.2-Animate 超越了许多开源模型,如 StableAnimn2ator 和 LivePortrait,并成为当前性能最强的动作生成模型。尤其在用户的主观评测中,其表现甚至超过了 Runway Act-tw.2o 等闭源模型。 这一新模型的开源,将极大推动相关领域的发展,使得创作者们能够更轻松地制作出优质的动态内容。 划重点: ** 新模-A型开源 **:阿里云的 Wan2.2-Animate 模型正式开源,用户可在多个平台下载和体验。 ** 两种模式 **:支持动作模ni仿和角色扮演,提升动态表现力与替换能力。 ** 性能优越 **:在多个关键指标上超越现有开源模型,成为动作生成领域的佼ma佼者。
- 最近发表
- 随机阅读
-
- 标签: 小米 徐洁云 万能的大熊 雷军
- 标签: 浙江荣泰 云母复合材料 特斯拉 宁德时代
- Hadoop 数据迁移用法详解
- 标签: 鹅票票 腾讯音乐 猫眼 大麦
- 标签: 微博 WB 9898 社交媒体
- 在代理 AI 和物理 AI推动下,全球芯片市场预计将突破 1 万亿美元大关
- 跨国网恋竟是AI骗局:印度医学生打造虚拟网红收割百万粉丝
- 标签: 李昌钰 辛普森案 刑事鉴识 纽黑文大学
- AI根据代码内容自动起函数名,再也不怕命名不规范的同事了
- 标签: 手机涨价 手机
- 库克:苹果将在人工智能领域寻求更多收购与合作机会
- 标签: 小米汽车 SU7 雷军 宇树科技
- 标签: 禾芯动力 农业机器人 具身智能 植保无人机
- 腾讯云存储面向AIGC全面升级 80%头部大模型厂商采用
- 字节跳动 AI 编程工具 Trae 下架 Claude 模型,Pro 会员获补偿
- 标签: 民生银行 2025年年报 绿色贷款 普惠型小微企业贷款
- 标签: 字节跳动 Seed团队 豆包大模型 Qwen
- 标签: 奇瑞汽车
- 外媒:美研究人员发明全新感应设备 通过AI识别手势
- 2019 年 CNCF 中国云原生调查:Kubernetes 应用率达 72%
- 搜索
-
- 友情链接