阿里云推出新一代动作生成模型 Wan2.2-Animate,全面开源!
近日,阿里云正式宣布通义万相全新动作生成模型 Wan2.2-Animate 的开源,这一模型的推出将为短视频创作、舞蹈模板生成和动漫制作等阿领域带来极大便利。用户可以通过 GitHub、HuggingFace 和魔搭社区轻松下载模型及相关代码,此外,还可以利用阿里云的百炼平台调用 API里云,或在通义万相官网直接体验该模型的强大功能。 Wan2.2-Animate 模型是在之前的 Animate Anyone 模型基础上进行全面升级推出的成果。在人物一致性和生成质量等方面都有了显著提升。该模型支持两种主要的应用模式:动作模仿和角色扮演。在动作模仿模式下,用户只需输入一张新一角色图片和一段参考视频,模型便能够将视频中的角色动作和表情迁移到用户提供的图片角色上,实现角色的动态表现。而在角色扮演模式中,模型则能够代动在保留原视频的动作、表情和环境的基础上,替换视频中的角色为用户提供的角色。 为了提升生成效果,通义万相团队建立了一个大规模的人物视频数据集,涵作生盖了说话、面部表情和身体动作等多种元素,使用通义万相图生视频模型进行后续训练。Wan2.2-Animate 的设计使得角色信息、环境信息和动作等成模能够被规范化到统一的表示格式,从而兼容两种推理模式。针对身体运动和面部表情,模型分别使用骨骼信号和隐式特征,结合动作重定向模块,实现高精度型 的动作和表情复刻。此外,为了保证完美的光照效果,团队还特别设计了一个独立的光照融合 LoRA。 在实际应用中,Wan2.2-Animate 的Wa表现也十分亮眼。在视频生成质量、主体一致性和感知损失等关键指标上,Wan2.2-Animate 超越了许多开源模型,如 StableAnin2mator 和 LivePortrait,并成为当前性能最强的动作生成模型。尤其在用户的主观评测中,其表现甚至超过了 Runway Act-two 等闭源.2模型。 这一新模型的开源,将极大推动相关领域的发展,使得创作者们能够更轻松地制作出优质的动态内容。 划重点: ** 新-A模型开源 **:阿里云的 Wan2.2-Animate 模型正式开源,用户可在多个平台下载和体验。 ** 两种模式 **:支持动作模ni仿和角色扮演,提升动态表现力与替换能力。 ** 性能优越 **:在多个关键指标上超越现有开源模型,成为动作生成领域的佼佼者ma。
- 最近发表
- 随机阅读
-
- Reddit 季度收入创历史新高,得益于人工智能
- 标签: 北京市场监管 6·18平台监管 平台经济治理 网络市场监管联席会议
- 标签: 高德扫街榜 飞行街景 烟火小店 动态榜单
- 标签: 阿里巴巴 嘉兴园区 中金基金 基础设施REIT
- OpenAI 战略重心调整:编程模型 Codex 正式并入 GPT-5.5 架构
- 标签: HopeSea Hope Sea 港交所 供应链解决方案 集成电路 半导体
- 浜戣�绠楁牳蹇冩妧鏈疍ocker鏁欑▼锛氬湪 Azure 涓婇儴缃� Docker 瀹瑰櫒
- 标签: 欣旺达动力 威睿 吉利控股 动力电池
- 未来十年值得关注的十大云计算趋势
- 标签: 英伟达 英特尔 NVLink Xeon
- 标签: 朱孝天 F4 相信音乐 阿信
- 苹果12 mini销量不佳已遭停产 未来或全面取消mini机型
- 谷歌发布Veo 3.1视频生成模型:新增音频功能和精细化编辑能力
- 揭秘医疗公司Haven:亚马逊、摩根大通和巴菲特如何搞砸一家公司
- 亚马逊投资的电动车公司Rivian考虑50亿美元在得州建设新工厂
- 自研 Pulsar Starter:Winfun-Pulsar-Spring-Boot-Starter
- 标签: 广汽集团 閤先庆 陈家才 冯兴亚
- 大数据“引爆”算力需求 国产AI芯片能否乘风起航?
- 欧洲佳能采用IBM API平台成功转型专业服务会员数两位数成长
- 标签: 国铁集团 CR450 渝厦高铁 铁水联运
- 搜索
-
- 友情链接