Open-Sora 1.1发布:视频生成质量和持续时间显著提升

AOuPMh.jpg

今天,我们很高兴地推出 Open-Sora-Plan v1.1.0,它显着提高了视频生成质量和持续时间以及文本控制功能。与之前的 Open-Sora-Plan v1.1.0 版本相比,改进了:

更好的压缩视觉表示:我们优化了 CausalVideoVAE 架构,该架构现在具有更强的性能和更高的推理效率。

生成质量更高、时长更长:我们使用了更高质量的视觉数据和标题以及ShareGPT4Video对长视频进行注释的能力,我们可以生成更高质量和更长的视频。

除了性能改进外,Open-Sora-Plan v1.1.0 还保持了 v1.0.0 的极简设计和数据效率。值得注意的是,我们发现 v1.1.0 表现出与 Sora 基础模型相似的性能,这表明我们版本的演变与 Sora 演示的缩放定律一致。

我们开源了 Open-Sora-Plan,以促进社区视频生成的未来发展。代码、数据、模型将公开提供。

演示:Hugging Face 演示在这里。

代码:所有训练脚本和示例脚本。

模型:此处为 Diffusion Model 和 CasualVideoVAE。

数据:此处为原始视频和字幕。

GitHub:https://github.com/PKU-YuanGroup/Open-Sora-Plan/tree/main

在线体验:https://huggingface.co/spaces/LanguageBind/Open-Sora-Plan-v1.1.0

Open-Sora-Plan v1.1.0基于 transformer 的文本到视频扩散系统,基于 T5 的文本嵌入进行训练。


收藏
最新工具
宣小二
宣小二

宣小二 媒体发稿平台,自媒体发稿平台,短视频发布平台,基于AI驱动的企业自助式投放平台。 宣小二媒体发稿平台隶属于杭州龙投文化传媒有限公司,致力于为企业提供高效的新闻发稿、自媒体发稿和短视频发布服务。平...

笔灵AI简历
笔灵AI简历

一款操作简单、生成迅速、效果卓越的AI简历生成工具,笔灵AI简历旨在为每一位求职者提供最优质的简历制作和优化服务。

简单简历
简单简历

简单简历,简单好用的AI简历工具,辅助求职者制作独一无二的简历

速创猫Ai简历
速创猫Ai简历

可以10秒钟生成一份高质量简历、根据岗位需求定制简历、优化精修简历。还可以模拟面试、行业分析、职业规划等一站式专业的解决您的求职难题。

蓝字典AI
蓝字典AI

一款AI求职工具,通过AI帮助求职者智能生成简历、完成AI面试、辅助职业规划以及解答求职过程遇到的问题。

Wonderin AI
Wonderin AI

一款强大的简历生成工具,利用先进的算法,帮助您轻松创建与您的职业目标相适应的专业简历。

简历Bot
简历Bot

一种利用人工智能技术帮助用户制作和优化简历的AI简历生成器。它通过分析用户的个人信息、工作经验、技能等,结合岗位要求,自动生成或优化简历内容。

Huntr AI
Huntr AI

一个AI简历和求职信生成器,帮助您使用 AI 快速创建量身定制的Ai简历和求职信,一键填写申请表,并自动跟踪你的求职进程。

未来简历
未来简历

全新一代AI大模型简历生成工具,媲美简历专家,让你的简历通过率提高300%!

满分简历
满分简历

一款专业的在线AI简历制作和简历优化工具,满分简历帮助您快速创建出结构清晰、内容丰富的个人简历。