模型简介

Open-Sora-Plan 是一个开源项目，旨在复现 OpenAI 的 Sora（T2V 模型），并构建关于 Video-VQVAE（VideoGPT）+ DiT 的知识。该项目由北京大学和兔展智能公司联合发起，研究显著增强了视频生成的质量以及对文本的控制能力。该模型能够生成 10 秒、 24FPS 的 1024×1024 高清视频，同时还支持生成高分辨率图像，为用户提供更加丰富和精细的视觉体验。

运行方法

1. 打开一个新的终端页面

2. 输入以下命令来安装依赖环境

cd Open-Sora-Plan
pip install diffusers==0.27.2 gradio==4.0.0 einops omegaconf==2.1.1 pytorch_lightning==2.2.1 sentencepiece transformers==4.39.1 accelerate==0.28.0

3. 输入以下命令运行 Gradio demo

python -m opensora.serve.gradio_web_server

4. 打开右侧的「API 地址」，如果没有实名认证，需要先实名认证