StevenZhang
commited on
Commit
•
ca97fdf
1
Parent(s):
f9044a2
Update README.md
Browse files
README.md
CHANGED
@@ -59,6 +59,8 @@ Additionally, many of the design concepts for **I2VGen-XL** are inherited from o
|
|
59 |
<p>
|
60 |
</center>
|
61 |
|
|
|
|
|
62 |
## 模型介绍 (Introduction)
|
63 |
|
64 |
**I2VGen-XL**建立在Stable Diffusion之上,如图Fig.2所示,通过专门设计的时空UNet在隐空间中进行时空建模并通过解码器重建出最终视频。为能够生成720P视频,我们将**I2VGen-XL**分为两个阶段,第一阶段保证语义一致性但低分辨率,第二阶段通过DDIM逆运算并在新的VLDM上进行去噪以提高视频分辨率以及同时提升时间和空间上的一致性。通过在模型、训练和数据上的联合优化,本项目主要具有以下几个特点:
|
@@ -306,6 +308,7 @@ pip install scipy
|
|
306 |
pip install imageio
|
307 |
pip install pytorch-lightning
|
308 |
pip install torchsde
|
|
|
309 |
```
|
310 |
|
311 |
|
|
|
59 |
<p>
|
60 |
</center>
|
61 |
|
62 |
+
<font color="#dd0000">体验地址(Project experience address):</font> <font color="#0000ff">https://modelscope.cn/studios/damo/I2VGen-XL-Demo/summary</font>
|
63 |
+
|
64 |
## 模型介绍 (Introduction)
|
65 |
|
66 |
**I2VGen-XL**建立在Stable Diffusion之上,如图Fig.2所示,通过专门设计的时空UNet在隐空间中进行时空建模并通过解码器重建出最终视频。为能够生成720P视频,我们将**I2VGen-XL**分为两个阶段,第一阶段保证语义一致性但低分辨率,第二阶段通过DDIM逆运算并在新的VLDM上进行去噪以提高视频分辨率以及同时提升时间和空间上的一致性。通过在模型、训练和数据上的联合优化,本项目主要具有以下几个特点:
|
|
|
308 |
pip install imageio
|
309 |
pip install pytorch-lightning
|
310 |
pip install torchsde
|
311 |
+
pip install easydict
|
312 |
```
|
313 |
|
314 |
|