Diffusion 总结Models专栏文章:入门与实战。

前言。：视频Inpaint的技术非常流行，但Outpaint并不受欢迎。本博客总结了几个经典的视频Outpaint技术。事实上，outpaint在runway等工具上非常受欢迎，但学术界对此关注较少。博主从这三年的顶级会议中找到了三篇最具代表性的论文解读。

目录。

【ACM-MM 2023】M3DDM：Hierarchical Masked 3D Diffusion Model for Video Outpainting。

Mask训练策略。

全局帧嵌入。

清晰的数据集策略。

从粗到细的混合推理。

编辑。

实验分析。

【ECCV 2024】Be-Your-Outpainter: Mastering Video Outpainting through Input-Specific Adaptation。

以前方法的局限性。

方法简述。

在推理过程中的噪声值。

Mask Video Controlnet。

训练参数。

空间感知插入。

Noise regret。

【AAAI 2025】Follow-Your-Canvas: Higher-Resolution Video Outpainting with Extensive Content Generation。

之前任务失败的原因。

方法概述。

空间窗口。

Layout Alignment。

布局编码器 (LE)。

嵌入相对区域（RRE）。