分享
Sora之后,OpenAI Lilian Weng亲自撰文教你从头设计视频生成扩散模型
输入“/”快速插入内容
Sora之后,OpenAI Lilian Weng亲自撰文教你从头设计视频生成扩散模型
用户8537
用户8537
用户4242
用户4242
1月12日修改
🔗 原文链接:
https://mp.weixin.qq.com/s/C8JoiTHw...
⏰ 剪存时间:2024-05-01 19:51:47 (UTC+8)
✂️ 本文档由
飞书剪存
一键生成
机器之心
2024-04-22 12:17 北京
选自Lil’Log
作者:Lilian Weng
机器之心编译
编辑:Panda
过去几年来,扩散模型强大的图像合成能力已经得到充分证明。研究社区现在正在攻克一个更困难的任务:视频生成。近日,OpenAI 安全系统(Safety Systems)负责人 Lilian Weng 写了一篇关于视频生成的扩散模型的博客。
Lilian Weng
机器之心对这篇博客进行了不改变原意的编译、整理,以下是博客原文:
视频生成 任务本身是图像合成的超集,因为图像就是单帧视频。 视频合成的难度要大得多,原因是:
1. 视频合成还需要不同帧之间保持时间一致性,很自然,这需要将更多世界知识编码到模型之中。
2. 相比于文本或图像,收集大量高质量、高维度的视频数据要更为困难,更罔论配对的文本 - 视频数据了。
如果你想了解扩散模型在图像生成方面的应用,可参读本文作者 Lilian Weng 之前发布的博文《What are Diffusion Models?》链接:
https://lilianweng.github.io/posts/2021-07-11-diffusion-models/
从头建模视频生成