Movie Gen

Movie Gen 是什么

Movie Gen 是 Meta 公司最新推出的一个AI视频生成大模型，可以根据文本提示生成高质量、高清晰度的视频和音频片段。Movie Gen 使用30亿参数的变换器模型，能够生成高质量的1080p高清视频，并支持各种宽高比和同步音频，Movie Gen 生成的视频最长可达16秒，每秒16帧。Movie Gen 不仅可以创建新视频，还支持编辑现有的视频，可以添加、删除或替换视频中的元素，甚至更改背景或样式。

Movie Gen 包括两个主要模型：Movie Gen Video 和 Movie Gen Audio。Movie Gen Video 是一个具有300亿个参数的变换器模型，能够生成高质量的图像和视频；Movie Gen Audio 则是一个130亿参数的模型，可以生成与视频同步的高保真音频，包括环境音效和背景音乐。

Movie Gen 功能特点

✅ 从文本生成视频：

Movie Gen 可以根据文本提示生成独特的视频，可以创建长达16秒的高清视频。Movie Gen 可制作不同长宽比的高清长视频，这在业内尚属首创。

✅ 用文字编辑视频：

Movie Gen 可实现精确的视频编辑–从样式和过渡到精细编辑，支持通过文本输入编辑现有视频，例如在视频中插入特定元素或改变场景的细节。

✅ 高质量视频输出：

Movie Gen 能够生成高质量的1080p高清视频，并且视频与音频同步，这些视频可以达到16帧每秒的播放速度。

✅ 制作个性化视频：

Movie Gen 可以通过上传人物照片，并结合文本提示来创建个性化的视频内容，用户可以根据自己的需求，生成特定场景的并且保留人物特征的个性化视频。

✅ 创建音效和配乐：

Movie Gen Audio 模型可以创建和扩展音效、背景音乐或整个配乐，支持生成与视频内容同步的背景音乐和音效，Movie Gen Audio 可以生成长达45秒的音频片段。

Movie Gen 如何使用

Movie Gen 目前处于内部测试和技术研究阶段，Meta 官方暂未公布具体的发布时间，可以访问 Meta Movie Gen 官网获取最新消息。

• Movie Gen 官网：https://ai.meta.com/research/movie-gen/
• Movie Gen 研究报告：https://ai.meta.com/static-resource/movie-gen-research-paper