Meta AI视频模型Movie Gen炸裂登场:可以配音、编辑

全球社交巨头 Meta Platforms (META)发布最新大模型Movie Gen,正式进军文生视频领域!

就在昨晚,Meta首次公开展示了自家的“用于媒体的突破性生成式 AI 研究”:Meta Movie Gen。

最大技术亮点是,Movie Gen能直接生成带精准配乐的视频,目前Sora、Runway、Luma等一线产品都无法提供该功能。它可以根据文本提示生成长达16秒的高清视频(1080p),帧率高达16fps,满足用户对视频内容的个性化需求。

更令人惊叹的是,用户可以通过上传自己的图像,生成包含自己形象的个性化视频,这种深度的个性化体验是前所未有的。

技术层面上,Movie Gen采用了最新的Llama 3架构,并引入了流匹配技术,这一创新的训练方法不仅提高了生成效率,还提升了视频的细节表现。

Meta公司使用了多达6144个H100 GPU进行大规模训练,确保了Movie Gen的高性能。

Movie Gen的应用前景非常广阔。

在媒体娱乐领域,它可以用于生成电影预告片、音乐视频等内容,为用户提供更加丰富和个性化的娱乐体验。

在教育领域,Movie Gen可以辅助教师制作教学视频,提高学生的学习兴趣和效果。

而在广告行业,Movie Gen可以根据广告创意快速生成吸引人的视频广告,提高广告的传播效果。

同时,Meta 对 Movie Gen 的性能非常自信, 他们进行了一系列的人工评估,结果表明,在视频生成、视频个性化、视频编辑和音频生成这四个方面,Movie Gen 都比业内类似模型表现更好!

Meta CEO扎克伯格称,Movie Gen明年会上线Meta旗下的社交媒体Instagram。

您可能还喜欢...