Sora黯然失色！Meta AI視頻模型Movie Gen炸裂登場：可以配音、編輯

全球社交巨頭Meta發布最新大模型Movie Gen，正式進軍文生視頻領域！

就在昨晚，Meta首次公开展示了自家的“用於媒體的突破性生成式 AI 研究”：Meta Movie Gen。

而就在這關鍵時刻，10月4日訊，OpenAI 的 Sora 負責人突然宣布離職，下一站加入谷歌 Deepmind！

精准剪輯、還能配樂

最大技術亮點是，Movie Gen能直接生成帶精准配樂的視頻，目前Sora、Runway、Luma等一线產品都無法提供該功能。它可以根據文本提示生成長達16秒的高清視頻（1080p），幀率高達16fps，滿足用戶對視頻內容的個性化需求。

更令人驚嘆的是，用戶可以通過上傳自己的圖像，生成包含自己形象的個性化視頻，這種深度的個性化體驗是前所未有的。

能理解物體運動、主體-客體交互和攝像機運動，各種概念的合理運動都不在話下。具體來看，該模型能進行精確的視頻編輯，包括添加、移除或替換元素，以及修改背景和風格等全局性修改。

盡管今年陸續已有不少視頻模型相繼亮相，但大多只能生成“啞劇”，食之無味棄之可惜，而這也是Movie Gen最引人注目的，Movie Gen能夠根據視頻內容和文本指令生成高質量的音效和音樂，與視頻內容高度匹配並同步。

技術層面上，Movie Gen採用了最新的Llama 3架構，並引入了流匹配技術，這一創新的訓練方法不僅提高了生成效率，還提升了視頻的細節表現。

Meta公司使用了多達6144個H100 GPU進行大規模訓練，確保了Movie Gen的高性能。

Movie Gen的應用前景非常廣闊。

在媒體娛樂領域，它可以用於生成電影預告片、音樂視頻等內容，爲用戶提供更加豐富和個性化的娛樂體驗。

在教育領域，Movie Gen可以輔助教師制作教學視頻，提高學生的學習興趣和效果。

而在廣告行業，Movie Gen可以根據廣告創意快速生成吸引人的視頻廣告，提高廣告的傳播效果。

同時，Meta 對 Movie Gen 的性能非常自信， 他們進行了一系列的人工評估，結果表明，在視頻生成、視頻個性化、視頻編輯和音頻生成這四個方面，Movie Gen 都比業內類似模型表現更好！

开啓全民視頻創作者的時代

Meta的Movie Gen模型發布後，受到了業界的廣泛關注。

它不僅展示了Meta在AI領域的技術實力，也爲整個行業的發展指明了新的方向。隨着技術的不斷進步和應用的不斷拓展，AI視頻生成將成爲未來媒體內容創作的重要趨勢。

Meta CEO扎克伯格稱，Movie Gen明年會上线Meta旗下的社交媒體Instagram。

有意思的是，他也在個人Instagram账號發布了一段Movie Gen生成的視頻，顯示他在用腿部推舉機，隨着他开始鍛煉，背景發生了變化。

先是顯示，他在一家霓虹燈照耀的未來風格健身房鍛煉，然後變爲，他穿着角鬥士盔甲鍛煉，接着變爲他推動一台燃燒的純金機器，最後變爲，他用腿部推舉一盒雞塊，周圍是一片薯條。

看完演示 demo 的 Lex Fridman 言簡意賅地表達了贊嘆。許多網友再次“拉踩”OpenAI 的期貨 Sora，但更多翹首以待的網友已經开始期待測試體驗資格的开放了。

有網友對Movie Gen的全面化功能相當震驚，表示，Meta比OpenAI更高的發布了Sora。

Meta AI 首席科學家 Yann LeCun 也在线爲 Meta Movie Gen 站台宣傳。 在社交媒體上，用戶們對Movie Gen的討論同樣熱烈。

一位名爲@VideoCreator的網友表示，"Meta的Movie Gen讓我看到了視頻創作的未來，它讓制作視頻變得像寫文章一樣簡單。" 

標題：Sora黯然失色！Meta AI視頻模型Movie Gen炸裂登場：可以配音、編輯

地址：https://www.iknowplus.com/post/154073.html