首頁 > AI資訊 > 最新資訊 > RTX4090可跑、完全開源,最快視頻生成模型問世,實測一言難盡

RTX4090可跑、完全開源,最快視頻生成模型問世,實測一言難盡

新火種    2024-11-27

開源 AI 視頻社區又一個重量級選手下場。

這個周末,押注開源人工智能視頻的初創公司 Lightricks,有了重大動作。該公司推出了最快的視頻生成模型 LTX-Video,它是首個可以實時生成高質量視頻的 DiT 視頻生成模型。圖片

在一塊 Nvidia H100 上,LTX-Video 只需要 4 秒就能生成 5 秒時長的 24FPS 視頻,分辨率 768x512,可以說視頻生成速度比視頻觀看速度還要快。同時 LTX-Video 完全開源,包括代碼庫和模型權重。

圖片 

LTX-Video共同作者和負責人。「有史以來最快的文生視頻模型誕生了。」圖片

首先來看幾個視頻生成官方 Demo。

目前,用戶可以在 GitHub Hugging Face 上體驗預覽版 LTX Video。完整版發布之后將免費供個人和商業使用,并即將集成到 LTX Studio 中。圖片

項目地址:https://github.com/Lightricks/LTX-Video我們嘗試生成了兩個視頻,比如「a dog chasing a boy who is skateboarding」。

再比如「a girl with an umbrella standing on a bridge, and a handsome man walking towards her」。

試用地址:https://huggingface.co/spaces/akhaliq/anychat接著來了解一下 LTX-Video 的細節。LTX Video 是一個文本到視頻和圖像到視頻模型,能夠以驚人的速度和精度實時創建動態視頻。該模型可以在 RTX 4090 等消費級 GPU 上本地運行,無需專用設備即可以低成本地生成高質量視頻。另外,LTX Video 基于開發人員的反饋和真實世界用例構建,可以提供自然逼真的結果。該模型做了高級定制化設計,可以流暢地集成各種外部工具,從而輕松地增強工作流。在生成過程中,LTX Video 最大程度減少了閃爍和偽影,創建出具有出色細節和清晰度的高保真視頻。每一幀都在精心制作下呈現清晰銳利、栩栩如生,符合用戶的視覺效果。最后,LTX Video 實現了無縫的跨幀一致性,從角色到環境,可以保持連貫的視覺效果,將每個細節整合在一起。未來,LTX-Video 還會有技術報告放出。圖片

相關推薦
免責聲明
本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。

熱門文章