首頁 > AI資訊 > 工具使用 > StabilityAI發布多項產品更新,SD模型將具備3D能力

StabilityAI發布多項產品更新,SD模型將具備3D能力

新火種    2023-11-03

圖片來源:由無界 AI生成

開源圖像生成大模型 Stable Diffusion(SD) 的開發商 Stability AI 今天宣布了其 Stable Diffusion 平臺的多項新增強功能。 這些更新不僅提供了令人興奮的文本轉圖像新功能,而且還涉足 3D 內容創建領域。

3D 模型生成來了

最顯著的增強是全新的 Stable 3D 模型。 到目前為止,Stable Diffusion 主要致力于二維 (2D) 圖像生成。 Stable 3D 模型將改變這一現狀,提供有助于任何類型 3D 內容創建的功能,包括圖形設計甚至視頻游戲開發。

對于圖形設計師、數字藝術家和游戲開發人員來說,3D 內容創建可能是最復雜和耗時的任務之一,通常需要數小時(有時甚至數天)才能創建一個中等復雜的 3D 對象。

Stable 3D 能夠通過圖像或插圖,或編寫文本提示來生成概念質量紋理 3D 對象,消除了大部分復雜性,并允許非專家人士在幾分鐘內通過選擇一個模型來生成草稿質量的 3D 模型。

使用 Stable 3D 創建的對象以“.obj”標準文件格式,可以在 Blender 和 Maya 等 3D 工具中進一步編輯和改進,或者導入到游戲引擎中,例如 Unreal Engine 5 或 Unity。大幅度降低了創作者的工作量。

Stable 3D 為獨立設計師、藝術家和開發人員提供了快速的創作環境,使他們能夠每天以極低的成本創建數千個 3D 對象。

目前,Stability AI 僅開放了 Stable 3D 的私人預覽版本,申請訪問 https://stability.ai/contact。

Sky Replacer

除了進軍 3D 內容生成領域之外,Stability AI 還推出了 Sky Replacer 工具,該工具的設計目的正是顧名思義——替換 2D 圖像中的天空背景。

Stable Diffusion 平臺現在還提供 Stable Fine-Tuning,旨在幫助企業加快特定用例的圖像微調過程。

此外,該公司還將在 Stability AI API 生成的圖像中集成一個用于內容身份驗證的隱形水印。 隨著生成式 AI 日益成為常見工作流程的一部分,這些新的更新都是為了幫助企業進行創意開發。

Stability AI 首席執行官 Emad Mostaque 在接受采訪時表示:“這是為了給富有創意的故事講述者提供他們所需的工具,使他們能夠對圖像進行額外的控制。”

競爭日益激烈的 AIGC 領域

Stability AI 的進步正值文本到圖像生成市場競爭變得激烈之際。

Adobe 瞄準了這一市場,推出了與該公司設計軟件緊密集成的AI工具 Firefly 。 Midjourney 不斷為其技術添加新功能,以幫助設計師生成圖像。 不容忽視的是,OpenAI 最近發布了 ChatGPT 原生的 DALL-E 3 模型,該模型改進了在圖像內生成文本的功能。

Mostaque 非常清楚自己的競爭情況,并致力于通過多種方式幫助 Stability AI 脫穎而出。 他特別強調,他的公司現在正在從僅僅提供模型轉向提供創意渠道。 他指出,借助新的Sky Replacer 和微調功能,它們都是超出用于生成圖像的核心基本模型中的附加步驟。

Sky Replacer 不僅僅是一個功能,它還以業務用例為焦點。

替換圖像中的背景的概念并不是一個新概念。 在非生成式 AI 應用中,背景通常可以被綠幕和色度鍵等技術替換。

Mostaque 表示,Stability AI 正在這些經典技術的基礎上構建工作流程并實現工作流程自動化,從而使業務用戶的流程變得快速高效。 改變天空的背景顏色不僅僅是添加某種形式的創意天賦,它是一種具有非常具體和實用的用例的功能。

“例如,Sky Replacer 對于房地產來說非常有用。”

Mostaque 指出,用戶希望能夠擁有不同的背景、不同的燈光效果。 他強調,從根本上說,這一切都是為了提供控制,因為組織有自己的工作流程來生成圖像和內容。 Stability AI 正在做的是構建優化的工作流程,以幫助實現不同用例所需的控制。

“Sky Replacer 是我們將推出的一系列產品中的第一個,這些產品非常針對行業和企業,建立在我們過去 6 到 12 個月的經驗基礎上。”

Stable 3D 擴展了 Stable Diffusion 的新用例

新的 Stable 3D 模型的工作原理是擴展 Stable Diffusion 中使用的擴散模型,以包含額外的 3D 數據集和矢量化。

“我對能夠以 3D 方式創建整個世界感到非常興奮。”

Mostaque 解釋說,Stable 3D 是根據 Stable Diffusion 和 Stability AI 在 Objaverse-XL 上的工作構建的,Objaverse-XL 是世界上最大的開放 3D 數據集之一。 構建和渲染 3D 圖像長期以來一直是一個資源密集型過程,但 Mostaque 樂觀地認為穩定 3D 將比傳統的 3D 圖像生成方法更有效。 他強調,穩定人工智能還處于早期階段,但他樂觀地認為該技術將隨著時間的推移穩步發展和擴展。 Stable 3D 最初以私人預覽形式提供。

“與傳統的 3D 模型創建相比,這非常高效。過去需要很長時間才能建造的東西現在很快就能得到第一批批準。”

水印和拜登關于 AI 的行政命令

拜登政府本周發布了關于人工智能的行政命令(EO),其中一個組成部分是將水印集成到生成的內容中。

Stability AI 現在正在將隱形水印和內容憑證(Content Credentials)集成到其 API 中。 內容憑證是 Adobe 和其他公司參與的一項多供應商行業工作,旨在幫助提供有關內容的作者信息。 Mostaque 表示,添加隱形水印和內容憑證是負責任的做法。 這也是 Stability AI 致力于為生成的內容帶來真實性的更廣泛努力的一部分。

Mostaque 說:“我們確實正在圍繞這一問題推出一系列舉措和一些額外的舉措,以及額外的研究,因為我們想知道什么是真的,什么是假的。它還有助于我們為未來版本構建的一些歸因和其他機制。”

參考資料:

https://venturebeat.com/ai/exclusive-stability-ai-brings-advanced-3d-and-image-fine-tuning-to-stable-diffusion/

https://stability.ai/blog/stability-ai-enhanced-image-apis-for-business-features

相關推薦
免責聲明
本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。

熱門文章