AI 速報-3月

Moonshine AI
6 min readMar 29, 2024

--

3月可以說是被Sora洗版的一個月,但同時也是許多好用的AI工具更新的一個月 !

影像類

1. Midjourney - 更新 -

● 在3月中旬 Midjourney 也增加了新的功能 “ Character Reference ”,目前還在測試中但已可使用,可以得到角色的一致性 (臉部、髮型、服裝等等),在句尾使用指令 - -cref 圖片URL,並可在句尾同時加入 - -cw 0~100 調整該數字就可調整參考圖的相似強度,不過比較適用於由 Midjourney 產生的角色,不適合真人及照片。

● Midjourney alpha 已推出測試 (新的 web 介面),可在網頁上生成圖像並可用介面調整參數指令,還能建立群組資料夾進行分類管理。

▲ 使用指令後與參考圖相似度更高、特徵更穩定 (黃底圖為參考圖)
▲ 可以在網頁版生成圖片,也可分資料夾

2. Mangnific.ai - 更新 -

除了放大的功能,也新增了 “ Transfer Style ” 的功能,切換到 Transfer Style 後在網頁上的 Engine 可選擇想要轉換的風格 (該選項有較大的程度影響結果),亦有其他的選項可以調整;真實照片的類型會吃不太到,推薦使用 2D 插畫或是油畫類等風格明顯的圖。

▲使用Transfer Style換各種風格

3. SURIP

SURIP 是一個可在 ComfyUI 上運行的放大工具,他適用於非商業用途,已有釋出 V2 版本,打入的關鍵字句有一定的影響力,算圖時間算快,放大後的細節還不錯但有時候會降彩度。

▲ 放大效果不錯,細節和清晰度都提升不少

動態類

  1. Sora

為 Open AI 於近期釋出的影片生成模型,Sora 是一個可以根據文字指令創建
真實且具有想像力的 AI 模型,可生成長達一分鐘的動態影像, 目前僅有示範 Demo 及開放特定人士測試使用,影片的流暢度相比以往來的生成試影片來的順暢很多,除了符合真實世界的場景外,在生成超現實的元素方面也相當的厲害; Open AI 也於近日發表與視覺藝術家、影像製作人合作使用 Sora 製作的影片。

▲ 使用Sora生成的影片

2. Fable

為一款線上的動態編輯工具,最近開發了一款結合生成式 AI 的工具,現為 Beta 版本,且免費試用,可進行即時算圖及動畫製作,並可以嘗試各種風格轉換及在介面中直接編輯影片, AI Lenses 選項中提供了多種風格濾鏡,目前秒數僅限制在五秒以內。

▲ 多種風格及可編輯時間軸
▲ 使用油畫風格來轉換

3D 類

  1. Meshy.ai -更 新 -

近期推出 2.5 版更新,可以編輯 AI 所生成的紋理,補足 AI 生成模型時貼圖有缺陷的問題,透過簡單繪製區域並描述想要的文字來重新修改區域紋理,目前僅支援在文字轉 3D 及使用 pro 方案的用戶,精細度有一定的提升。

▲ 可使用遮罩圈選想修改範圍、並打上關鍵字
▲ 將貼圖 inpaint 為有瀏海加閉上嘴唇的女性

2. SV3D

Stability AI 推出的一個新 3D 內容生成模型,能夠基於單張圖片生成 3D 多視角影片,在生成的影片品質及多種視角的表現不錯,強化了姿勢的可控性和保持物體外觀一致性,可與其他的節點工具一起做使用,加強流暢性和面部細節等等。

▲ 網友使用SV3D與其他工具製作的多視角影片

3. TripoSR

此工具為 Stability AITripo AI 合作開發的生成模型,可以使用單一的平面影像快速的生成出實體 3D 模型,對於算力的需求不高且是開源的模型,導出格式支援 .obj 和 .glb,可再進入 3D 軟體中進行編輯;需注意的是使用 TripoSR 直出的 3D 模型色彩是使用 Vertex Color,要再另外出貼圖,目前貼圖的精細度還不算很細緻。

▲ 在ComfyUI使用TripoSR製作的簡易小場景
▲ 模型生成速度極快,約15秒內

其他應用類

  1. Stable Projectorz

是一個免費的紋理產生工具,利用 Automatic1111‘s Stable Diffusion 技術直觀的為 3D 模型生成紋理並投影至物件上,將其匯出貼圖至3D軟體使用;包含的功能很多,像是保持 UV 的完整性、提供混合投影與消除接縫的工具、還可以調整顏色和重繪等等;效果還不錯,也可進行多角度的投影,但需要的電腦效能較高 (此工具是在本機上運行的)

▲ 匯入蘋果3D模型,並用AI生成一顆蘋果的紋理

以上為我們的精選資訊,我們會繼續挖掘各種好用的AI資訊,持續追蹤新的工具更新消息 !

--

--

Moonshine AI

夢想動畫是一家以科技研發和藝術創作為核心的動畫公司。我們專注於動態影像的科技研究,並於2022年成立了AI小組,旨在在新時代的潮流中尋找創新的影像製作方法。 我們的目標是推進動畫領域的技術開發和創意革新。受科技的啟發,希望結合藝術創作開發出獨特且引人入勝的作品。