首頁 > 科技要聞 > 科技> 正文

矢量圖如3D般旋轉(zhuǎn),設(shè)計效率提升1000%,Adobe的野心都在這些AI黑科技里

appso 整合編輯:太平洋科技 發(fā)布于:2024-11-17 20:23

風(fēng)風(fēng)火火召開了發(fā)布大會,推出全新的生成式視頻工具,這陣子 Adobe 都快有點飄了。

公司的副總裁 Alexandru Costin 在接受 The Verge 的采訪時說,接下來 Adobe 會大力、加快、全面 AI 化。往后的產(chǎn)品開發(fā)計劃里,都會包含生成式 AI。

他甚至還勸退用戶,「我們的舊產(chǎn)品沒有 gen AI,但我不推薦使用」,這真的是親高管嗎。

「如果不使用 AI,就不會在這個新世界成功!

副總裁口出狂言,并非沒有原由:今年 Adobe 在 MAX 大會上,接連放出了許多大招。除了作為重頭戲的Firefly Video Model,還有更多沒有發(fā)出來的武器,藏在 Sneaks 環(huán)節(jié)里。

Sneaks 一直以來都是 Adobe 的演練場,那些有潛力推向市場、但仍處于開發(fā)階段的項目,都放在這個環(huán)節(jié)。

今年 MAX 大會上的 Sneaks 環(huán)節(jié)很熱鬧,每一個項目的負(fù)責(zé)人仿佛是打碟的 DJ,上臺先來一輪掌聲,然后再講解自己的項目。

一共 9 個項目:根據(jù)畫面內(nèi)容匹配音效的 SuperSonic、檢測和匹配視頻素材的 Know How、用 prompt 先做出 3D 模型再自動渲染的 Scenic、能讓圖形按照規(guī)定路線變化的 In Motion、自動排版工具 Remix a Lot、自動 PS 及合成 Perfect Blend、主打?qū)崟r編輯的 HiFi、檢測瑕疵且修復(fù)視頻的 Clean Machine,以及自動建模矢量圖的 Turntable。

這些 Sneak 項目有一個共同點:都展現(xiàn)出了生成式 AI 注入到具體使用環(huán)節(jié)時,所能帶來的震撼效果。我們來看看幾個比較有潛力的項目。

Clean Machine:藏在視頻里的瑕疵,都能清理

首先是能夠自動檢測并清除瑕疵鏡頭的 Clean Machine。

由鏡頭眩光造成的光斑、過曝等,當(dāng)然可以手動消除,那就要一幀一幀的檢查,再慢慢修整。Clean Machine 自動檢查整個視頻,找出所有的瑕疵幀,然后自動修復(fù),同時填補上原有的元素。

在經(jīng)過修復(fù)之后,不僅過曝的畫面移除了,也沒有損傷整個視頻的品質(zhì),非常絲滑。

這項技術(shù)應(yīng)用場景很多,比如下圖這種大面積陰影,是因為路人闖進了鏡頭造成了遮擋。可以看到模型仍然可以給出一個干凈、無遮擋的畫面。

HiFi:實時生成,還能實時編輯

HiFi 是一個能夠完成實時生成和編輯的功能,不算是很新鮮的想法,外頭不少創(chuàng)業(yè)公司已經(jīng)做了出來。

「實時」這個特性在 Adobe 的演示中,還是能看到基本邏輯是不變的:抽卡。只不過一致性表現(xiàn)得好,而且用戶可以精準(zhǔn)控制、調(diào)節(jié)的顆粒度更細(xì)。

像上面這個樹葉,每一筆添上去的時候,其實綠植的整體都在變化,看得出還是在抽卡。不過輪廓、葉片數(shù)量這些,基本能保持一致。這在被抽卡困擾的生成工具中,屬實難得了。

HiFi 還計劃支持鏡頭捕捉。在大會上,嘉賓在鏡頭下用紙樣搭配了一下家具,掃描之后,立刻就生成了對應(yīng)的效果圖,而且高度還原。

Remix A Lot:海報神器

這是一個針對圖文排版的自動調(diào)節(jié)功能,當(dāng)畫面變化整體大小的時候,內(nèi)部的文字和圖像能夠自適應(yīng)新的比例,保持不變形。

在演示里的是一張萬圣節(jié)海報。最開始,這個海報是手繪的,Remix 可以提取里面的元素,自動轉(zhuǎn)換為矢量形態(tài)。

哪怕是下面這種票據(jù)形態(tài),也可以一鍵自適應(yīng)。Remix 可以根據(jù)新的畫幅,自動調(diào)節(jié)所有的元素,同時保持各個元素之間的關(guān)系、以及整體設(shè)計風(fēng)格不變。

做過海報的都知道,這里的門道有多深。無論畫幅是什么,都可以自動的裁圖、填充、改變文字位置,跳過一點點手動拖拽的工夫。

Perfect Blend:一鍵 PS 指日可待

另一個海報神器是 Perfect Blend,可能是這次所有 Sneaks 中最實用的一個,期待它能實裝進 Photoshop 里,Adobe 搞快點。

Perfect Blend 非常接近「一鍵 PS」,而且不止是套個美顏濾鏡那么簡單,是真-修圖。摳圖啥的不用說,重點是調(diào)整光效和色調(diào)。

經(jīng)過模型計算,原本光線差異極大的元素,都「融合」在了同一個光線邏輯中。尤其是女孩(她是這個項目的開發(fā)者),臉上原本的柵格影子都被完美修掉。

光線差異極大的情況,也依然可以掌控。這張人像里,臉部幾乎都隱在黑暗中,也能根據(jù)新的夕陽背景,覆上新的光澤。

為什么說海報神器呢?看這里

哪怕所有的人像是由不同的相機拍攝、在不同的時間、有不同的角度、不同的光線,都不是問題,直接一鍵生成《冰與火之歌》風(fēng)格海報。

Turntable:能轉(zhuǎn)的矢量圖

Turntable 是最有巧思的一個,對畫手、動畫人也很有用,實裝進 Illustrator 指日可待。

這是一個轉(zhuǎn)化矢量圖像的功能,把已經(jīng)整體存在的矢量圖層,一鍵轉(zhuǎn)化成「立體」模型。下圖中的騎士,被轉(zhuǎn)化之后,角度就可以自由調(diào)整。

除了橫向旋動也可以縱向,綜合起來就能夠調(diào)節(jié)視角維度。

實際上 Turntable 中,即便圖像能夠全方位旋轉(zhuǎn),依然還是矢量圖。模型所做的是補全了原始畫面沒有涉及到的部位。比如下面這匹馬:

在原始畫面中,這匹馬是正側(cè)面,只能看見兩條腿?梢坏┮獡Q角度,另外兩條腿勢必要露出來。而有了 Turntable,不必重畫,不必補幀,只需要鼠標(biāo)拖一拖,就是最符合邏輯的畫面。

又或者是這個薯片俠,它的背面和側(cè)面都沒有畫出來。如果想改變角度,需要補足這些沒有的部分。

Turntable 在學(xué)習(xí)原始圖像之后,自動補足,是真的省事。

Adobe 這些潛力項目,在如今的市場上并非沒有同類。

實時生成,Krea 在做了;根據(jù)畫面生成音樂,很多大廠都在做了,也有不少都融合進了自己的生成式視頻工具里。

但長久以來,Adobe 在后期制作中的霸主地位,帶來的是難以逾越的壁壘:使用習(xí)慣。

這些 Sneaks 項目即便只是開發(fā)階段,但當(dāng)看它們出現(xiàn)在熟悉的灰色面板上,我很快就能自行腦補大概的使用方法是什么。

學(xué)習(xí)成本,有,但不多。更何況圖像的生成,幾乎都沖著一鍵完成去的了。

只要你習(xí)慣用 Photoshop,就不可能不會用加了 AI 的 Photoshop;習(xí)慣了 Premier,就不可能不懂加了 AI 的 Premier——多了一個圖層、一個小窗而已,根本難不倒人。

Adobe 的一系列工具,已經(jīng)塑造了用戶的使用習(xí)慣,存在用戶深深的腦海里。而其它的工具,不僅是難以和大工具聯(lián)動,素材得手動導(dǎo)入導(dǎo)出,還需要重新建立用戶的整體使用習(xí)慣。

初創(chuàng)公司點子新、創(chuàng)意好、技術(shù)力可能也不差,但是要建立新習(xí)慣很難。更何況,人想要回到舊習(xí)慣里又極其容易。大廠的壁壘,是筑在人的天性上。

雖然副總裁的話說得有幾分狂妄,但道理卻不差:當(dāng) gen AI 的技術(shù)融入到我們已經(jīng)無比熟悉的工具里,點開來,用一用,再正常不過了。那不是對技術(shù)的「投降」,而是一種自然而然的發(fā)生。

本文來源:Appso

網(wǎng)友評論

聚超值•精選

推薦 手機 筆記本 影像 硬件 家居 商用 企業(yè) 出行 未來
二維碼 回到頂部