從讓人“san 值狂掉”的扭曲畫面，到讓人贊嘆不已的作品，AI 生成圖像實現(xiàn)這種跨越，就用了一年左右的時間。

藝術(shù)家 Boris Eldagsen 說，除了紀實，大部分攝影都可以被 AI 取代。但當大量模擬紀實照片的 AI 圖像鋪到面前，你也會覺得真實和虛幻從未像現(xiàn)在這樣難以分辨。

Boris Eldagsen 和他獲 2023 年索尼世界攝影獎的作品，但作品為 AI 生成，當時評委沒看出這并非攝影作品｜網(wǎng)絡(luò)

不過，今天我們不著重討論 AIGC 的效果，而是要來介紹 AI 生成圖像中最有趣，也最關(guān)鍵的能力——局部擦除、修改（inpainting），以及無限擴展圖像（outpainting）。

Inpainting 就是涂抹掉圖片中的局部，然后通過 AI 重新生成該部分的內(nèi)容丨h(huán)ttps://www./blog/stable-diffusion-in-keras-a-simple-tutorial/

Outpainting 就是依據(jù)提示詞用 AI 擴展現(xiàn)有的畫面丨h(huán)ttps://bootcamp./midjourney-v5-2-is-out-with-mind-blowing-features-fd91115319c1

別看這兩種功能簡單，我們不僅可以用來編輯圖片，也能在前者基礎(chǔ)上“進階”生成視頻，玩法無窮，就看你的創(chuàng)意了。

最近更新的 Photoshop (beta)，也新增了 inpainting 和 outpainting 這兩種功能。而最新版的 Midjourney 也因為 outpainting 功能（官方稱之為“Zoom Out”）再一次出圈。

其實，這些功能并非它們“首發(fā)”，去年夏天 OpenAI 的 DALL·E 2 就已經(jīng)展示過這些特色功能，后來開源的 Stable Diffusion 也內(nèi)置了，但都因為用起來不夠方便，沒掀起多大水花。直到知名生產(chǎn)力工具 Photoshop 搭載，才真正火爆了起來。

這篇文章中展示的作品，所用工具大多數(shù)都是 Photoshop。一是它的 AI 編輯功能效果最好，二是它還本身就具備完整的基礎(chǔ)圖片編輯功能，很多工作都可以一站式處理。

網(wǎng)頁截圖

其實，早在去年就有人把 Stable Diffusion 的 inpainting 功能制成 Photoshop 可用的插件。今年，Adobe 終于緩過神來了，把這些功能全都整合了進去。

你用新增了 AI 功能的 Photoshop，可以毫無痕跡地拼合、修改畫面里的任何東西，輕輕松松就能模糊現(xiàn)實和虛幻的邊界。

它剛一推出，就有人把網(wǎng)絡(luò)上那些病毒式傳播的梗圖組合到一個場景里：

視頻來源：https://twitter.com/HumansNoContext/status/1673910137650835456

把原本不存在于同一空間的事物，無痕拼接起來，是 inpainting 的拿手好戲。

我想到了塔羅牌——由 22 張大阿卡納和 56 張小阿卡納組成，那 22 張主牌每張都代表著某種品德或經(jīng)驗，我們唯有結(jié)合這些這些才能完全認識自己，成為一趟叫“愚人之旅”的成長。

我把這些牌面用 AI 無痕拼接起來后，這個成長故事在視覺上就連貫起來了。

能處理圖片，自然也能處理視頻，因為視頻本質(zhì)就是一系列圖片（序列幀）的集合。

那么，如何用 inpainting 制作有創(chuàng)意的視頻呢？我先拿我制作的“量子花”作示范：

整體思路就是修改畫面里的局部元素，然后用 AI 補幀功能把多張圖片鏈接起來。

我先是在 Photoshop 修改了實景畫面中鮮花的品種，重復(fù)了 30 多次后，我拿到了 50 張圖片，從中挑選我滿意的。

接下來，我用 Runway 的 AI 補幀功能來制作視頻。到 runwayml.com 上找到【frame interpolation】——這個補幀功能可以自動補充你上傳圖片和圖片之間的過渡動畫。這樣我們就能得到不同鮮花之間連貫的變形動畫。具體操作也很簡單，只需要你上傳圖片，然后一鍵補幀即可。

你看，這鮮花在不斷變化著品種！我將它稱為量子花。

對于這次 AIGC 帶來的變革，很多人焦慮，甚至恐懼，但我們也應(yīng)該看到新工具帶來的能發(fā)揮無窮創(chuàng)意的可能性，就像這朵不斷變化形狀的鮮花一樣。

除了制作上面這種“變形動畫”，我們還可以使用類似方法，來制作“生長動畫”。這里還是用鮮花舉例，通過一點點修改花束的邊緣，來實現(xiàn)花束向上展開的效果。這里還是使用 Photoshop (beta) 和 Runway 兩個工具。

除了植物的生長動畫，還有國外設(shè)計師用它制作了建筑的生長動畫，效果更加有趣、壯觀，十分適合拿來重建爛尾樓！

視頻來源：視頻來自 Twitter 用戶 @paultrill

Outpainting 一張圖片，我們就能看到主體突破了畫面的邊界，看到意想不到的世界。

現(xiàn)在很多工具都可以 outpainting，最近很火的 Midjourney 甚至還專門推出一個能“定向拓展”的功能?？上У氖牵壳?Midjourney 還不支持上傳任意圖片進行擴展，只能用平臺生成的圖。

我測試了目前市面上帶 outpainting 功能的產(chǎn)品，如果你想了解它們的功能和優(yōu)劣勢，可以看以下表格：

目前圖片拓展最常見的玩法，就是直接用 Midjourney 重復(fù)拓展照片，然后把多張圖片連起來，制作成“主體不斷縮小，外景持續(xù)入鏡”的視頻。目前網(wǎng)上已有非常多的教程，這里就不展開來講了。

以上玩法主要還是以畫面中心點向四周擴展，今天我們講講定向拓展——可以嘗試向上、下、左、右的方向擴展畫面。通過定向擴展，你會得到一張非常長的畫面：

比如，這張圖的尺寸是 6144 × 768，Midjourney 并沒有限制圖像的大小，我還可以繼續(xù)拓展下來。拿到這張圖后，用 AE 就能做成簡單的動畫了：

我錄制了一段地鐵的視頻，然后還是通過 Runway 的刪除背景功能把窗戶摳掉，然后把這段實景視頻以及用 Midjourney 做的定向動畫，放在 AE 里結(jié)合一下，就成了這種窗外是異次元的視頻動畫了，你還可以把窗外的場景換成末世廢土場景、賽博朋克城市、火星和月球……

除了這種定向延展的視頻，在大家常見的“中心無限放大”這個思路上還有哪些有趣玩法呢？

我們還可以結(jié)合實景視頻來做無限拓展，這樣融合了真實和虛幻的效果，會更有帶入感。

下面這個例子我用的是 Photoshop，思路很簡單：架起穩(wěn)定支架拍攝一段視頻，保證視頻無抖動并且畫面周圍一定要是靜止的，只有中間部分是動態(tài)。

第二步就是把這個視頻的第一幀導(dǎo)出成圖片，再把這張圖片通過 Photoshop  的 AI 拓展幾次。我這里是將畫面固定在 1920 × 1080 這個大小，每次把圖片長寬縮小 50%，然后用 AI 補充剩下的部分。這樣反復(fù)十幾次。

如圖，虛線的部分是 AI 填充的。

在 AE 里，備好一個實拍的視頻，實拍視頻的第一幀圖片，以及用 Photoshop AI 拓展生成的 12 張圖：

統(tǒng)統(tǒng)把它們放到 AE 里處理，就生成了以下這個視頻：

這個俯拍視頻，從工作室一直放大到建筑、城市、大陸和星球。制作完了之后我才發(fā)現(xiàn)，這個視角特別像是《三體》里智子監(jiān)控人類的視角。

感謝 AIGC，讓這種幾乎不可能存在的視角輕輕松松就實現(xiàn)了。

上面我們提到了兩種 outpainting 的創(chuàng)意用法。一種是重復(fù)擴展圖片，然后把圖片拓展的過程做成動畫，另一種是用實拍視頻融合 AI 擴展圖片，這個做法模糊了真實和生成的邊界，沖擊力更強。

但玩法遠不止這些，Twitter 用戶 @paultrill 做了這么一個嘗試：

用 AI 讓圖片和視頻自然地銜接和過渡，用來做轉(zhuǎn)場素材非常合適丨@paultrill

如果說去年的重點都在文生圖上，那么今年的焦點則是 AIGC 與視頻。生成圖片效果已經(jīng)足夠驚艷后，我們看到越來越多的新技術(shù)都開始服務(wù)于視頻、動畫。

如果非要預(yù)測的話，未來一年必定會有針對細分視頻工作流的產(chǎn)品出現(xiàn)，國外目前做的最好的是 Runway，國內(nèi)各大短視頻的公司都在開始研發(fā)相關(guān)的產(chǎn)品了。

這將是一個人人都可以輕松用 AIGC 實現(xiàn)自己的創(chuàng)意和想法的時代：真實與虛幻的邊界也會越來越模糊，創(chuàng)作空間在擴寬；每個想法都能快速變成作品，創(chuàng)作門檻在降低。這對于創(chuàng)意者來說，無疑是一個從未有過的好時代。

作者：逗砂

編輯：biu

文章中配圖和視頻如無特別說明，來源均為作者