你大概率會想起這句知名廣告詞:“中國山東找藍(lán)翔”。(不打廣告,不打廣告。) 那如果換個對象,換個問法,“在人工智能(AI)的世界里,哪一家的推土機更 cool?” 一個可能的答案是什么? 來,先斗一波圖再說。 但事實上,它們在現(xiàn)實中的模板,只是下面這個普普通通的、“大黃蜂”顏色的推土機。 據(jù)介紹,他們可以利用人工智能技術(shù)將著名藝術(shù)品的風(fēng)格融入任意 3D 場景中。 而且,相比于以往的研究,這一最新技術(shù)可以顯示出更高質(zhì)量的細(xì)節(jié)。 圖|新方法顯示出更少的幾何偽影(來源:arXiv) (來源:arXiv) 據(jù)論文描述,轉(zhuǎn)換質(zhì)量提高的原因是,研究團(tuán)隊的人工智能技術(shù)可以直接比較原始圖像和新風(fēng)格的 3D 場景之間的細(xì)節(jié)。而以往的人工智能技術(shù),只是將圖像特征轉(zhuǎn)換為更緊湊的統(tǒng)計集進(jìn)行分析,從而丟失了很多原始細(xì)節(jié)。 對此,論文作者之一 Kai Zhang 表示,“我們試圖真正捕捉微妙的藝術(shù)風(fēng)格,就像《星空》的筆觸。這對人類的感知非常重要,因為我們的眼睛對局部細(xì)節(jié)非常敏感。” 在此次工作中,研究團(tuán)隊證明了基于最近鄰特征匹配(NNFM)樣式損失在捕捉風(fēng)格細(xì)節(jié)方面非常有效,同時保持了多視圖的一致性。 圖|基于 NNFM 獲得一致的自由視點風(fēng)格效果圖(來源:arXiv) 圖|延遲反向傳播示意圖(來源:arXiv) 創(chuàng)造藝術(shù)形象通常需要大量的時間和特殊的專業(yè)知識,將藝術(shù)作品擴展到 2D 圖像平面之外的維度,比如時間(在動畫中)或 3D 空間(在雕塑或虛擬環(huán)境中),會面臨很多限制和挑戰(zhàn)。 研究團(tuán)隊表示,這一最新的風(fēng)格轉(zhuǎn)換技術(shù)(style transfer technique)未來有望用于動畫電影和游戲行業(yè)中,用于手動微調(diào)前的風(fēng)格模板。 此外,這一技術(shù)也同樣適用于寫實風(fēng)格轉(zhuǎn)換(photorealistic style transfers),比如將正午時的自由女神像轉(zhuǎn)換為日落時的自由女神像。 而且,算法成功運算一次可能需要 20 分鐘的時間。這是一個非常耗時的過程,因為在反復(fù)試驗的過程中,人們可能會嘗試不同的風(fēng)格。 為此,研究團(tuán)隊在接下來的工作中將致力于提高內(nèi)容生成的效率。 或許在未來的某一天,這一技術(shù)將用在人人都在使用的智能手機上。 參考資料: https:///abs/2206.06360 https://www.cs./projects/arf/ https://github.com/Kai-46/ARF-svox2 |
|