Adobe 的新 AI 技術可以用來增進放大影片的細節

VideoGigaGAN 可以避免影片放大時常見的閃爍或失真。

Adobe VideoGigaGAN
Adobe VideoGigaGAN

Adobe 近期發表的大部分新功能都以 AI 為基礎,例如 Premiere Pro 的物件添加和移除功能,以及 Photoshop 中以文字生成圖像的功能等。據 The Verge 報導,現在該公司又推出了一個新的實驗性 AI 功能「VideoGigaGAN」,可以將影片放大達八倍之譜,還能同時避免經常出現的閃爍或失真等現象。

Adobe 稱,VideoGigaGAN 之所以優於其他影片解析度提升方法,是因為它可以避免生成對抗網絡(GAN)技術經常會產生的雜訊和閃爍。不僅如此,它還能增加銳利度和細節,而大多數其他的 AI 系統都無法同時做到這兩點。當然,由於該系統會憑空捏造一些原本不存在的細節,因此並不是說它能像 CSI 裡的「強化」那樣,讓原本不清晰的部份變清晰。但它添加的細節看起來確實是相當逼真,例如皮膚紋理、細小的絨毛、天鵝羽毛細節等等。

Adobe VideoGigaGAN
Adobe VideoGigaGAN

根據 Adobe 研究人員的說法,該模型是以一個名為 GigaGAN 的靜態影像放大器為基礎衍生而成。以往的解析度提升模型在生成豐富細節方面本身就存在困難,而應用到影片上更是有著額外的挑戰。Adobe 在此結合了「Temporal Attention」(減少隨時間累積的雜訊)、「Feature Propogation」(讓添加的細節保留)、反鋸齒補償、以及一種稱為「HF shuttle」(傳送高頻特征)的技術,才達成了最終結果。

Adobe VideoGigaGAN
Adobe VideoGigaGAN

如果將此功能添加到 Premiere Pro 或 After Effects 等產品的話,它可以幫助影片制作人員顯著改善低解析度素材的畫質。不過使用 AI 來增強人物形象仍存在爭議,目前尚不清楚 Adobe 是否真的計劃將此產品商業化(目前生成的短片長度極短,且僅以 12fps 播放)。然而包括 NVIDIA、Microsoft、Blackmagic Design 等在內許多公司也都在研發 AI 影片解析度提升技術,除非所有人都一起為該技術的應用設限,否則它們面世只是時間早晚的問題了吧。

相關文章:

緊貼最新科技資訊、網購優惠,追隨 Yahoo Tech 各大社交平台!

🎉📱 Tech Facebook:https://www.facebook.com/yahootechhk

🎉📱 Tech Instagram:https://www.instagram.com/yahootechhk/

🎉📱 Tech WhatsApp 社群:https://chat.whatsapp.com/Dg3fiiyYf3yG2mgts4Mii8

🎉📱 Tech WhatsApp 頻道:https://whatsapp.com/channel/0029Va91dmR545urVCpQwq2D