Společnost Adobe představila nový generativní upscaling umělé inteligence nazvaný VideoGigaGAN, který je schopen až osmkrát upscalovat videa s nízkým rozlišením a rozmazaná videa.
V článku publikovaném společností Adobe 18. dubna je VideoGigaGAN odhalen jako působivý upscaler, který zjevně dosahuje neuvěřitelných výsledků na hrozných zdrojových obrázcích.
2/ Detail očí pic.twitter.com/Enk69ikT5H
— Linus ●ᴗ● Ekenstam (@LinusEkenstam) 22. dubna 2024
6/ Vodopády a listí pic.twitter.com/hKLhSIByBw
— Linus ●ᴗ● Ekenstam (@LinusEkenstam) 22. dubna 2024
Adobe říká, že VideoGigaGAN je lepší než jiné metody s vysokým rozlišením videa, protože se vyhýbá podivným artefaktům AI a vytváří jemnější detaily. Je postaven na velkém scaleru GigaGAN a zlepšuje časovou konzistenci nezosilněných videí přidáním dočasných modulů a vylepšením technik.
Hrana poznámky že sítě Generative Adversarial Networks (GAN) jsou dobré při převzorkování statických obrázků, ale neukázaly se jako efektivní u videa; způsobuje nežádoucí blikání. Existují i jiné metody upscalingu, ale nedávají tak pěkný výsledek jako GANS.
Společnost Adobe ukázala několik příkladů, kdy použila video 124 × 124 a převzorkovala ho na 1024 × 1024 s výsledky naprosto působivými a těžko říct, že umělá inteligence zafungovala.
Příspěvek od @luokai
Podívejte se na vlákna
VideoGigaGAN je prozatím pouze výzkumným vzorkem, bez bezprostředních plánů jeho uvedení do Premiere Pro nebo jeho sady Creative Cloud. Z toho vyplývá zpráva, že Microsoft také vyvíjí AI super rozlišení pro Windows 11 s názvem Automatic Super Resolution.
Adobe a AI
Tento týden společnost Adobe představila jednu ze svých nejvýznamnějších aktualizací Photoshopu vůbec, která staví na pokroku dosaženém v modelu Adobe Firefly Image 3 Foundation Model. Třetí iterace Firefly právě vstoupila do beta verze a slibuje masivní pokroky v kvalitě a ovládání, včetně vyšší kvality generování obrázků, lepšího porozumění výzvám a vylepšených detailů a rozmanitosti.
Model Firefly aktivuje ve Photoshopu Generativní výplň, Generovat rozbalení a Generativní obraz.
„Tato rozsáhlá nová aktualizace Photoshopu posouvá kreativitu na nebývalou úroveň – ať už jste profesionál nebo nováček ve Photoshopu,“ řekl Ashley Still, senior prezident Creative Product Group společnosti Adobe. “Prostřednictvím nových funkcí ve Photoshopu poháněných Firefly sbližujeme nápady a tvorbu, díky čemuž jsou obrázky výkonnější a přístupnější, takže každý může realizovat svou kreativní vizi.”
