DraGan

O nástroji

DragGAN umožňuje uživatelům deformovat generativní obrazy přesným přetahováním libovolných bodů na cílové pozice. Nástroj se skládá ze dvou klíčových komponent: feature-based motion supervision, která pohybuje zdrojovým bodem směrem k cíli, a nové metody sledování bodů využívající diskriminativní GAN příznaky. Díky tomu lze ovládat pózu, tvar, výraz a rozložení objektů v obraze bez nutnosti ručně anotovaných trénovacích dat nebo 3D modelu. Manipulace probíhá přímo na naučeném generativním manifoldu GAN, takže výsledky zůstávají realistické i po výrazných úpravách. Nástroj zvládá rozmanité kategorie objektů – zvířata, auta, lidi, krajiny a další. DragGAN vznikl jako akademický výzkumný projekt autorů z Max Planck Institute for Informatics, MIT, University of Pennsylvania a Google AR/VR. Byl přijat na konferenci SIGGRAPH 2023.

Klíčové vlastnosti

• Interaktivní přetahování bodů obrazu na přesné cílové pozice myší
• Ovládání pózy, tvaru, výrazu a rozložení generovaných objektů
• Feature-based motion supervision pro přesný pohyb bodů
• Sledování pozice bodů pomocí diskriminativních GAN příznaků
• Manipulace na generativním manifoldu GAN zachovávající realismus výsledků
• Podpora různých kategorií objektů (zvířata, auta, lidé, krajiny)

Časté dotazy

Kategorie

Štítky

Sociální sítě