Arbeiten mit neural-style

Justin Johnson dokumentiert die Verwendung der unterschiedlichen Parameter für neural-style ausführlich auf GitHub. Im Folgenden sollen daher lediglich spezifische Einstellungen für Painting Movies diskutiert werden.

Vorlage und ZielbildVorlage (Kandinskys Black and Violett von 1923) und Zielbild (Quelle: PD/Rada)

Die GPU-basierte Renderzeit für ein Filmbild mit einer Auflösung von 1280 x 720 Pixel und 1000 Iterationen beträgt unter Verwendung des VGG-19-Modells von Leon Gatys etwa siebeneinhalb Minuten. Die Rechenzeit für ein Bild in der Auflösung 800 x 450 Pixel liegt bei drei Minuten.

Berechnete BilderBerechnetes Bild mit VGG-19- und NIN-Imagenet-Modell

Bei Verwendung des NIN-Imagenet-Modells kann die Rechenzeit für ein Filmbild mit einer Auflösung von 1280 x 720 Pixel und 1000 Iterationen auf etwa 45 Sekunden verkürzt werden. Allerdings kann die Qualität der Ergebnisse je nach gewähltem Quell- und Zielbild stark schwanken.

Testbild in OriginalfarbenTestbild in Originalfarben mit 2000 Iterationen

Die maximale Ausgabegröße auf der Test-Workstation liegt bei 1600 x 900 Pixel. Die Rechenzeit mit 2000 Iterationen beträgt 23 Minuten. Das Testbild wird im Beispiel mit den Originalfarben ausgegeben.

Installation von neural-style
Arbeiten mit neural-style
Stiltransfer für Videoclips
Postproduktion
Alternative Techniken