Previs+

In diesem Kurzprojekt habe ich mich über einen Zeitraum von zwei Wochen mit der These auseinandergesetzt, dass KI-gestützte Video-to-Video-Generierung den Arbeitsschritt der sogenannten Pre-Visualisierung (PreVis) innerhalb der 3D-Animations-Pipeline verbessern kann. Dazu habe ich eine Story, ein Storyboard, rohe 3D-Animationen und letztendlich durch KI-gestützte Video-to-Video-Generierung einen Teaser-Trailer erstellt, der das Potenzial von KI-verbesserter PreVis zeigen soll.

Workflow

Story

Szene 1: Ein Raumschiff liegt durch den Crash mit der Oberfläche völlig zertrümmert, brennend und zerstört in der Mitte einer kahlen Waldlichtung.

Szene 2: Der Protagonist steigt langsam aus dem brennenden Wrack. Er ist sichtlich verletzt und hat Schwierigkeiten, aufzustehen.

Szene 3: Er humpelt weg von dem brennenden Wrack und versucht, sich in Sicherheit zu bringen, dabei stößt er in den unbekannten Wald vor.

Szene 4: Die Wunden unseres Protagonisten scheinen langsam zu heilen. Er befindet sich nun mitten im unbekannten Wald. Riesige Redwood-Bäume verdecken den Himmel und lassen nur wenige kräftige Sonnenstrahlen hindurch. Die Umgebung ist sehr stark bewachsen, sodass fast der gesamte Boden von Farnen und anderen tropischen Pflanzen bedeckt ist.

Szene 5: Unser Protagonist schlägt sich weiter durch den dichten Regenwald. Dabei klettert er über riesige umgefallene Bäume und Felsen.

Szene 6: Unser Protagonist scheint den Rand des Waldes erreicht zu haben. Er befindet sich nun an einer großen Felsschlucht. Die Aussicht ist atemberaubend, weit und breit ist nur Regenwald zu sehen, und die Sonne geht zur goldenen Stunde am Horizont unter.

Storyboard

Das Storyboard wurde mithilfe von Katalist erstellt, dem meiner Meinung nach aktuell besten KI-gestützten Storyboard-Tool. Lediglich der Upload eines Skripts oder Drehbuchs ist nötig. Die KI erstellt dann automatisch die einzelnen Szenen mit definierten Umgebungen und Charakteren, die man anschließend noch konfigurieren kann.

Das Tool erlaubt Bildgenerierung basierend auf Skript, Handlung, Charakteren, Kameraeinstellungen und Umgebung pro Szene in verschiedensten Stilen mit sehr gut trainierten Bildmodellen, die bereits ohne viel Trial and Error sehr gute Ergebnisse erzielen.

Außerdem bietet Katalist ein gutes Präsentationstool, um das Storyboard vorzustellen.

3D-Animation

Die 3D-Animation stellt bei diesem Workflow den größten Arbeitsaufwand dar und zeigt den menschlichen Faktor in der Pipeline. Hier hat der Artist volle Kontrolle über Komposition, Kamerabewegung und Charakteranimation.

Allerdings muss er auch die nötige Zeit aufwenden, um die Wünsche umzusetzen.

Teaser mit Anwendung von PreVis+

Styles Teaser

wegen Music copyright leider nur hier:

Styles Teaser Video

Vorteile - Nachteile

Fazit

Ich bin der Meinung, das Kurzprojekt war ein voller Erfolg, denn ich konnte meine anfängliche These zum Start des Projekts in allen Punkten bestätigen.

Die Previs noch mit KI-Video-zu-Video zu verbessern, kann Projekten viel Zeit ersparen und vor allem in der Stilfindung immens helfen. Die KI-Videos können den 3D-Artist inspirieren und im weiteren Verlauf der Projektfertigstellung unterstützen, wichtige Details wie Materialien oder Imperfektionen leichter umzusetzen.