Sora von OpenAI ist für schnelle Videos beeindruckend, aber was passiert, wenn ein Regisseur kleine Änderungen wünscht?
KI-generiertes Video hat in letzter Zeit viel Gehype erhalten als Tool, das angeblich Hollywood revolutionieren wird. Aber Craig Good, ein ehemaliger Animator bei Pixar, der an Klassikern wie Spielzeuggeschichte und Findet Nemo, ist nicht überzeugt. Good glaubt, dass es mit KI-Videosoftware ein großes Problem gibt, das jeden, der an einem Film arbeitet, sofort frustrieren wird: Es ist derzeit unmöglich, kleine Änderungen nur mithilfe von KI vorzunehmen.
Mithilfe von Tools für künstliche Intelligenz können Benutzer Bilder und Videos erstellen, wobei lediglich einige Textanweisungen erforderlich sind. Das ist sehr beeindruckend, wenn Sie sozusagen etwas aus dem „Nichts“ erstellen möchten. Mit keinem dieser Tools sind jedoch die iterativen Änderungen möglich, die bei der Erstellung eines Films erforderlich sind.
Good machte dies in einem Video deutlich, das von einem seiner Studenten am California College of the Arts aufgenommen wurde, wo er derzeit als Assistenzprofessor tätig ist. Die beiden besprochenen Videos, die öffentlich gepostet wurden, zeigen Sora von OpenAI.
„Wenn ich versuche, dies in einem Produktionskontext zu verwenden, wird meine erste Frage sein: Wie überarbeite ich das? Wenn ich zum Beispiel sage: Ich hasse was auch mit dem Hintergrund vor geht, können wir genau das noch noch mal machen, aber mit einem gesperrten oder einem anderen Hintergrund?“ Good sagt im Video.
Sora wurde noch nicht öffentlich veröffentlicht, d. h. wir haben bisher nur Beispiele von Künstlern gesehen, die frühzeitigen Zugriff auf das Tool erhalten haben. Und ehrlich gesagt wissen wir derzeit noch nicht viel über die Optionen, die Sora Künstlern bieten kann. Aber es gibt derzeit keinen Hinweis darauf, dass kleinere Änderungen möglich sind, und Good scheint hier einen sehr stichhaltigen Punkt zu haben.
Eines der Sora-Videos, das Good und sein Schüler angesehen haben, ist die Animation eines süßen Flauschmonsters, das offenbar von einer Kerze begeistert ist. Good lobte das Video, wies jedoch darauf hin, dass der Rahmen etwas eng sei und die „Flamme da nicht wirklich etwas tut“. Was bräuchte man, um genau dieselbe Szene zu erhalten, aber mit zurückgezogener Kamera und stärkerem Flackern von der Kerze? Das scheint im Moment die größte Hürde zu sein.
„Beim Erstellen eines Films dreht sich alles um Iteration. Es ist Iteration. Und wenn Sie bei einem dieser Elemente nicht iterieren können, weiß ich nicht, wie Sie es möglicherweise in der Produktion verwenden würden“, sagt Good.
„Ich meine, ich habe Jahrzehnte bei Pixar damit verbracht, winzige Optimierungen an Aufnahmen vorzunehmen. Der Regisseur gibt einige ziemlich spezifische Anmerkungen, die der Animator und der Künstler interpretieren und dann das überarbeitete Werk am nächsten Tag zeigen und weitere Anmerkungen dazu holen muss. Ich weiß nicht, wie man das in der Produktion verwenden sollte, wenn man nicht kontrolliert iterieren kann“, fuhr er fort.
Good ist nicht der Einzige, der so denkt. Ein Tweet ging viral letzte Woche das vorgibt, genau dasselbe Problem hervorzuheben. Und auch wenn wir den Wahrheitsgehalt der Geschichte nicht bestätigen können, klingt alles sehr plausibel.
Im Wesentlichen behauptet der Beitrag, von einem Art Director eines großen Studios zu stammen. Er sagt, die Studioleiter hätten KI-Leute engagiert, um an einem Film zu arbeiten, und es habe nicht geklappt. Der Regisseur sagt, die produzierten KI-Videos seien eigentlich nicht schlecht gewesen, aber jedes Mal, wenn sie Änderungen verlangten, etwa eine neue Kameraperspektive oder eine andere Farbe irgendwo in der Szene, hätten sie es nicht tun können. Tatsächlich würden sie wütend, wenn sie gebeten würden, Dinge zu ändern, weil es so nicht funktioniere.„Derjenige, der Photoshop tatsächlich verwenden kann, hat nicht das Auge entwickelt, um seine Fehler zu erkennen, und wird am Ende wütend auf mich, weil ich nicht verstehe, dass er keine spezifischen Änderungen vornehmen kann“, heißt es in dem viralen Beitrag. „Das Mädchen, dessen Hintergrund ein bisschen Fotografie war, hat mir 40 immer schlechtere Bilder mit immer wilderen Fehlern geliefert. Und das ist jetzt, vier Tage nach Projektbeginn.“Auch hier ist es unmöglich, die in diesem anonymen Beitrag aufgestellten Behauptungen zu überprüfen. Sie stimmen jedoch vollständig mit dem überein, was wir über diese KI-Tools wissen. Und obwohl Good der Meinung zu sein scheint, dass diese Art von Tool sich großartig für benutzergenerierte TikTok-Videos eignet, ist es noch nicht für eine ernsthafte Filmproduktion geeignet.
Good weist jedoch in dem Video schnell darauf hin, dass sich die Dinge ändern könnten. Diese Tools könnten in Zukunft viel besser werden, und er verglich sogar generative KI-Tools wie Sora mit der
erste Computeranimationsdemonstrationen
der frühen 1980er Jahre auf der SIGGRAPH, der Computergrafik-Konferenz.
„Das erinnert mich an die Anfangstage bei SIGGRAPH, wo wir einen Film mit einer laufenden mechanischen Ameise gesehen haben“, sagt Good. „Und wir sind alle aus dem Hinblick her und sind alle durch gerastet dafür. Denn wow, wir sehen eine laufende mechanische Ameise, nicht richtig? Eine große Roboterameise, wissen Sie wissen und im Jahr 1984.“Siggraph 1984 - Das Mechanical Universe DemoUnd Good hat recht. Niemand weiß, was die Zukunft bringt. Aber diese Tools werden erst dann wirklich nützlich sein, wenn Regisseure die winzigen Änderungen vornehmen können, die ihren Geschichten wirklich Leben einhauchen.
“This reminds me of the early days at SIGGRAPH where we would see, you know, a movie with, you know, a walking mechanical ant,” Good said. “And we all went nuts over it. Because, wow, we’re seeing a walking mechanical ant, right? A big robot ant, you know, in 1984.”
And Good has a point. Nobody knows what the future holds. But these tools aren’t going to be really useful until directors can make the tiny tweaks that truly give their stories life.
Schließen Sie sich über 500.000 Lesern an, die ihren Tag mit Quartz beginnen.
Mit dem Abonnieren stimmen Sie unseren Nutzungsbedingungen und unserer Datenschutzrichtlinie zu.
