Adobe hat im Vorfeld seiner Adobe MAX-Veranstaltung am Montag Videogenerierungsfunktionen für seine Firefly-KI-Plattform eingeführt. Ab heute können Benutzer den Videogenerator von Firefly erstmals auf dem von Adobe testen Webseiteoder probieren Sie die neue KI-gestützte Videofunktion Generative Extend in der Beta-App von Premiere Pro aus.
Auf der Firefly-Website können Benutzer ein Text-zu-Video-Modell oder ein Bild-zu-Video-Modell ausprobieren, die beide bis zu fünf Sekunden KI-generiertes Video produzieren. (Die Nutzung der Web-Betaversion ist kostenlos, es gelten jedoch wahrscheinlich Ratenbeschränkungen.)
Adobe gibt an, Firefly darin geschult zu haben, je nach den Spezifikationen einer Eingabeaufforderung sowohl animierte Inhalte als auch fotorealistische Medien zu erstellen. Firefly ist zumindest theoretisch auch in der Lage, Videos mit Text zu produzieren, womit KI-Bildgeneratoren in der Vergangenheit Schwierigkeiten hatten. Die Firefly-Video-Web-App umfasst Einstellungen zum Umschalten der Kameraschwenks, der Intensität der Kamerabewegung, des Winkels und der Aufnahmegröße.
In der Beta-App von Premiere Pro können Benutzer die Generative Extend-Funktion von Firefly ausprobieren, um Videoclips um bis zu zwei Sekunden zu verlängern. Die Funktion dient dazu, in einer Szene einen zusätzlichen Takt zu erzeugen, der die Kamerabewegung und die Bewegungen des Motivs fortsetzt. Auch der Hintergrundton wird erweitert – ein erster Vorgeschmack der Öffentlichkeit auf das KI-Audiomodell, an dem Adobe im Stillen gearbeitet hat. Der Hintergrund-Audio-Extender gibt jedoch keine Stimmen oder Musik wieder, um Urheberrechtsklagen von Plattenfirmen zu vermeiden.
In Demos, die vor der Markteinführung mit Tech geteilt wurden, ergab die Generative Extend-Funktion von Firefly beeindruckendere Videos als das Text-zu-Video-Modell und schien praktischer zu sein. Das Text-zu-Video- und das Bild-zu-Video-Modell haben nicht ganz den gleichen Glanz oder Wow-Faktor wie die Konkurrenten von Adobe im KI-Video-Bereich, wie zum Beispiel Runways Gen-3 Alpha oder OpenAIs Sora (wobei letzteres zugegebenermaßen noch fehlt). Schiff). Adobe gibt an, den Schwerpunkt mehr auf KI-Bearbeitungsfunktionen als auf die Erstellung von KI-Videos zu legen, was seiner Benutzerbasis wahrscheinlich gefallen wird.
Die KI-Funktionen von Adobe müssen ein empfindliches Gleichgewicht mit der kreativen Zielgruppe finden. Es versucht, in einem überfüllten Umfeld von KI-Startups und Technologieunternehmen, die beeindruckende KI-Modelle vorführen, eine Vorreiterrolle zu übernehmen. Andererseits sind viele Kreative nicht glücklich darüber, dass KI-Funktionen bald die Arbeit ersetzen könnten, die sie jahrzehntelang mit Maus, Tastatur und Stift erledigt haben. Aus diesem Grund nutzt Adobes erste Firefly-Videofunktion, Generative Extend, KI, um ein bestehendes Problem für Videoeditoren zu lösen – Ihr Clip ist nicht lang genug –, anstatt ein neues Video von Grund auf zu erstellen.
„Unser Publikum ist das pixelgenaueste Publikum der Welt“, sagte Alexandru Costin, Vizepräsident für generative KI bei Adobe, in einem Interview mit Tech. „Sie möchten, dass KI ihnen hilft, ihre vorhandenen Assets zu erweitern, Variationen davon zu erstellen oder sie zu bearbeiten, anstatt neue Assets zu generieren. Deshalb ist es für uns sehr wichtig, zuerst die generative Bearbeitung und dann die generative Kreation durchzuführen.“
Videomodelle in Produktionsqualität, die die Bearbeitung erleichtern: Mit diesem Rezept hatte Adobe schon früh Erfolg für das Bildmodell von Firefly in Photoshop. Adobe-Führungskräfte sagten zuvor, dass die Generative Fill-Funktion von Photoshop eine der am häufigsten verwendeten neuen Funktionen des letzten Jahrzehnts sei, vor allem weil sie bestehende Arbeitsabläufe ergänzt und beschleunigt. Das Unternehmen hofft, diesen Erfolg mit Video wiederholen zu können.
Berichten zufolge versucht Adobe, auf Kreative Rücksicht zu nehmen Fotografen und Künstler zahlen 3 US-Dollar für jede Minute von Videos, die sie einreichen, um das Firefly-KI-Modell zu trainieren. Allerdings sind viele Kreative noch immer vorsichtig mit der Verwendung von KI-Tools oder befürchten, dass sie dadurch überflüssig werden. (Adobe kündigte am Montag außerdem KI-Tools für Werbetreibende zur automatischen Generierung von Inhalten an.)
Costin sagt diesen besorgten Kreativen, dass generative KI-Tools nicht weniger, sondern mehr Nachfrage nach ihrer Arbeit schaffen werden: „Wenn man an die Bedürfnisse von Unternehmen denkt, die individualisierte und hyperpersonalisierte Inhalte für jeden Benutzer erstellen wollen, der mit ihnen interagiert, ist die Nachfrage unendlich.“
Der KI-Leiter von Adobe sagt, dass man darüber nachdenken sollte, wie andere technologische Revolutionen Kreativen geholfen haben, indem man die Einführung von KI-Tools mit digitalem Publishing und digitaler Fotografie vergleicht. Er weist darauf hin, dass diese Durchbrüche ursprünglich als Bedrohung angesehen wurden, und sagt, wenn Kreative KI ablehnen, würden sie es schwer haben.
„Nutzen Sie die generativen Fähigkeiten, um sich zu verbessern, sich weiterzubilden und ein kreativer Profi zu werden, der mit diesen Tools 100-mal mehr Inhalte erstellen kann“, sagte Costin. „Der Bedarf an Inhalten ist da, jetzt können Sie dies tun, ohne Ihr Leben zu opfern. Umfassen Sie die Technologie. Das ist die neue digitale Kompetenz.“
Firefly fügt außerdem automatisch „KI-generierte“ Wasserzeichen in die Metadaten der auf diese Weise erstellten Videos ein. Meta verwendet Identifizierungstools auf Instagram und Facebook, um Medien mit diesen Labels als KI-generiert zu kennzeichnen. Die Idee ist, dass Plattformen oder Einzelpersonen solche KI-Identifizierungstools verwenden können, um festzustellen, was authentisch ist und was nicht, sofern der Inhalt die entsprechenden Metadaten-Wasserzeichen enthält. Adobe-Videos verfügen jedoch standardmäßig nicht über diese Funktion sichtbar Etiketten, die verdeutlichen, dass sie von der KI generiert wurden, und zwar auf eine Weise, die für Menschen leicht lesbar ist.
Adobe hat Firefly speziell für die Erstellung „kommerziell sicherer“ Medien entwickelt. Das Unternehmen gab an, Firefly nicht in Bezug auf Bilder und Videos geschult zu haben, die Drogen, Nacktheit, Gewalt, politische Persönlichkeiten oder urheberrechtlich geschütztes Material enthielten. Theoretisch sollte dies bedeuten, dass der Videogenerator von Firefly keine „unsicheren“ Videos erstellt. Da das Internet jetzt freien Zugriff auf das Videomodell von Firefly hat, werden wir sehen, ob das stimmt.