Zusammenfassung
Meta, der Eigentümer von Facebook, kündigte die Einführung seines künstlichen Intelligenzmodells Movie Gen an, mit dem aus Textbefehlen realistische Videos und Audiodaten erstellt werden können.
A MetaBesitzer von Facebook, kündigte diesen Freitag (4) den Start an Movie Gen, ein fortschrittliches Modell der künstlichen Intelligenz (KI), das realistische Video- und Audioclips produzieren kann aus Textbefehlen. Das Tool erstellt Videos mit einer Länge von bis zu 16 Sekunden und Audio mit einer Länge von bis zu 45 Sekunden und kombiniert Soundtracks und Effekte, die mit dem visuellen Inhalt synchronisiert sind.
Mark Zuckerberg, der Eigentümer des Unternehmens, teilte die Neuigkeiten auf Instagram mit einem Video, in dem er in verschiedenen Szenarien beim Beindrücken auftritt.
„Jeder Tag ist ein Tag, um die Beine mit einem neuen Modell zu trainieren IA FilmGen von Meta, das Videos erstellen und bearbeiten kann. Nächstes Jahr werde ich auf Instagram erscheinen, schrieb der Milliardär.
Nach Angaben des Unternehmens kann Movie Gen auch bestehende Videos bearbeiten und neue Elemente auf realistische Weise hinzufügen. Bei einer Demonstration legte AI einem Mann, der durch die Wüste rannte, einen Pompon in die Hand. Ein anderes Beispiel: Er verwandelte einen trockenen Parkplatz in eine mit Pfützen bedeckte Fläche, auf der jemand Skateboard fuhr.
Meta positioniert Movie Gen als direkte Reaktion auf konkurrierende KI-Modelle wie Sora von OpenAI, bekannt als Entwickler von ChatGPT.
Wird es für alle verfügbar sein?
Obwohl es Neuerungen gibt, zeigt Meta das beabsichtigt nicht, Movie Gen für unabhängige Entwickler freizugeben, wie dies beim Llama-Sprachmodell der Fall war. Nach Angaben des Unternehmens wird jedes KI-Modell vor der Veröffentlichung individuell einer Risikobewertung unterzogen.
Meta betonte außerdem, dass man sich im Dialog mit der Entertainment-Community befinde, um konkrete Einsatzmöglichkeiten für das Tool zu erkunden, das bis zum nächsten Jahr in die eigenen Produkte des Unternehmens integriert werden soll.
„Obwohl es sich bei Movie Gen derzeit um reine KI-Forschung handelt, sind diese Modelle entscheidend für den Aufbau von KI-Fähigkeiten, die den Menschen neue Möglichkeiten bieten, hochinteressante Inhalte auf Facebook und Instagram zu erstellen und zu teilen“, sagte Meta.
Schaffung
Movie Gen wurde anhand einer Kombination aus lizenzierten und öffentlich zugänglichen Daten entwickelt, wie aus dem Forschungsartikel des Unternehmens hervorgeht.
„Movie Gen ist unsere dritte Welle (nach Make-A-Scene und Llama Image), die alle diese Modalitäten kombiniert und eine umfassendere Kontrolle für Menschen ermöglicht, die Modelle verwenden, auf eine Weise, die noch nie zuvor möglich war. „Ähnlich wie bei früheren Generationen gehen wir davon aus, dass dieses Modell mehrere neue Produkte ermöglichen wird, die die Kreativität beschleunigen können“, sagte das Unternehmen in einer Erklärung.
Mit Textbefehlen können wir kombinierte Modelle nutzen, die für Text-zu-Bild und Text-zu-Video optimiert wurden, um hochwertige, hochauflösende Bilder und Videos zu erstellen, erklärt Meta.
Dieses 30B-Parametertransformatormodell ist in der Lage, Videos mit einer Länge von bis zu 16 Sekunden und einer Geschwindigkeit von 16 Bildern pro Sekunde zu produzieren. Wir haben festgestellt, dass das Modell Objektbewegungen, Subjekt-Objekt-Interaktionen und Kamerabewegungen erklären und Plausibilität lernen kann. bewegt sich für eine Vielzahl von Konzepten – und ist damit das fortschrittlichste Modell seiner Kategorie.“
