Lernen Sie Stability AIs Stable Video 4D kennen, eine differenzierte Version der KI-Videogenerierung
Mit seinem ersten Video-zu-Video-KI-Modell verschiebt Stability AI die Grenzen der KI-Videogenerierung noch weiter.
Die Popularität der KI-Bildgenerierung hat uns zur nächsten Grenze geführt: der Videogenerierung. Nahezu alle großen Akteure im KI-Bereich, darunter Google und OpenAI, entwickeln Text-zu-Video-Generatoren. Stability AI hat gerade sein neuestes KI-Videomodell veröffentlicht, aber seine Sichtweise unterscheidet sich ein wenig von den anderen.
Am Mittwoch stellte Stability AI Stable Video 4D vor, ein KI-Modell, das ein einzelnes Objektvideo in mehrere neuartige Videos des Objekts aus verschiedenen Winkeln und Perspektiven umwandeln kann. Dadurch können Benutzer realistische Videos aus mehreren Blickwinkeln aus nur einem Video erstellen, wie unten gezeigt.
Wir freuen uns, die Verfügbarkeit von Stable Video 4D bekannt zu geben, unserem allerersten Video-zu-Video-Generierungsmodell, das es Benutzern ermöglicht, ein einzelnes Video hochzuladen und dynamische, neuartige Videos aus acht neuen Blickwinkeln zu erhalten, was ein neues Maß an Vielseitigkeit und Kreativität bietet .
In… pic.twitter.com/1YbI2W514K
Wenn ein Benutzer das Modell verwendet, lädt er zunächst ein einzelnes Video hoch und beschreibt, welche 3D-Kameraposen er gerendert sehen möchte. Dann generiert Stable Video 4D in 40 Sekunden fünf Bilder über acht Ansichten, wobei die gesamte 4D-Optimierung laut Blogbeitrag 20 bis 25 Minuten dauert.
Stability AI betrachtet Stable Video 4D als ein Tool, das Berufstätigen in verschiedenen Branchen in naher Zukunft helfen kann.
„Unser Team stellt sich zukünftige Anwendungen in der Spieleentwicklung, Videobearbeitung und virtuellen Realität vor“, sagte Stability AI. „Profis in diesen Bereichen können erheblich von der Möglichkeit profitieren, Objekte aus mehreren Perspektiven zu visualisieren und so den Realismus und das Eintauchen in ihre Produkte zu verbessern.“
Obwohl Stability AI andere KI-Videogeneratoren herausgebracht hat, wie z. B. Stable Video Diffusion, das Bilder in Videos umwandelt, und Stable Video 3D, das 3D-Objekte aus Einzelbildern generiert, ist dies der erste Video-zu-Video-Generator des Unternehmens, der Das Unternehmen nennt einen „spannenden Meilenstein“.
Neben dem KI-Modell veröffentlichte das Unternehmen auch einen technischen Bericht, der die Entwicklung des Modells, einschließlich der Methoden, Herausforderungen und mehr, darstellt.
Stable Video 4D ist derzeit auf Hugging Face verfügbar. Stability AI gibt an, aktiv an der Verbesserung des Modells zu arbeiten.