Die Videos von Stability AI haben seit einigen Jahren Text und Bilder mit Bewegung und Leben infundiert, fügen aber jetzt buchstäblich eine neue Dimension hinzu, indem sie zweidimensionale Bilder in dreidimensionale Videos verwandeln.
Das neue stabile stabile virtuelle Kamera-Tool des Unternehmens ist so konzipiert, dass sie sogar ein einzelnes Bild in ein bewegendes, multi-Perspektive-Video verarbeiten, was bedeutet, dass Sie sich umdrehen und den Film aus jedem Blickwinkel anzeigen können.
Es ist nicht ganz ein neues Konzept, da virtuelle Kameras seit langem ein Grundnahrungsmittel für Filmemachen und Animation sind und die Schöpfer navigieren und digitale Szenen manipulieren können. Aber die Stabilität AI hat dieses Konzept genommen und in eine schwere Dosis generativer KI geworfen. Das Ergebnis bedeutet, dass anstatt detaillierte 3D-Szenenrekonstruktionen oder sorgfältig kalibrierte Kameraeinstellungen zu benötigen, ermöglicht es mit stabilen virtuellen Kamera eine reibungslose, tiefe 3D-Bewegung von selbst mit minimalem Aufwand.
Was dies von anderen mit AI-generierten Videotools unterscheidet, ist, dass es sich nicht nur durch Animation erraten und sich auf riesige Datensätze oder Frame-by-Frame-Rekonstruktionen angewiesen hat. Stabile virtuelle Kamera verwendet einen Multi-View-Diffusionsprozess, um neue Winkel basierend auf dem bereitgestellten Bild zu generieren, so dass das Ergebnis wie ein Modell aussieht, das tatsächlich in der realen Welt existieren könnte.
Mit dem Tool können Benutzer die Kamera -Trajektorien mit filmischer Präzision steuern und aus Bewegungen wie Zoom, rotierenden Umlaufbahn oder sogar einer Spirale auswählen. Das resultierende Video kann in vertikaler Form für mobile Geräte oder Breitbildnisse erfolgen, wenn Sie ein Kino haben. Die virtuelle Kamera kann mit nur einem Bild funktionieren, wird aber bis zu 32 verarbeiten.
Stability AI hat das Modell für Forschungszwecke im Rahmen einer nichtkommerziellen Lizenz verfügbar gemacht. Das heißt, Sie können damit spielen, wenn Sie technische Fähigkeiten haben, indem Sie den Code von GitHub abrufen. Wenn Sie Open-Source als Stabilitäts-KI in der Regel besuchen, kann die KI-Entwicklergemeinschaft die Funktionen der virtuellen Kamera verfeinern und erweitern, ohne dass das Unternehmen bezahlen muss.
3D AI
Natürlich ist kein KI -Modell perfekt, und die KI von Stability ist im Voraus, dass die Knicke immer noch ausgearbeitet werden. Wenn Sie gehofft haben, realistische Menschen, Tiere oder besonders chaotische Texturen (wie Wasser) zu erzeugen, könnten Sie etwas haben, das in einen Horrorfilm mit niedrigem Budget gehört.
Seien Sie nicht überrascht, wenn Sie Videos sehen, die damit gemacht werden, mit Perspektiven, die unbeholfen durch Objekte reisen oder perspektivische Veränderungen aufweisen, die zu flackernden, gespenstischen Artefakten führen. Es bleibt abzuwarten, ob dies ein weit verbreitetes Tool oder nur ein weiteres KI -Gimmick ist, das von engagierten Filmemachern ignoriert wird.
Ganz zu schweigen davon, wie viel Wettbewerb zwischen AI -Videotools ausgesetzt ist Openais Sora, PikaAnwesend RunwayAnwesend Pollound Luma Labs ‘ Traummaschine. Eine stabile virtuelle Kamera muss zeigen, dass sie in der realen Welt des Filmemachens gut abschneidet, um über ein weiteres lustiges Demo -Video hinauszugehen.
Sie könnten auch mögen
Source link
