KI-Storytelling mit MiniMax H3: 'Alicia of the Stars' sorgt für Aufsehen

Kürzlich wurde in der KI-Video-Community auf Reddit (r/aivideo) der Animationsfilm 'Alicia of the Stars - First show' veröffentlicht, der mit dem neuen multimodalen KI-Videoerstellungsmodell 'MiniMax H3 (MiniMax H3)' erstellt wurde, und sorgt für großes Aufsehen. Im Gegensatz zu herkömmlichen KI-generierten Videos reduziert dieses Video den Arbeitsaufwand für separate Tonsynthese und Untertitelung drastisch und erzeugt mit nur einem einzigen Omnimodales-Modell hochauflösende Videos sowie dreidimensionales Hintergrund-Audio in einem einzigen Schritt, was das Potenzial für hochentwickeltes KI-Storytelling unter Beweis stellt.

Das in diesem Video verwendete 'MiniMax H3' ist ein universelles, von Hailuo AI und MiniMax entwickeltes und offiziell veröffentlichtes omnimodales Generierungsmodell mit offenen Gewichten (Open-weights). Es wurde entwickelt, um die Nachteile der vorherigen KI-Generationen zu beheben, bei denen Videos über Text-Prompts stumm ausgegeben wurden und Ton sowie Stimmen manuell über andere Audio-Generierungsprogramme synchronisiert werden mussten. Bereits in der Vortrainierungsphase ist es darauf optimiert, mehrere Kontexte wie Text, Bild, Audio und Video in einem einzigen neuronalen Netzwerk integriert zu analysieren, wodurch es komplexe multimodale Anweisungen problemlos verarbeitet.

MiniMax H3 verfügt über eine einzigartige Modellleistung, die in einer einzigen Berechnung Videos mit einer Länge von bis zu 15 Sekunden (mindestens 4 Sekunden) und hochwertiges natives 32-kHz-Stereo-Audio gleichzeitig erzeugt. Es unterstützt universell verschiedene Seitenverhältnisse wie 16:9, 1:1 und 9:16 und kann von einer festen Bildrate von 24 FPS und einer standardmäßigen vertikalen Auflösung von 768 Pixeln bis hin zu einer maximalen 2K-Hochauflösungsqualität rendern. Insbesondere zeichnet es sich dadurch aus, dass es natürliche Gespräche in insgesamt 11 Hauptsprachen, einschließlich Koreanisch, Englisch, Chinesisch, Japanisch und Französisch, ermöglichen kann. Darüber hinaus ist dieses Gewichtungsmodell auf Hugging Face vollständig öffentlich zugänglich, sodass jeder mit High-End-Hardware es lokal kostenlos nutzen kann. Es wird auch in Form einer eigenen offiziellen Cloud-Web-App und über Serverless-APIs von Drittanbietern je nach nutzungsbasiertem Preismodell bereitgestellt.

Wenn diese MiniMax H3-Funktionen in den Editor des KI-Video- und Bildproduktionsdienstes 5HOW.ME integriert werden, wird der kreative Komfort für Content-Creator einen dramatischen Sprung nach vorne machen. Ohne die schweren Rechenleistungen von PCs oder die Einschränkungen von High-End-GPU-Hardware kann man im Browser mit nur wenigen Klicks eine 15-sekündige Animation mit Charakterdialogen und dreidimensionalen Hintergrundgeräuschen nahtlos fertigstellen. Der bisher mühsame Bearbeitungsprozess, bei dem nach Abschluss des Video-Renderings Soundebenen zur Synchronisierung hinzugefügt und bearbeitet werden mussten, wird praktisch in einem einzigen Schritt vereinigt, was von Benutzern, die große Mengen an hochwertigen Kurzgeschichten oder Short-Form-Animationen produzieren möchten, eine maximale Produktionsproduktivität erwarten lässt.

Quelle

Dieser Artikel wurde von KI erstellt und von einem Redakteur überprüft.