 |
Das neue Tool von ByteDance lässt alle Konkurrenten souverän hinter sich. Foto: ByteDance . |
ByteDance – die Muttergesellschaft von TikTok und Douyin – hat gerade Seedance 1.0 offiziell vorgestellt, ein Tool mit künstlicher Intelligenz (KI), das Videos aus Text und Bildern erstellen kann. Dies gilt als wichtiger Fortschritt für den chinesischen Technologiekonzern im Wettlauf um die Entwicklung einer KI-basierten Plattform zur Inhaltserstellung.
Das Unternehmen veröffentlichte kürzlich eine ausführliche Forschungsarbeit zu Seedance 1.0. Seedance 1.0 ist darauf ausgelegt, einfache Anweisungen in hochwertige Videos umzuwandeln, ohne dass detaillierte Skripte oder komplexe Befehle erforderlich sind. Das Tool verarbeitet nicht nur einzelne Aufnahmen, sondern kombiniert auch mehrere Kameraperspektiven, sorgt für fließende Übergänge und gewährleistet die Charakterkonsistenz im gesamten Video.
„Wir haben einen Weg gefunden, räumliche und zeitliche Informationen in Videos zu trennen. Diese Technologie nutzt eine einzigartige Methode zur ‚Kodierung‘ des Standorts. Dadurch kann KI lernen, Videos sowohl aus Text als auch aus Bildern im selben Modell zu generieren. Dadurch kann KI automatisch und reibungslos Videos mit verschiedenen Szenen generieren“, so ByteDance in der Forschungsarbeit.
ByteDance behauptet voller Überzeugung, dass Seedance 1.0 den bestehenden KI-Tools zur Videoerstellung auf dem Markt überlegen sei, insbesondere in Bezug auf die Fähigkeit, Benutzerideen, Bildschärfe und Natürlichkeit der Charakterbewegungen genau zu verfolgen.
Laut Artificial Analysis – einer Plattform, die sich auf die Analyse und Bewertung der Leistung von KI-Modellen spezialisiert hat – hat Seedance 1.0 andere KI-Tools zur Videogenerierung wie Googles Veo 3, Kuaishous Kling 2.0 oder OpenAIs Sora übertroffen. Das Tool zeigt sowohl bei Text-zu-Video- als auch bei Bild-zu-Video-Aufgaben eine herausragende Leistung.
Das Unternehmen gab außerdem bekannt, dass Seedance 1.0 anhand eines umfangreichen Videodatensatzes aus öffentlich zugänglichen und lizenzierten Quellen trainiert wurde. Die Trainingsvideos durchliefen einen strengen Filterprozess, um gewalttätige oder sensible Inhalte zu entfernen.
Viele Meinungen besagen, dass die Datenquelle hauptsächlich von TikTok und Douyin stammt, zwei Plattformen, die von ByteDance selbst betrieben werden.
Der Trainingsprozess von Seedance 1.0 ist in mehrere Phasen unterteilt: zunächst das Lernen anhand umfangreicher Bild- und Videodaten, dann das Erlernen tiefer Szenenübergangstechniken in verschiedenen Stilen.
Auch im Trainingsprozess spielen Menschen eine Schlüsselrolle, da Ingenieure hochwertige Videos auswählen, aus denen das Modell lernen soll. Der Trainingszyklus wird so lange fortgesetzt, bis Seedance 1.0 aus einer großen Anzahl von Videos, die auf Anfrage generiert werden, das optimale Ergebnis auswählen kann.
Seedance 1.0 begrenzt die maximale Videolänge derzeit auf 5 Sekunden (im Vergleich zu 8 Sekunden bei Veo 3). Der größte Vorteil ist jedoch die hohe Verarbeitungsgeschwindigkeit: Ein Full-HD-Video wird in nur 41 Sekunden erstellt. Ein Nachteil von Seedance 1.0 ist, dass es im Gegensatz zum Konkurrenten von Google keine automatische Nachvertonung unterstützt.
ByteDance plant, dieses Tool bald sowohl für normale Benutzer als auch für professionelle Inhaltsersteller zu veröffentlichen und es für die Erstellung von Werbevideos oder kurzen Inhalten in sozialen Netzwerken zu verwenden.
Vor Seedance 1.0 hatte ByteDance KI-Videoerstellungstools wie OmniHuman, Goku und Jimeng AI entwickelt. Seedance 1.0 ist jedoch das erste Produkt, von dem das Unternehmen überzeugt ist, dass es seine Konkurrenten in Bezug auf die KI-Videoerstellungsfunktionen übertreffen kann.
Quelle: https://znews.vn/cong-ty-me-tiktok-ra-mat-cong-nghe-thach-thuc-google-post1562025.html
Kommentar (0)