AI od TikToku (Seaweed) drtí Google i OpenAI! Tvoří nádherná videa za zlomek ceny

Společnost ByteDance, známá především díky platformě TikTok, vstupuje na pole generativní umělé inteligence pro tvorbu videa s novým modelem nazvaným Seaweed. Tento model disponuje relativně malým počtem 7 miliard parametrů, přesto se ve výkonnostních testech vyrovná nebo dokonce překonává mnohem větší konkurenční modely, jako jsou Kling 1.6, Google Veo nebo Wan 2.1. Seaweed zvládá generování videa z textu, obrázku i na základě zvuku, přičemž klade důraz na pokročilé funkce jako realistická animace postav a synchronizace rtů.

Efektivita a schopnosti modelu Seaweed

Hlavním lákadlem modelu Seaweed je jeho schopnost dosahovat špičkových výsledků i přes výrazně menší velikost ve srovnání s konkurencí. Dokazuje tak, že přístup „větší je lepší“ nemusí být v oblasti generativní AI jedinou cestou. Ve specifických úlohách, jako je převod obrázku na video, Seaweed dokonce překonává i model Sora od OpenAI.

Model podporuje následující funkce:

• Text-to-video: Generování videa na základě textového popisu.
• Image-to-video: Vytváření videa z jednoho statického obrázku.
• Audio-řízená syntéza: Generování videa synchronizovaného se zvukovou stopou.
• Maximální délka výstupu: Až 20 sekund.

Pokročilé funkce a zaměření

Kromě základních funkcí generování videa nabízí Seaweed i pokročilejší možnosti. Patří sem například:

• Vyprávění příběhů z více záběrů: Možnost vytvářet komplexnější sekvence.
• Řízené pohyby kamery: Uživatel může ovlivnit, jak se bude virtuální kamera pohybovat.
• Synchronizované audiovizuální generování: Zajištění souladu obrazu a zvuku.

Vývojáři kladli zvláštní důraz na realistickou animaci lidských postav a přesnou synchronizaci rtů, což jsou klíčové aspekty pro věrohodné video výstupy.

Čínská dominance ve video AI

Uvedení modelu Seaweed od ByteDance, spolu s modely jako Wan od Alibaby a Kling, podtrhuje rostoucí dominanci čínských technologických firem v oblasti umělé inteligence pro generování videa. Tyto společnosti ukazují své silné postavení a schopnost inovovat v tomto rychle se rozvíjejícím segmentu.

Působivý výkon modelu Seaweed při relativně nízkých výpočetních nárocích naznačuje možný inflexní bod ve vývoji AI. Ukazuje se, že inovace nemusí být poháněna pouze masivním škálováním modelů, ale také jejich efektivitou.

Jaké využití byste pro podobnou AI na generování videa našli vy?

Zdroj: ByteDance Seaweed