ByteDance Apresenta o Seedance 2.0, Gerador de Clip de Vídeo Multimodal de IA
Pontos principais
- A ByteDance lançou o Seedance 2.0, um modelo de IA multimodal para geração de vídeo.
- O modelo aceita prompts combinados de texto, até nove imagens, três clipes de vídeo e três clipes de áudio.
- Ele pode produzir vídeos de 15 segundos com áudio, lidando com o movimento da câmera e efeitos visuais.
- As demonstrações incluem rotinas de patinação artística sincronizadas e cenas de luta com celebridades.
- O Seedance 2.0 está atualmente disponível por meio da plataforma de IA Dreamina da ByteDance e do assistente de IA Doubao.
- Não há planos confirmados para integrar a ferramenta ao TikTok no momento.
A ByteDance anunciou o Seedance 2.0, um modelo de IA de próxima geração que pode criar clipes de vídeo curtos a partir de prompts combinados de texto, imagem, áudio e vídeo. O sistema suporta até nove imagens, três clipes de vídeo e três clipes de áudio por solicitação e pode produzir vídeos de 15 segundos que respeitem o movimento da câmera, efeitos visuais e leis físicas.
ByteDance Apresenta o Seedance 2.0
A ByteDance, a empresa por trás do TikTok, lançou um novo modelo de IA chamado Seedance 2.0. Em um post de blog, a empresa descreveu o modelo como um grande salto na qualidade da geração, capaz de lidar com prompts que combinam texto, imagens, vídeo e áudio. Os usuários podem refinar uma solicitação única com até nove imagens, três clipes de vídeo e três clipes de áudio, permitindo que o sistema sintetize cenas complexas com vários assuntos.
Capacidades de Criação de Vídeo
O Seedance 2.0 pode gerar clipes de vídeo de até 15 segundos de duração, completos com áudio. O modelo leva em conta o movimento da câmera, efeitos visuais e movimento, e pode seguir storyboards baseados em texto. Em uma demonstração, a IA reproduziu uma rotina de patinação artística que apresentou takeoffs sincronizados, giros no ar e precisos landings no gelo, enquanto respeitava a física do mundo real.
Demonstrações Públicas
Usuários de mídias sociais já postaram exemplos. Um vídeo combinou as semelhanças de Brad Pitt e Tom Cruise em uma luta cinematográfica, provocando um comentário do escritor Rhett Reese. Outros clipes exibiram animação no estilo anime, sequências de desenho animado, cenas de ficção científica e conteúdo que parece ter sido criado por um criador humano. Algumas demonstrações incluíram personagens de franquias populares, destacando a capacidade do modelo de gerar estilos reconhecíveis.
Disponibilidade e Perspectivas
Por enquanto, o Seedance 2.0 está acessível por meio da plataforma de IA Dreamina da ByteDance e de seu assistente de IA Doubao. Não está claro se a tecnologia será integrada ao TikTok, especialmente considerando as recentes mudanças na propriedade do aplicativo nos EUA. O lançamento marca outro passo no rápido avanço da geração de vídeo impulsionada por IA, juntando esforços da Google, OpenAI, Runway e outros jogadores da indústria.