Hoy lanzan oficialmente Seedance 2.0, el modelo de creación de videos de próxima generación.¡Nuevo salto evolutivo en la IA para generar vídeos! Te hablamos del nuevo Seedance 2.0 de ByteDance, la empresa detrás de TikTok.
Seedance es un modelo de inteligencia artificial creado por ByteDance, la empresa creadora de la red social TikTok. Este modelo sirve para generar vídeo a partir de texto, siendo la competencia de modelos como Veo de Google o Sora de OpenAI.
La verdad es que ByteDance es una de las cinco empresas chinas más relevantes en IA. De hecho, tiene una familia propia de modelos llamada Seed, en la que tenemos un Seedream para crear imágenes, Seededit para editar imágenes, Seed3D para crear modelos en tres dimensiones, Seed LiveInterpret para traducir voz en tiempo real, Seed-Music para crear música y más.
Seedance 2.0 adopta una arquitectura unificada de generación conjunta de audio y video multimodal, admite cuatro entradas modales: texto, imágenes, audio y video, e integra las capacidades de edición y referencia de contenido multimodal más completas de la industria.
Seedance 2.0 de ByteDance aprovecha la entrada multimodal para generar vídeos realistas con sonido estéreo. Los usuarios pueden introducir simultáneamente texto, hasta nueve imágenes, tres clips de vídeo y tres clips de audio e indicar sus instrucciones mediante lenguaje natural para tener mayor control sobre lo que quieren generar. manteniendo una consistencia estable del tema.
Sus aspectos más destacados son los siguientes:
- Mayor disponibilidad en escenarios complejos: con su excelente estabilidad de movimiento y capacidades de reproducción física, el modelo funciona bien en la interacción de múltiples sujetos y en escenarios de movimiento complejos, logrando una disponibilidad de última generación (SOTA) en la industria.
- Capacidades multimodales significativamente mejoradas : Basado en una arquitectura unificada de audio y video multimodal para entrenamiento, admite entrada modal mixta, lo que permite a los usuarios introducir simultáneamente hasta 9 imágenes, 3 videoclips, 3 audioclips y comandos de lenguaje natural. El modelo puede referirse a elementos como composición, acción, movimiento de cámara, efectos especiales y sonido en los materiales de entrada, rompiendo así las barreras de la generación de video tradicional.
- La capacidad de control de la generación de video se ha mejorado enormemente: el cumplimiento y la consistencia de las instrucciones del modelo se han mejorado integralmente y admite una extensión de video y una edición de video estables y controlables, lo que permite a los usuarios comunes controlar fácilmente todo el proceso de creación de video como un director.
- Gran compatibilidad con la creación de contenido de nivel industrial: El modelo admite salida de audio y video multicámara de alta calidad de 15 segundos, tiene capacidad de audio de doble canal y puede lograr efectos audiovisuales extremadamente realistas. Combinado con funciones de referencia y edición, puede reducir significativamente los costos de producción de contenido para cine, publicidad, comercio electrónico, videojuegos y otros escenarios.
Seedance 2.0 ya está disponible en plataformas como Jimeng AI y Doubao
Fuente https://seed.bytedance.com/en/blog/seedance-2-0-%E6%AD%A3%E5%BC%8F%E5%8F%91%E5%B8%83
. Leer artículo completo en Frikipandi Seedance 2.0, el modelo de creación de videos de próxima generación.Entradas recientes para Seedance 2.0, el modelo de creación de videos de próxima generación
- Juegos mensuales de PlayStation Plus para abril: Lords of the Fallen, Tomb Raider I-III Remastered, Sword Art Online Fractured Daydream
- Blaze Entertainment anuncia la consola portátil Evercade Nexus con el cartucho BANJO-KAZOOIE Double Pack
- Tom Clancy’s The Division Resurgence ya está disponible en todo el mundo en dispositivos iOS y Android.
- OPPO Find X9 Ultra estrena un revolucionario teleobjetivo con zoom óptico 10x de 50 MP
- PlayStation Portal añade el modo 1080p Alta calidad