Seedance 2.0 de ByteDance aprovecha la entrada multimodal para generar vídeos realistas con sonido estéreo

   MADRID, 13 Feb. (Portaltic/EP) -

ByteDance, la empresa responsable de Tiktok, ha lanzado Seedance 2.0, un modelo de generación de imágenes y vídeos multimodal que mejora la calidad respecto de su predecesor, para obtener resultados profesionales, con efectos visuales realistas y sonido estéreo de doble canal.

    Seedance 2.0 ofrece "una experiencia creativa completamente nueva para los usuarios", según asegura la compañía en un comunicado, gracias a la entrada multimodal, que admite texto, imágenes, audio y vídeo y a sus capacidades de creación y edición de contenido de nivel industrial.

    Los usuarios pueden introducir simultáneamente texto, hasta nueve imágenes, tres clips de vídeo y tres clips de audio e indicar sus instrucciones mediante lenguaje natural para tener mayor control sobre lo que quieren generar. manteniendo una consistencia estable del tema.

    En la generación de vídeo pueden también especificar elementos como la composición, la acción, el movimiento de cámara, los efectos especiales y el sonido en los materiales de entrada.

    El modelo destaca por reproducir de manera realista las leyes de la física para ofrecer movimientos e interacciones complejos sincronizados y precisos, y ofrecer un resultado que mantiene una consistencia estable del tema.

    Seedance 2.0 también integra la tecnología de sonido estéreo de doble canal para lograr efectos más realistas e inmersivos. Con la salida paralela multipista, introduce música de fondo, efectos de sonido ambientales o narración de personajes para adaptarse al ritmo de la escena.

    También reproduce con realismo sonidos que ByteDance califica como "delicados", como el ligero roce del vidrio esmerilado, el roce de la lana, el golpeteo de láminas acrílicas y el sonido controlado del plástico de burbujas.