Las innovaciones que acompañan la llegada de la IA generativa nunca dejarán de sorprendernos. Después de que OpenAI lanzara Sora, otro actor, Stability AI, presentó a su vez su inteligencia artificial capaz de transformar una simple imagen en un vídeo: Stable Video 3D.
Según la startup, SV3D integra una funcionalidad completamente nueva. Ahora es posible generar una secuencia de vídeo corta a partir de una única imagen. Pero para tener acceso a él, dado que es una versión comercial, será necesario suscríbete a una suscripción mensual que cuesta $ 20. Por otro lado, es totalmente posible utilizar Stable Video 3D con fines no comerciales. Para hacer esto, simplemente cargue los pesos del modelo en Hugging Face.
2 variantes de Stable Video 3D según el caso de uso
Según el anuncio de Stability AI, Stable Video 3D viene en dos versiones. Cada uno de ellos, el SV3D_u y el SV3D_pestá diseñado para un uso específico.
Respecto a la versión SV3D_u, no requiere reacondicionamiento de la cámara. Por lo tanto, se basa en entradas de imágenes únicas. En otras palabras, esta variante de Stable Video 3D no admite técnica de indicaciones adicionales que, en la mayoría de los casos, toma la forma de una imagen o ajustes relacionados con la posición de las cámaras.
El SV3D_p por otro lado, tiene la capacidad de generar vídeos en vista orbital. Por tanto, no se limita a vídeos orbitales. Amplía su capacidad hasta generación de contenidos incorporando movimientos de cámara según una trayectoria muy precisa.
Stable Zero123 ahora tiene sucesor, un modelo mejorado y más eficiente que el anterior
Conocimos sobre Estabilidad gracias a su inteligencia artificial generativa de texto-imagen llamada Difusión Estable. Y aunque la próxima versión de esta herramienta o aún en fase de desarrollola compañía ya está anunciando una nueva IA para la generación de imágenes en vídeo 3D.
Esto también es más eficiente y se refiere a una versión mejorada de Stable Zero123, otro modelo de IA generativa de Stability. Varun Jampani, investigador de Stability AI, también enfatiza que Stable Zero123 se basa en Stable Diffusion. Por lo tanto no puede generar solo una imagen a la vez. Sin embargo, Stable Video 3D se basa en modelos de transmisión de video. Esto le permite generar imágenes multivista de mejor calidad simultáneamente.
Por tanto, es en un mensaje de anuncio que Stability AI capta la atención de los usuarios en relación con el verdadero potencial de Stable Video 3D. “SV3D es muy diferente de otros modelos y a menudo enfrenta inconsistencias en los resultados. Pero todavía se está trabajando para poder integrar otras técnicas para adaptar modelos generativos 2D para una mejor optimización 3D. Pero también para proporcionar nuevas funcionalidades NVS (síntesis de nueva vista)”.
El matrimonio perfecto entre Stable Video 3D y el comercio electrónico
Con la adición del acondicionamiento de la trayectoria de la cámara, obtenemos un resultado en multivistas sobre un objeto con Vídeo Estable 3D. Al menos, eso es lo que dijo Stability Ai en su anuncio. Nosotros, como usuarios, todavía no tenemos la oportunidad de probar esta nueva IA generativa.
Sin embargo, según la información que hemos recibido, SV3D representa la herramienta ideal para desarrolladores de videojuegos, así como para jugadores de comercio electrónico. Según Jampani, Stable Video es una tecnología innovadora que puede revolucionar el campo de los juegos y el comercio electrónico. “De este modo, los vídeos orbitales de 360° pueden utilizarse para crear una experiencia de compra más interactiva e inmersiva”, añadió.
- Comparte el artículo:
Nuestro blog está impulsado por lectores. Cuando compra a través de enlaces en nuestro sitio, podemos ganar una comisión de afiliado.