Stability AI ha lanzado un nuevo modelo de IA, Cámara Virtual Estable, que según la empresa puede transformar imágenes en 2D en videos 'envolventes' con profundidad y perspectiva realistas.
Las cámaras virtuales son herramientas que se utilizan habitualmente en la producción cinematográfica digital y animación 3D para capturar y navegar por escenas en tiempo real. Con Cámara Virtual Estable, Stability buscó agregar IA generativa para ofrecer un mayor control y personalización, según lo indicado en una publicación de blog de la empresa.
Cámara Virtual Estable genera 'vistas novedosas' de una escena a partir de una o más imágenes (hasta un total de 32) en ángulos de cámara que especifica un usuario. El modelo puede generar videos que viajan a lo largo de caminos de cámara 'dinámicos' o predefinidos, incluidos 'Espiral', 'Zoom Dolly', 'Mover' y 'Pan'.
La versión actual de Cámara Virtual Estable, una vista previa de investigación, puede generar videos en formatos cuadrado (1:1), vertical (9:16) y horizontal (16:9) de hasta 1,000 cuadros de longitud. Sin embargo, Stability advierte que el modelo puede producir resultados de baja calidad en ciertos escenarios, especialmente con imágenes que presentan humanos, animales o 'texturas dinámicas' como el agua.
“Escenas altamente ambiguas, trayectorias de cámara complejas que intersectan objetos o superficies y objetos de formas irregulares pueden causar artefactos de parpadeo”, señala Stability en su publicación de blog, “especialmente cuando los puntos de vista objetivo difieren significativamente de las imágenes de entrada”.
La Cámara Virtual Estable está disponible para uso de investigación bajo una licencia no comercial. Se puede descargar desde la plataforma de desarrollo de IA Hugging Face.
Stability, la atribulada empresa detrás del popular modelo de generación de imágenes Stable Diffusion, recaudó nuevos fondos el año pasado mientras que inversores como Eric Schmidt y el fundador de Napster, Sean Parker, intentaban sacar adelante el negocio. Emad Mostaque, cofundador y ex CEO de Stability, supuestamente mal gestionó Stability hasta la ruina financiera, lo que llevó a la renuncia del personal, la caída de una asociación con Canva y la preocupación de los inversores sobre las perspectivas de la empresa.
En los últimos meses, Stability ha contratado un nuevo CEO, nombrado al director de 'Titanic', James Cameron, a su junta directiva y lanzado varios nuevos modelos de generación de imágenes. A principios de marzo, la empresa se asoció con el fabricante de chips Arm para llevar un modelo de IA que puede generar audio, incluidos efectos de sonido, a dispositivos móviles con chips Arm.
