Adobe anunció una importante actualización de su aplicación de vídeo generativo de IA Firefly, lanzando oficialmente un nuevo editor de vídeo que admite la edición detallada de palabras y ampliando aún más el acceso a modelos de generación de imágenes y vídeos de terceros, incluidos FLUX.2 de Black Forest Labs y Astra de Topaz Labs.
Antes de esta actualización, Firefly estaba principalmente orientado al flujo de trabajo de "generar vídeos a partir de texto". Si los usuarios no estaban satisfechos con una determinada parte de los resultados generados, a menudo necesitaban regenerar el vídeo completo. La nueva versión del editor de video permite a los usuarios realizar ajustes direccionales a los elementos, colores y movimientos de la cámara en el video directamente a través de indicaciones de texto. También proporciona una vista de línea de tiempo para que los usuarios tengan un control preciso sobre los fotogramas, los sonidos y otros parámetros. Este editor estuvo anteriormente en versión beta privada en octubre y ahora está oficialmente abierto a todos los usuarios.
Adobe dijo que la nueva función de edición se basa en parte en el modelo Aleph de Runway. Los usuarios pueden emitir instrucciones en lenguaje natural como "Cambiar el cielo a nublado y reducir el contraste" o "Acercar ligeramente al protagonista", y el sistema completará automáticamente los ajustes de imagen correspondientes. Basándose en el modelo Firefly Video de Adobe, los usuarios también pueden cargar un cuadro inicial y un video de movimiento de cámara de referencia, y dejar que el sistema reproduzca efectos de movimiento de cámara similares en el proyecto actual, introduciendo así capacidades de diseño de lentes más cercanas a la producción tradicional de cine y televisión en el proceso generativo.
En términos de calidad y resolución de imagen, Adobe ha presentado esta vez el modelo Astra de Topaz Labs, que admite la actualización de videos a una resolución de 1080p o 4K para cumplir con los requisitos de salida de mayor calidad. El modelo de generación de imágenes FLUX.2 de Black Forest Labs también se agregará a Firefly, con una nueva función de panel colaborativo para ayudar a los equipos a revisar y filtrar el contenido generado juntos en el mismo espacio. Adobe dice que FLUX.2 estará disponible inmediatamente en la aplicación multiplataforma Firefly, y que el modelo también estará disponible para los usuarios de Adobe Express a partir de enero del próximo año.
A medida que los competidores continúan lanzando nuevas generaciones de modelos de generación de imágenes y videos, Adobe espera mejorar el atractivo de Firefly y aumentar la fidelidad del usuario a través de esta ronda de actualizaciones. La compañía también anunció que para los suscriptores de Firefly Pro, Firefly Premium y los planes de 7.000 y 50.000 puntos, los permisos de "generación ilimitada" de todos los modelos de imágenes y modelos de Firefly Video se abrirán antes del 15 de enero del próximo año, proporcionando una ventana de creación más rentable para los creadores habituales y los usuarios profesionales.
Durante el año pasado, Adobe continuó iterando la línea de productos Firefly: en febrero de este año, la compañía lanzó un plan de suscripción para diferentes niveles de necesidades de generación de imágenes y videos; en abril, lanzó una nueva versión de la aplicación web Firefly y actualizó una variedad de modelos de generación de imágenes; y luego lanzó una aplicación móvil específicamente para la creación de imágenes y videos durante el año, y continuó expandiendo el ecosistema de modelos de terceros a los que se puede acceder dentro de la aplicación. Con la implementación de esta función de edición de video y el acceso multimodelo, Firefly está evolucionando gradualmente de un único "generador" a una plataforma creativa de IA que integra generación, edición y colaboración.