Adobe siempre ha sido un gigante en el campo de la postproducción. Recientemente, en la conferencia Adobe MAX, lanzaron la asombrosa función de video con IA, Firefly.

Esta tecnología permite solucionar cualquier parte faltante en un video con un simple arrastrar y soltar, con resultados comparables a Runway y Sora. Más aún, Adobe Photoshop ha recibido una actualización completa, convirtiéndose en la versión más potente de la historia.

QQ20241015-093122.png

Premiere Pro presenta la función "Generative Extend"

La función "Generative Extend" (Extensión Generativa) de Premiere Pro es el punto culminante de esta actualización. Si necesitas rellenar huecos al principio, al final o incluso en la línea de tiempo de un video, solo tienes que arrastrar y hacer clic, y la IA lo extenderá rápidamente, logrando una edición perfecta.

Incluso con tomas poco ideales, la IA puede corregir automáticamente el movimiento de la vista. ¿La persona corre fuera del encuadre? La IA puede ajustar fácilmente los límites de la imagen, ahorrando tiempo y esfuerzo.

También permite a los usuarios añadir inteligentemente imágenes y sonidos adicionales a los clips de video con un solo clic, simplificando enormemente el proceso de edición, especialmente al trabajar con cortes precisos.

Aunque actualmente la extensión de video se limita a dos segundos, esto ya es suficiente para resolver muchos problemas que requieren repeticiones debido a pequeños defectos. El video extendido se puede elegir en resolución 720p o 1080p, a 24 fotogramas por segundo.

Esta función no solo genera imágenes que encajan perfectamente con el material original, sino que también extiende los efectos de audio. Al hacer clic en el botón "tono ambiental", los efectos de sonido se pueden extender o suavizar.

Por ejemplo, puede extender el sonido ambiental hasta 10 segundos, añadiendo más detalles y atmósfera a la obra. Sin embargo, cabe destacar que esta tecnología aún no admite la extensión de diálogos o contenido musical.

La función de extensión generativa estará disponible en la versión beta de Premiere Pro a finales de este año. Adobe afirma que seguirá actualizándola en función de los comentarios de los usuarios, quienes incluso podrán dar un "me gusta" o "no me gusta" a los resultados generados con un solo clic.

Además de "Generative Extend", esta actualización de Adobe Premiere Pro incluye una serie de potentes funciones basadas en IA que mejoran la eficiencia de la edición de video:

Función de video a partir de texto

Los usuarios solo necesitan usar indicaciones sencillas para generar cualquier video que deseen. Ya sea un efecto realista de escenas reales, animaciones 3D impresionantes o incluso stop-motion, la IA lo puede hacer todo.

Además, para los videos ya generados, los usuarios pueden utilizar la función de "control de cámara" para refinar aún más el ángulo de la cámara, los efectos de movimiento y otros parámetros.

Indicación: Primer plano cinematográfico de un hombre bajo la lluvia en medio de una calle. La atmósfera de luz y sombra es sombría y dramática, con tonos predominantemente azules y cian. La imagen del hombre es extremadamente realista, con una textura de piel detallada y una fina barba en la cara. Los movimientos sutiles son suaves y fluidos, la cámara permanece fija. La imagen presenta una fuerte sensación y textura de grano de película. Las gotas de agua caen lentamente sobre la cara del hombre, claramente visibles.

Los usuarios también pueden generar elementos de efectos especiales como llamas, humo y luces con Firefly, mejorando significativamente la profundidad visual del video. Con Adobe Premiere Pro y After Effects, los usuarios pueden superponer estos elementos a los videos existentes para crear efectos impresionantes.

Función de video a partir de imagen

Los usuarios pueden subir imágenes de referencia e indicaciones de texto para generar contenido de video. Esta función no solo permite crear fácilmente tomas complementarias basadas en un solo fotograma de imagen, como primeros planos, sino que también puede animar fotos estáticas para generar nuevo material B-roll, ofreciendo a los creadores de video una gran comodidad y creatividad.

Esta tecnología también puede cambiar las acciones y la intención en las tomas originales. Por ejemplo, si un editor quiere cambiar una acción específica, puede usar esta función para visualizar ese cambio sin necesidad de volver a grabar.

Original:

Generado:

El modelo Adobe Firefly ofrece amplias opciones de control de la cámara, incluyendo la distancia focal (primer plano, plano medio, plano general, etc.), el ángulo y el movimiento de la cámara, permitiendo a los usuarios generar contenido de video con mayor precisión. Sin embargo, esta característica profesional también significa que los usuarios necesitan proporcionar indicaciones de texto (prompts) más detalladas; se recomienda consultar las plantillas de indicaciones proporcionadas por Adobe.

Función de generación de texto y subtítulos

Puede generar automáticamente subtítulos y etiquetas precisas para los videos, facilitando la edición de texto. En segundo lugar, la tecnología de edición y detección de escenas automática basada en IA puede identificar y editar inteligentemente los cambios de escena en los videos, ahorrando a los creadores mucho tiempo.

image.png

Ajuste automático de la relación de aspecto del video

Para satisfacer las necesidades de publicación en múltiples plataformas actuales, Adobe también ha lanzado funciones de reconstrucción y adaptación automáticas. La IA puede ajustar automáticamente la relación de aspecto del video según las especificaciones de las diferentes plataformas de redes sociales, garantizando que la obra se presente perfectamente en todas las plataformas.

image.png

Ajustes de color automáticos

En cuanto a la calidad de imagen, la nueva versión incorpora funciones de coincidencia y ajuste de color, que realizan automáticamente la coordinación del color para garantizar la coherencia visual de todo el video. En cuanto al audio, también hay un gran avance, la nueva tecnología de mejora de audio puede mejorar significativamente la claridad del diálogo y el sonido, ofreciendo a los espectadores una mejor experiencia auditiva.

image.png

La función de selección y reemplazo inteligente permite a los creadores reemplazar o mejorar rápidamente elementos específicos del video mediante IA, ofreciendo más posibilidades para la expresión creativa.

Nuevas funciones de IA de Photoshop

Adobe también ha introducido una serie de funciones innovadoras de IA en Photoshop, diseñadas para simplificar el flujo de trabajo del usuario y mejorar al mismo tiempo la calidad y la eficiencia de la edición de imágenes.

Estas nuevas funciones incluyen:

Función "Eliminar distracciones"

Similar al Borrador Mágico del teléfono Google Pixel, permite a los usuarios eliminar rápidamente los objetos no deseados de una imagen con un simple gesto. Esta función puede identificar y eliminar automáticamente las distracciones comunes, como peatones o cables, reduciendo considerablemente los pasos tediosos de selección y eliminación manual.

Función "Generative Fill" (Relleno generativo)

La función de relleno generativo ha mejorado significativamente; puede rellenar imágenes según las instrucciones de texto del usuario, y los resultados son más realistas y naturales.

Función "Generative Extend" (Extensión generativa)

Permite a los usuarios extender la imagen más allá de los límites de la imagen original, ofreciendo más espacio para la expresión creativa.

image.png

Funciones "Generar similar" y "Generar fondo"

Permiten a los usuarios generar rápidamente variaciones de imágenes y reemplazar el contenido del fondo. Todas estas funciones enriquecen enormemente las opciones creativas de los usuarios y mejoran la eficiencia del trabajo.

Adobe enfatiza especialmente su enfoque de IA "centrado en el creador", asegurando el respeto y el apoyo al trabajo de los creadores. La empresa se compromete a que todos los modelos de IA se entrenen solo con contenido autorizado y no utilizará los datos personales de los usuarios.

Para aumentar la transparencia, Adobe también proporciona "credenciales de contenido" para el contenido generado por IA, ayudando a los usuarios a comprender el origen y el proceso de creación, garantizando la trazabilidad del contenido y la claridad de los derechos de autor.

Estas nuevas funciones de IA ya están disponibles en Photoshop, Photoshop Beta y la versión web de Photoshop, y los usuarios pueden experimentar estas potentes herramientas de inmediato. Para aquellos que deseen experimentar el modelo de video Firefly, pueden unirse a la lista de espera para obtener acceso prioritario cuando la función se lance.

Más información: https://www.adobe.com/products/premiere/ai-video-editing.html