INTELIGENCIA ARTIFICIAL

Cómo usar el Relleno según el contenido en Adobe After Effects

create mask

Anteriormente hablé sobre las últimas funciones y herramientas de edición de video del equipo de Adobe a medida que continúa aprovechando el poder de la inteligencia artificial (IA).

La inteligencia artificial se aprovecha en la edición de fotos para manejar tareas repetitivas como seleccionar un sujeto en una imagen con solo hacer clic en un botón.

After Effects ahora puede aprovechar una de las características clave impulsadas por IA en videos llenos de contenido. No es una opción de un solo clic, pero aún así es mucho más rápido que hacerlo manualmente.

Ver también: Gestión de IA y ML en la empresa en 2023: los líderes tecnológicos esperan más dificultades que los proyectos de TI anteriores (Tech Pro Research)

Cómo usar proyectos de video de relleno con reconocimiento de contenido

Profundicemos en After Effects, también conocido como «Photoshop para video», y echemos un vistazo a esta nueva característica.

crear una máscara

En su videoclip, busque el elemento que desea eliminar de la escena. Esto puede ser un objeto estático o algo en movimiento. Cree una máscara seleccionando la herramienta Pluma y dibujando una máscara alrededor del objeto. Puede usar otras herramientas de selección, como puntos suspensivos, pero la herramienta Pluma le brinda más flexibilidad con elementos difíciles de cubrir.

De forma predeterminada, cuando crea una máscara en After Effects, el tipo de máscara es Agregar. Esto significa que todo lo que esté fuera de los límites de la máscara será «enmascarado» y enmascarado. Observe cómo mi pantalla ahora está llena de píxeles vacíos debido a este tipo de máscara (Figura A).

mask invert needed

Cuando utilice el relleno con reconocimiento de contenido, querrá pensar en el proceso como «rellenar agujeros». Entonces, en lugar de configurar la máscara en «Agregar» en las propiedades de la máscara, cámbiela a «Restar» (Figura B). Esto eliminará los objetos seleccionados de la escena. También puede ajustar el desvanecimiento de la máscara si desea bordes más suaves alrededor de las áreas que acaba de eliminar. Esto hace que la combinación de nuevos píxeles se vea mejor en la mayoría de los casos.

mask properties

Prepárate para la inteligencia artificial

Ahora que ha creado una máscara para eliminar objetos de interés, debe permitir que Adobe Sensei, el motor de IA de la marca Adobe, analice el metraje. Debes abordar los siguientes temas:

  1. ¿Está estacionario el objeto que desea mover?
  2. Está quieto, pero ¿se está moviendo la cámara?
  3. ¿Es un objeto en movimiento?

Si el objeto enmascarado tiene algún movimiento, debe agregar seguimiento de movimiento a la máscara. Es tan simple como hacer clic derecho en After Effects, o simplemente ir al panel Seguimiento, hacer clic una vez en la capa de video y presionar el botón Reproducir para iniciar el seguimiento de la máscara.

La máscara cambia de posición en su metraje mientras intenta bloquear el objeto que está tratando de eliminar. Si la máscara pierde un buen bloqueo durante el rastreo, simplemente detenga el rastreador, mueva la máscara con el mouse y reanude el rastreo. After Effects hace un gran trabajo al mantener el seguimiento fluido y bloqueado. Al realizar el seguimiento, After Effects crea fotogramas clave entre bastidores de propiedades de máscara de capa (Figura C).

ae tracker panel

Una vez completado el seguimiento, acceda al nuevo panel Relleno según el contenido. Si no ve este panel en la pantalla, simplemente vaya al menú Ventana y selecciónelo desde allí. Luego se acopla en un panel en la interfaz de After Effects.

Cuando visite este panel, tenga en cuenta las diferentes opciones. La extensión Alpha le brinda una vista previa del área enmascarada. (Personalmente, no lo encuentro muy útil porque obtengo una vista más grande del área enmascarada en el monitor de programa real).

A continuación, hay varias opciones desplegables a considerar. En primer lugar, el método de relleno tiene opciones entre las que puede elegir. Las opciones Objeto y Superficie son muy similares. opciones de objeto (Figura D) es más para eliminar… objetos. Un objeto estacionario es ideal, pero funciona para objetos en movimiento, pero el tiempo de renderizado puede ser más lento. Incluso puede eliminar logotipos de elementos como la ropa.

La opción Superficie es excelente para eliminar objetos de una superficie en movimiento. Imagina un coche conduciendo por la calle. Puede quitar el vehículo, pero la cámara continuará haciendo una panorámica. Esto también incluirá todo lo manejado por la opción Objeto.

La opción de mezcla de bordes es ideal para superficies texturizadas que pueden necesitar acolchado, como quitar balones de fútbol de césped denso. No recomiendo que use esta opción de la misma manera que usaría las opciones Objeto o Superficie.

fill types

llenar vacante

Finalmente, rellene los huecos de las imágenes con algunas imágenes generadas por IA. Al hacer clic en el botón Generar capa de relleno (Figura E) en el panel Relleno según el contenido, After Effects analizará los píxeles alrededor de la máscara. Incluso analiza los píxeles a medida que la cámara o el objeto se mueven en el espacio para determinar la apariencia del área enmascarada.

generate fill layer btn

El tiempo de procesamiento variará según los detalles de su metraje (SD vs HD vs UHD vs 4k), la duración y las especificaciones del hardware de la computadora. A veces menos de 60 segundos. A veces, el renderizado puede tardar varios minutos.

Una vez completada la renderización, After Effects creará una capa adicional en el panel Capas (Figura F), que está por encima de la capa de material de archivo. Esto completará los píxeles faltantes creados por su máscara. Hace un buen trabajo, pero a veces puede perder algunos detalles. Sobre todo en marcos con movimiento.

artifacts

Usar la opción Crear marco de referencia puede ayudar a resolver cualquier inconsistencia. Esta opción abre Photoshop y le permite rellenar los píxeles en blanco de la máscara con la herramienta Tampón de clonar. Una vez completado, guarde el archivo en Photoshop y luego cierre Photoshop. Esto lo llevará de regreso a After Effects y colocará el marco de referencia en la parte inferior de la pila de capas. La IA de After Effects utilizará este marco de referencia para ayudar a generar los píxeles faltantes (Figura G).

clonestamp

es asombroso

Las capacidades de relleno según el contenido de After Effects son impresionantes. No es perfecto, pero está cerca. Algunas otras cosas a considerar al usar esta aplicación, sus nuevas características incluyen:

  • Hardware y memoria del sistemaMi equipo principal tiene 32 GB de RAM, y la opción de llenado según el contenido eleva mi uso de RAM a 28 GB cada vez.Cuanta más RAM instalada, mejor rendimiento
  • Su metraje también afecta la velocidad de renderizadoLos archivos de alta resolución como UHD o 4K tardan más en renderizarse que HD o SD. Si su clip dura más de 10 a 15 segundos, le recomiendo dividir el clip en fragmentos más pequeños y agregar un relleno que tenga en cuenta el contenido.

¿Qué piensas?

¿Ha probado los nuevos rellenos basados ​​en contenido de After Effects? Estoy muy impresionado con esto y espero futuras actualizaciones de IA. He usado múltiples capas y seguimiento de movimiento para enmascarar objetos en el pasado, y esta opción de IA requiere mucho menos trabajo y ayuda a acelerar el flujo de trabajo. Déjame saber lo que piensas de esta nueva función en los comentarios a continuación.

LEER  Es oficial, la IA ahora es mejor que los humanos en comprensión de lectura

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

Botón volver arriba