Hemos compilado una lista de los programas basados en IA más útiles y prometedores que, sin duda, son muy útiles para los creadores de contenido y los vendedores en línea. Además, hemos probado muchos de ellos con el propósito de decirte si realmente merecen tu atención, comencemos:
1. Runway
Runway combina todas las herramientas para la edición de vídeo que suelen utilizar los que ganan dinero en este sector. Las herramientas de Runway son basadas en IA y permiten editar vídeos de forma fácil y eficaz en cuestión de minutos. El servicio está disponible en su web, y solo es necesario registrarse para empezar.
Puedes crear 3 proyectos gratis en Runway; después, tendrás que suscribirte. La suscripción "Pro" cuesta 12 dólares al mes para proyectos ilimitados, además te permite editar vídeos en 1080p y 4k, de igual manera, también hay una suscripción "Team" por 28 dólares al mes que pueden utilizar varias personas.
Los desarrolladores de Runway afirman en la página de inicio del sitio que sus herramientas permiten eliminar el fondo de un vídeo, eliminar una selección de un vídeo y rastrear un objeto en movimiento. Para la prueba, utilizamos un sencillo vídeo de un perro, y con ello, comprobar todas las funciones:
En primer lugar, probaremos la función "Pantalla verde", que elimina el fondo. El mecanismo de edición es sencillo: sube un vídeo para editarlo y espera a que se procese. Suele tardar entre 3 y 5 minutos. A continuación, haz clic en el objeto para seleccionarlo y mantenerlo en el encuadre.
La selección ha ido más allá del objeto y, por lo tanto, cambiamos el resaltador del modo incluir (including) al modo excluir (excluding) en el panel de la derecha:
Seleccionar las zonas que han sobrepasado el objeto y consigue la selección perfecta:
A continuación, guarda el proyecto y descárgalo en la página principal en la resolución máxima para la versión gratuita de 720p. El resultado es el siguiente vídeo:
El resultado puede calificarse de bueno y, lo que es más importante, es fácil de conseguir. Además, no tendrás que preocuparte en absoluto de que la calidad del vídeo se vea disminuida.
Ahora vamos a intentar eliminar el objeto del vídeo sin que pierda su significado utilizando la función "Inpainting". Decidimos eliminar la mano humana y ver si la imagen sufriría por ello.
Para hacerlo lo más sencillo posible, tienes que seleccionar el objeto o grupo de objetos que quieres eliminar y esperar a que se procese el vídeo:
Al mismo tiempo, eliminamos el icono de TikTok, y esto es lo que ocurrió al final:
Al quitar la mano se emborronó la imagen y ahora el vídeo se ve raro. La conclusión es la siguiente: la función será buena en un vídeo estático o en uno en movimiento pero con un fondo sólido, esto es útil en la edición de vídeo, especialmente donde la cámara sigue captando el proceso de creación de algo.
En vídeos complejos en movimiento, no será posible eliminar objetos grandes sin dejar rastro, sin embargo, el icono de TikTok resultó ser eliminado imperceptiblemente. Esto será útil a la hora de volver a subir los vídeos de otras personas: podrás eliminar fácilmente las marcas de agua no deseadas.
2. DeOldify
Si necesitas colorear un video o foto antigua en blanco y negro, entonces DeOldify AI es la ideal para ello, no obstante, sólo puedes colorear vídeos cortos, por lo que debes dividir el video en partes en caso de que sea largo. Además, si el vídeo debe ser subido a YouTube, no podrás hacerlo desde un ordenador, puesto que solo está disponible para fotos.
El programa está disponible en línea a través de cualquier navegador, sin embargo, puedes descargar el código de fuente abierta. Puedes editar la foto en la versión en línea en este enlace, y el vídeo aquí.
Para empezar, hemos intentado restaurar el color en una foto antigua con niños y un perro, y esto es lo que ha pasado después de un par de segundos:
El resultado es realmente mágico, los colores se eligen con mucha precisión, y todo ello gracias a una IA entrenada. Para procesar una foto, primero hay que iniciar sesión, ya que así lo exige la página web My Heritage. La edición de fotos es totalmente gratuita e ilimitada. De igual manera ocurre con los vídeos, y el resultado será de la misma calidad.
He aquí un ejemplo de un usuario de YouTube coloreando un vídeo antiguo del vuelo en 1928 del dirigible alemán Graf Zeppelin:
3. CogVideo
Expertos chinos han creado una IA que genera vídeos cortos a partir de una petición de texto, que da como resultado un GIF de cuatro segundos y 32 fotogramas. Los desarrolladores señalan que el texto que se introduce para generar el vídeo está en chino.
Por el momento, puedes utilizar plenamente la IA instalando el programa desde GitHub, lo que requiere de conocimientos de programación. No obstante, hay una demo disponible en línea con funciones limitadas, pero suficientes para que puedas ver cómo es el funcionamiento de esta IA en general.
Hemos generado varios ejemplos para las siguientes consultas:
El programa promete y será útil cuando necesites crear el GIF perfecto para un texto. Esperamos que CogVideo pronto esté totalmente disponible en línea para todo el mundo.
4. Dain App
Hablamos de Dain-App en un artículo reciente sobre las IAs, sin embargo, hoy vamos a profundizar en el principio de su funcionamiento y a mostrar sus resultados. Dain-App funciona sobre la base de la inteligencia artificial y es capaz de aumentar significativamente los fps del vídeo.
La propia IA determina la trayectoria del objeto y completa de forma fiable los fotogramas que faltan. Dain-App es un programa completamente gratuito, para NVIDIA puedes descargarlo aquí.
Aquí hay un usuario de YouTube que aumentó los fps en un video de 10 a 60 usando Dain-App y se ve de superalta calidad.
Ahora vamos a pasar a la configuración y a hablar de los puntos más importantes a la hora de trabajar en Dain-App. Vale la pena comenzar con el hecho de que antes de trabajar, debes reiniciar tu ordenador y no debes abrir nada que no sea Dain-App.
Luego, necesitas abrir este archivo:
A continuación, en el propio programa, selecciona el vídeo deseado, dónde guardar el archivo, e inicia el proceso (por defecto, duplica los FPS).
Si se produce un error, como en la siguiente captura de pantalla, esto indica que no hay suficiente memoria de vídeo.
El error se soluciona de forma sencilla: ve a los ajustes que se muestran a continuación y reduce la resolución de vídeo. Esto debe hacerse antes de iniciar el proceso:
Con esta configuración, la altura de vídeo permitida es de 600 píxeles. Esta guía debería ayudarte a empezar con Dain-App y con elo, esperamos que la hayas encontrado útil. En resumen, Dain App es un programa increíble y muy útil para aquellos que se dedican a la edición de vídeo.
5. Unscreen
Unscreen es un servicio en línea que elimina el fondo de un vídeo con un par de clics. Unscreen funciona con IA (Inteligencia Artificial) y, por lo tanto, reconoce al instante y con precisión, el sujeto principal y el fondo, lo que lo hace agradable y fácil de usar.
A diferencia de Runway, el usuario ni siquiera necesita seleccionar un objeto: el programa lo hace todo por sí mismo.
El servicio es completamente gratuito y está disponible online, aunque también hay una versión "Pro" por 9 euros al mes. Para la versión "Pro", la resolución es Full HD, no hay restricciones en la duración del vídeo, no hay marca de agua y hay soporte de sonido. Para probarla, tomamos un clip de un vídeo de YouTube sobre cómo maquillarse para ver lo bien que la IA detecta a una persona:
Tras seleccionar el archivo, empezaron los problemas:
El vídeo se cargó hasta el 50% y luego el sitio dio un error:
El problema estaba relacionado con la VPN, cambiando su video fue procesado sin problemas y cargado en pocos segundos. Aquí está el resultado final:
Topaz Video Enhance AI es una aplicación de pago para Windows y MacOS que aumenta la resolución de vídeo hasta 8K con una mejora de calidad. Trabajar en ella es de lo más fácil y cómodo, y el resultado se obtiene de forma rápida y eficaz.
Sólo se necesitan tres pasos para mejorar un vídeo: abrirlo, seleccionar las opciones deseadas y finalmente guardarlo.
En la sección "Procesamiento", puedes seleccionar uno de los seis modelos de IA que procesarán el vídeo. "Ajuste" se encarga de la calidad de salida del video. Puedes elegir una resolución en porcentaje, introducir la tuya propia o elegir valores de hasta 8K.
En la sección "Formato", tienes que seleccionar el formato del archivo de salida y la ruta de guardado. Además, puedes recortar el vídeo y seleccionar la tarjeta gráfica con la que trabajarás.
Pero todo esto es sólo en teoría y se basa en lo que está escrito en el programa. En realidad, es más complicado, ya que el resultado depende de la potencia de tu ordenador.
Incluso a partir de un vídeo de diez segundos, hacer una obra maestra en 8K no funcionará si el hardware es débil. En un ordenador con un Intel Core i7 y 32 GB de RAM, no fue posible aumentar la resolución a 1080p. El proceso no se iniciaba o lo hacía muy lentamente.
Un usuario de YouTube probó Topaz Video Enhance AI y observó cómo cambiaba el encuadre del vídeo: Después de la mejora, la cara empezó a verse extraña y antinaturalmente suave y borrosa. Si te fijas en los detalles de alrededor, definitivamente empezaron a verse mejor.
Podría tener sentido utilizar este programa para mejorar vídeos con naturaleza, tecnología y cualquier cosa que no sean rostros humanos. Como ya hemos mencionado, el programa es de pago y suele costar 299 dólares, No obstante, hay una promoción disponible en la web oficial por el costo de 159 dólares.
7. Instant NeRF
Instant NeRF es una tecnología de IA del estudio NVIDIA que convierte imágenes 2D en breves vídeos 3D, en otras palabras, la IA da vida a la imagen y muestra el objeto desde todos los ángulos. De este modo, se pueden crear vídeos de las calles o simular filmaciones desde un dron, como hicieron los usuarios del vídeo que aparece a continuación:
1/ Now you can create "drone" shots from your phone footage, thanks to NeRF
Collab with @justlv / software @nerfstudioteam / see below for our process
#NeRF #neuralrendering #artificialintelligence #instantNeRF pic.twitter.com/3FOqGK403N
— Karen X. Cheng (@karenxcheng) October 25, 2022
Para crear un vídeo en 3D, es necesario fotografiar el objeto desde diferentes ángulos y enviar las fotos a la IA. Con la ayuda de la IA, Instant NeRF rellena los datos que faltan y entrena al modelo de IA para recrear la escena 3D. Instant NeRF determina la dirección de la luz desde cualquier punto del espacio 3D, gracias a lo cual el resultado es lo más realista y fiable posible.
El uso en línea de la tecnología de IA no funciona, pero está disponible en el dominio público en forma de código. Los desarrolladores han creado incluso una guía de usuario para guiarlos al comienzo. Por supuesto, para ello es necesario tener unos conocimientos mínimos de programación: sin ellos, nada funcionará.
8. Stable Diffusion
La IA de difusión estable puede generar tanto imágenes, como animaciones. Esta función ha aparecido hace relativamente poco, pero ya produce resultados impresionantes que asombran a la imaginación. La animación se crea a partir de una descripción textual y consiste en una secuencia de imágenes generadas individualmente, que se suceden suavemente. El vídeo de abajo tardó unos 30 minutos en generarse.
Además, en Difusión estable, puedes mejorar imágenes y crear animaciones fluidas a partir de dos fotos.
Esencialmente, esta función es similar a lo que ofrecen la aplicación Dain e Instant NeRF, pero no requiere un programa aparte. No solo puedes dar vida a vídeos cortos, sino que también, a partir de un gran número de fotogramas, puedes crear un vídeo largo y fluido de gran calidad.
Puedes descargar el programa gratuitamente en GitHub haciendo clic en el enlace de la cabecera, y puedes ver instrucciones detalladas para crear animaciones aquí. La versión más amplia y detallada de Stable Diffusion para animación es Deforum Stable Diffusion V0.4. Contiene un enorme número de ajustes, donde cada uno de ellos, te ayudará a conseguir el resultado ideal al generar.
El único problema es que para entender estos ajustes, puede tomar mucho tiempo y esfuerzo. Incluso si entiendes los ajustes, será difícil predecir el resultado final — los ajustes se comportan de manera diferente en combinación con los demás. Al principio, todo parecerá caótico y muy complicado, pero no hay que tener miedo, y entonces todo saldrá bien.
Aquí tienes un video tutorial que te ayudará a entender los ajustes de Deforum Stable Diffusion y te será útil al principio del viaje.
9. Phenaki by Google
La IA Phenaki de Google es capaz de generar vídeos sobre una petición de texto de hasta varios minutos de duración, a diferencia de CodVideo. Al mismo tiempo, no se pierde la conexión entre fotogramas y, en general, el vídeo tiene un aspecto bastante estable.
El inconveniente de esta IA, es que los resultados son pequeños y de baja calidad en comparación con otros programas similares.
Phenaki funciona con un modelo de aprendizaje profundo para convertir tokens de texto, como frases o palabras, en tokens de vídeo. Este modelo utiliza un enfoque autorregresivo en el que el vídeo se construye a lo largo del tiempo, puesto que cada pista de texto corresponde a una escena de la historia del vídeo.
Esto permite crear escenas que cambian dinámicamente, lo que antes no era posible para ninguna IA que generara vídeo. Por eso se dice que Phenaki es un gran avance en el campo de la IA.
De momento, la IA se está ultimando y solo se pueden ver ejemplos de sus creaciones en la web oficial.
Conclusión
Los programas de IA realmente aceleran el trabajo y mejoran la calidad de los resultados, pero, por desgracia, hay dificultades para utilizar la mayoría de los programas. 5 de los 7 programas analizados en la reseña de hoy requieren de conocimientos de programación y un PC muy potente. Además, el resultado no siempre sale como lo esperamos.
No obstante, muchos de estos programas y servicios son únicos y, por lo tanto, serán útiles para quienes se dedican a la edición de vídeo. Esperamos que en el futuro el uso de estos programas sea accesible, comprensible y sencillo para todos los usuarios.
