La fuente de este artículo es el corazón de la máquina Editor: Zhang Qian
¿No estamos lejos de la verdadera "película de IA"?
Midjourney es una herramienta de diagramas de Vincent que mucha gente utiliza. Combinado con la herramienta de generación de video Runway Gen2 recientemente actualizada, incluso puedes crear un avance de película tú mismo. Los avances de las películas de "Trailer: Genesis" ("Genesis") y "The Wandering Earth 3" que han sido muy populares en las redes sociales recientemente. se basan en estos generados por herramientas de IA.
Sin embargo, estos "trailers" tienen algunas limitaciones, como la corta duración y la falta de cambios en la imagen. Para superar estas limitaciones, cómo hacer un mejor uso de las herramientas mencionadas se ha convertido en un problema difícil para todos los productores.
Recientemente, un blogger de Twitter llamado "Chase Lean" "descubrió nuevas tierras" en el uso de Midjourney. Dijo que siempre que uses algunas habilidades en Prompt, puedes dejar que Midjourney genere varias imágenes de personajes altamente consistentes (Midjourney genera 4 imágenes de personajes relativamente aleatorias de forma predeterminada), y los ángulos de disparo y los entornos de los personajes pueden ser muy diversos. de. Si se utiliza en la producción de los avances de películas mencionados anteriormente, esto equivale a proporcionar materiales más diversos para el productor, y el video generado en base a esto tendrá más narración.
¿Cómo lo hace Chase Lean? Tomando como ejemplo la generación de 6 imágenes del mismo personaje a la vez, su método es agregar "dividir en 6 imágenes diferentes, tomadas desde múltiples ángulos" en el mensaje. Sin embargo, este método no es el primero de Chase Lean. Dijo que su inspiración vino de un blogger de Twitter llamado "juliewdesign_", quien descubrió el uso mágico de "imagen dividida en 2" en Prompt (generando dos imágenes con el mismo carácter).
Chase Lean continúa con este enfoque y lo amplía. Por ejemplo, puede presionar el botón "V4" para hacer que las imágenes generadas sean más variadas (V1, V2, V3 y V4 corresponden a las cuatro imágenes generadas, haga clic en uno de los botones y el sistema impulsará los ajustes detallados de la cuatro imágenes correspondientes Versión).
Aquí están los resultados de los cambios:
Lo que es más interesante es que si combinas la función " Alejar " lanzada por Midjourney en junio , puedes incluso obtener más imágenes (presiona el botón Alejar para incluir una imagen más grande en la lente, como ajustar la distancia focal, y completar el acercamiento). -hasta la vista lejana. Switch, la versión Midjourney 5.2 ofrece tres opciones de zoom, que son 1,5 veces, 2 veces y zoom personalizado entre "1,0 y 2,0"):
Repita las operaciones anteriores de "cambio", "zoom" y otras operaciones; en teoría, puede obtener un número infinito de imágenes del mismo personaje.
Si desea cambiar el fondo (entorno) de la imagen, primero puede seleccionar la imagen que desea modificar (presione los botones U1-U4) y luego presione el botón "Zoom personalizado", que permite al usuario hacer zoom en la pantalla y modifique el mensaje al mismo tiempo. En este punto, agregue palabras de entornos personalizados como playa y ciudad al mensaje, y podrá obtener varias imágenes de la misma escena del personaje.
Como puede ver en los gráficos generados, algunos de los gráficos son en realidad de tamaño muy pequeño y la imagen del entorno está incompleta. Para solucionar este problema, Chase Lean recomienda utilizar la función "Uncrop" en el sitio web de Clipdrop.
Chase Lean dijo que este método de generar múltiples imágenes a la vez y mantener los personajes consistentes tiene muchos usos en la realidad y lo ha probado en varios escenarios, como la moda, la familia y la animación.
Uno de los escenarios más interesantes fue la creación de cómics para niños. Por ejemplo, con "un niño surfeando en la playa, olas azules, palmeras, 3D, motor irreal; dividido en 4 imágenes diferentes, tomadas desde múltiples ángulos —niji—estilo expresivo" como mensaje, Chase Lean generó las siguientes 8 imágenes a la vez imagen.
Al presionar el botón "Alejar 2x", obtuvo más imágenes:
Un método tan simple es tan efectivo que el intercambio de Chase Lean ha inspirado a muchas personas.
Alguien ha seguido los pasos para "reproducir" el efecto que mostró Chase Lean en Twitter.
A este ritmo de progreso, es posible que no estemos lejos de ver una verdadera "película de IA".
Enlace de referencia: https://twitter.com/chaseleantj/status/1693246015124713634
Preste atención a la cuenta oficial [Aprendizaje automático y creación de generación de IA], hay más cosas interesantes esperando que lea
¡Explicación detallada de ControlNet, un algoritmo de generación de pintura AIGC controlable!
Classic GAN tiene que leer: StyleGAN
¡Haz clic en mí para ver los álbumes de la serie GAN ~!
¡Una taza de té con leche, conviértete en la frontera de la visión AIGC + CV!
¡El último y más completo resumen de 100! Generar modelos de difusión Modelos de difusión
ECCV2022 | Resumen de algunos artículos sobre la generación de redes de confrontación GAN
CVPR 2022 | Más de 25 direcciones, los últimos 50 artículos de GAN
ICCV 2021 | Resumen de artículos de GAN sobre 35 temas
¡Más de 110 artículos! CVPR 2021 peinado de papel GAN más completo
¡Más de 100 artículos! CVPR 2020 peinado de papel GAN más completo
Desmantelando la nueva GAN: desacoplando la representación MixNMatch
StarGAN Versión 2: Generación de imágenes de diversidad multidominio
Descarga adjunta | Versión china de "Aprendizaje automático explicable"
Descarga adjunta | "Algoritmos de aprendizaje profundo de TensorFlow 2.0 en la práctica"
Descarga adjunta | "Métodos Matemáticos en Visión por Computador" compartir
Un estudio sobre la clasificación de imágenes de disparo cero: una década de progreso
"Un estudio sobre el aprendizaje en pocas oportunidades basado en redes neuronales profundas"
"Libro de los Ritos · Xue Ji" tiene un dicho: "Aprender solo sin amigos es solitario e ignorante".
¡Haga clic en una taza de té con leche y conviértase en el líder de la visión AIGC+CV! , ¡únete al planeta de la creación generada por IA y el conocimiento de la visión por computadora!