Estos modelos son una revolución en el mundo de la generación de imágenes y están causando furor en las redes sociales.
¿Qué son los LCM?
Los LCM son un nuevo tipo de modelo de difusión que puede generar imágenes de alta calidad a velocidades interactivas.
¿Cómo lo hacen?
Utilizan una representación latente de la imagen que se aprende durante el entrenamiento. Esta representación latente se utiliza luego para guiar el proceso de difusión, lo que permite a los LCM generar imágenes que son consistentes y realistas.
¿Por qué son importantes los LCM?
Los LCM son importantes porque permiten la generación de imágenes de calidad en generalmente 2-4 pasos, lo que hace posible utilizar modelos de difusión en configuraciones casi en tiempo real. Esto es significativo porque los modelos de difusión tradicionales pueden requerir muchos pasos y tiempo para generar imágenes de alta calidad. Los LCM pueden ser destilados de cualquier modelo de difusión estable pre-entrenado en solo 4,000 pasos de entrenamiento, lo que acelera significativamente la generación de imágenes.
Aplicaciones de los LCM
Los LCM han mostrado resultados prometedores en una serie de aplicaciones diferentes, incluyendo la generación de imágenes. Por ejemplo, se pueden utilizar para generar arte generativo en tiempo real, permitiendo a los usuarios mover sus cursores o pintar dibujos simples y ver cómo las aplicaciones de creación de arte de IA generan arte nuevo y diferente instantáneamente.
Además, los LCM también se pueden utilizar para tareas de generación de texto a imagen e imagen a imagen, lo que significa que pueden convertir descripciones de texto en imágenes o transformar una imagen en otra. También se están viendo aplicaciones de los LCM en herramientas que producen imágenes a medida que se dibuja en un lienzo.
Ejemplos de uso de los LCM
Aquí te presentamos algunos ejemplos increíbles de generación en tiempo real para que te hagas una idea de lo que puedes hacer con los LCM:
KREA
Krea es una herramienta que puedes usar con cualquier software de 2D, 3D, animación, vector o pintura en el mundo. Photoshop, Blender, Figma… son solo algunos ejemplos. Con Krea, puedes mover cosas, cambiar la iluminación y ver cómo se refleja todo en la imagen resultante. Es como una combinación de los beneficios de trabajar en 3D, pero con herramientas 2D. Para más información sobre Krea, puedes visitar su página web aquí.
ILUMINE AI
Ilumine AI ha creado una aplicación de pintura LCM que te permite crear arte sin preocuparte por tu falta de habilidades artísticas. Un deslizador especial resolverá eso por ti y un filtro hará que tu arte se sienta más «vivo» mientras pintas. Puedes empezar a jugar con ella aquí.
CoffeeVectors
CoffeeVectors ha probado los LCM LORAs en un flujo de trabajo AnimateDiff & multi-controlnet en ComfyUI. Fue capaz de procesar un vídeo musical completo de Black Pink como una única entrada .mp4. Para aprender más sobre LOra, puedes ver este vídeo.
Conclusión
Los LCM están revolucionando la forma en que generamos imágenes y crean nuevas posibilidades para la creación de arte con inteligencia artificial. Ya sea que quieras generar arte en tiempo real, convertir texto en imágenes o transformar una imagen en otra, los LCM te ofrecen una forma rápida y eficiente de hacerlo. ¡La nueva era de la creación con IA ha comenzado!
Comentarios