Stability AI ha añadido una nueva herramienta a su plataforma de IA ClipDrop: Stable Doodle. Esta herramienta te permite convertir un simple garabato en imágenes de alta resolución generadas por IA.
Además del garabato, que puede ser dibujado fácilmente con el ratón, puedes añadir una descripción de lo que tu garabato debe representar. Opcionalmente, puedes elegir uno de los 14 estilos disponibles. Estos estilos van desde el fotorealismo y la fotografía analógica hasta el origami, el anime y el arte en píxeles.
SDXL encuentra el adaptador T2I de Tencent
Stable Doodle se basa en el modelo más reciente y potente de Stability AI, Stable Diffusion XL, pero en una versión no especificada. Por lo tanto, no está claro si esta es la versión 0.9 de SDXL, que actualmente solo está disponible a través de ClipDrop y DreamStudio.
Para convertir bocetos a mano en imágenes detalladas, Stability combina SDXL con el adaptador T2I (texto a imagen) de código abierto de Tencent ARC.
T2I se puede agregar a un modelo de difusión existente, como Stable Diffusion XL, proporcionando condiciones de entrada adicionales como bocetos, mapas de segmentación o incluso poses. Es similar a ControlNet, que ya se utiliza ampliamente en Stable Diffusion.
Tanto T2I como ControlNet tienen la ventaja de no afectar la capacidad original de generación del modelo preentrenado y se pueden aplicar fácilmente a diferentes modelos siempre que estén basados en los mismos fundamentos (por ejemplo, no solo SDXL, sino también SD v1.5, etc.).
Pruébalo gratis a través de Clipdrop
Puedes probar Stable Doodle de forma gratuita en el sitio web y en las aplicaciones de Android e iOS de Clipdrop. Sin embargo, la descarga de imágenes sin marca de agua está disponible solo para miembros Pro.
En esencia, la herramienta está dirigida tanto a aficionados como a profesionales y, según Stability, tiene el potencial de mejorar significativamente diversas industrias, desde la educación hasta el diseño creativo.
Transformar garabatos en imágenes de IA tiene una tradición
Stable Doodle se une a un creciente grupo de formas de influir en el resultado de una imagen de IA con entradas adicionales más allá de las indicaciones de texto. Recientemente, por ejemplo, Adobe demostró cómo personalizar mejor las imágenes de IA mediante la colocación de objetos 3D.
La idea de incorporar dibujos simples en el proceso de generación de imágenes no es nueva. En 2018, DeepMind experimentó con un enfoque similar, aunque los resultados no se comparan con la resolución y el nivel de detalle ofrecidos por Stable Doodle.
