Rosas UPC. Sant Jordi Digital 2023

Las Rosas UPC 2023 se construyen a partir de dos entradas diferentes: un esbozo de una figura y un texto descriptivo en formato libre introducidos por el usuario. El resultado es una imagen con una o más rosas que sigue la forma del esbozo e intenta reflejar el texto descriptivo.

Para generar esta imagen se ha hecho servir un modelo generativo de deep learning que consta de un arquitectura de redes neuronales capaz de producir una imagen a partir de un texto y un esbozo. El modelo que se ha utilizado es ControlNet: una red neuronal basada en el modelo texto-a-imagen llamado Stable Diffusion.

Stable Diffusion es un modelo de inteligencia artificial diseñado para crear imágenes a partir de texto. Es decir, dándole un texto de entrada, te genera una imagen que coincida con la descripción de este texto.

Para guiar el proceso de construcción de la imagen que se genera a partir del texto, se ha hecho servir ControlNet, una modificación de la arquitectura de Stable Diffusion que permite condicionar como se quiere que se genere la imagen a partir de un esbozo inicial hecho por el usuario. Así pues, con ControlNet se están utilizando esbozos y contornos para decir exactamente a Stable Diffusion como se quiere condicionar la composición de la imagen a partir del texto introducido.

El proyecto también permite ver una galería con todas las rosas que se han generado.

Este proyecto ha sido un encargo del Gabinete del Rector de la UPC que ha organizado el Sant Jordi Digital 2023 de la UPC, que, juntamente con UPCArts, han querido crear un sistema para generar rosas virtuales con Inteligencia Artificial.

Este sistema ha sido desarrollado por el inLab FIB con la colaboración del Servicio de Comunicación de la UPC y UPCArts.

En 2022, inLab FIB también se encargó del desarrollo de la generación de las Rosas UPC. Las rosas se generaban a partir de una descripción y del estilo de un artista. https://roses-inlab.fib.upc.edu/2022/