Images et IA

(page créée le 8 nov 2021)

“Text-to-image is the new Sudoku.”, Mario Klingemann

Listes de ressources

• https://pharmapsychotic.com/tools.html
• https://github.com/Maks-s/sd-akashic

Stable Diffusion est un modèle de génération d'images, créé par Stability AI, le modèle a été entrainé sur 2,3 milliards d'images du dataset LAION-5B

Service gratuit / réseau social permettant d'utiliser Stable Diffusion (NSFW) en ligne (version 1.5 le 28/11/2022). Permet aussi de partir d'une image existante pour en modifier une partie («img2img»).

• https://mage.space
• https://twitter.com/MageSpace_

(Accès gratuit limité) Service d'ccès à Stable Diffusion par StabilityAI

• https://beta.dreamstudio.ai/home

(?) Service d'accès à Stable Diffusion

• https://playgroundai.com/login

Dans des images créées par Stable Diffusion, iamges présentées avec les prompts :

• https://lexica.art (voir aussi stable-diffusion-prompts)
• https://www.krea.ai
• https://arthub.ai/
• https://openart.ai/

• dans 12 millions d'images : https://laion-aesthetic.datasette.io/laion-aesthetic-6pls/images?_sort=rowid (article sur le projet)
• https://rom1504.github.io/clip-retrieval/

• https://promptomania.com/stable-diffusion-prompt-builder/

• https://www.reddit.com/r/StableDiffusion/

Création d'images à partir d'un énoncé («prompt») basé sur le modèle Dall-E Mini. Rapide et facile à utiliser

https://www.craiyon.com/

(Accès gratuit limité) Création d'images à partir d'un énoncé («prompt»)

• https://openai.com/dall-e-2/
• aide de l'éditeur : https://help.openai.com/en/articles/6516417-dall-e-editor-guide

(Accès gratuit limité) Création d'images à partir d'un énoncé («prompt»). Accessible sur Discord

• https://www.midjourney.com/home/

Création d'images à partir d'un énoncé («prompt»)

• https://huggingface.co/spaces/akhaliq/VQGAN_CLIP (temps d'attente variable)
• (fev 2022) https://huggingface.co/spaces/EleutherAI/VQGAN_CLIP
• https://colab.research.google.com/drive/1_4Jl0a7WIJeqy5LTjPJfZOwMZopG5C-W?usp=sharing#scrollTo=g7EDme5RYCrt (colab / google nécessite un compte google)

Explication du principe : https://ljvmiranda921.github.io/notebook/2021/08/08/clip-vqgan/

Des exemples sur reddit

• https://www.reddit.com/r/artificial/comments/n5jyet/statues_photo_input_with_clip_vqgan_image/
• https://www.reddit.com/r/deepdream/comments/q1o6l5/what_prompts_do_i_feed_to_get_such_images/

Une plateforme de publication : https://creator.nightcafe.studio/top

Autres modèles, russes cette fois : https://rudalle.ru/en/

Des ressources : https://pharmapsychotic.com/tools.html#sec-1f7f

• exemple de modifiers : https://promptomania.com/stable-diffusion-prompt-builder/
• un article : https://medium.com/@silkworm/high-quality-art-generation-with-the-prompt-suggestion-or-search-dbd59fb0f538
• https://strikingloo.github.io/stable-diffusion-vs-dalle-2
• https://photogpedia.com/ai-art-generators-prompt-building/
• https://docs.google.com/document/d/17VPu3U2qXthOpt2zWczFvf-AH6z37hxUbvEe1rJTsEc/edit
• https://github.com/joelparkerhenderson/stable-diffusion-image-prompt-gallery
• https://serokell.io/blog/stable-diffusion
• https://www.unlimiteddreamco.xyz/2022/03/16/writing-good-prompts-part-1.html
• https://matthewmcateer.me/blog/clip-prompt-engineering/

Plusieurs services en ligne proposent des prompts à partir d'une image qu'on leur envoie

• pour Stable Diffusion v1.x : https://huggingface.co/spaces/pharma/CLIP-Interrogator
• pour Stable Diffusion v2 : https://huggingface.co/spaces/fffiloni/CLIP-Interrogator-2
• https://huggingface.co/spaces/pharma/sd-prism
• https://replicate.com/pharmapsychotic/clip-interrogator

Comment ça marche ? : https://medium.com/@silkworm/diversify-photo-database-with-clip-interrogator-5dd1833be9f5

De stable Diffusion v1.x à SD v2.0 : https://huggingface.co/spaces/fffiloni/prompt-converter

• listes de mots https://github.com/pharmapsychotic/clip-interrogator/tree/main/clip_interrogator/data
• modifier studies : https://proximacentaurib.notion.site/2b07d3195d5948c6a7e5836f9d535592?v=e8062bc85bfd43a99fb6e187e9bac926
• artist style studies : https://proximacentaurib.notion.site/e28a4f8d97724f14a784a538b8589e7d?v=42948fd8f45c4d47a0edfc4b78937474
• https://www.the-ai-art.com/modifiers

Augmentation de la définition d'une image

• https://huggingface.co/spaces/akhaliq/Real-ESRGAN

Article : https://github.com/xinntao/Real-ESRGAN#Portable-executable-files

Interpolation d'images : à partir d'une vidéo en stop motion, recréer la fluidité d'un tournage classique

• https://github.com/baowenbo/DAIN

Génération fine d'images à partir d'une image source avec changements de contexte, de propriétés, etc.

• https://medium.com/@silkworm/dreambooth-how-google-hacks-diffusion-model-to-generate-personalized-photos-b4721763f0f8
• https://dreambooth.github.io/

• https://github.com/openai/CLIP

• https://stability.ai/blog/stable-diffusion-public-release
• https://github.com/CompVis/stable-diffusion
• https://huggingface.co/spaces/stabilityai/stable-diffusion
• https://www.reddit.com/r/StableDiffusion/
• tuto https://blog.paperspace.com/generating-images-with-stable-diffusion/

• https://github.com/AUTOMATIC1111/stable-diffusion-webui
• tuto : https://gigazine.net/gsc_news/en/20220912-automatic1111-stable-diffusion-webui-prompt-interrogate/
• exemples : https://github.com/AUTOMATIC1111/stable-diffusion-webui-feature-showcase

• https://learn.adafruit.com/generating-ai-art-with-vqgan-clip/piloting-the-weird
• https://github.com/CompVis/taming-transformers
• https://www.kaggle.com/basu369victor/playing-with-vqgan-clip
• https://www.aiweirdness.com/tag/clip-vqgan/
• https://pollinations.ai/c/Anything
• https://ljvmiranda921.github.io/notebook/2021/08/11/vqgan-list/
• https://ml.berkeley.edu/blog/posts/clip-art/
• https://hotpot.ai/art-maker
• https://aiartists.org/ai-generated-art-tools
• https://www.artbreeder.com/
• https://www.aiweirdness.com/tag/clip-vqgan/