Codeformer
Avatar rond de l'auteur de codeformer : petit portrait illustré sur un fond circulaire sombre sczhou / codeformer

Codeformer restaure les visages perdus dans les anciens scans et les portraits IA

Codeformer restaure les yeux, la texture de la peau et les cheveux dans les tirages délavés, les selfies compressés et les images générées, tout en gardant la personne reconnaissable.

Prêt Public Open source L40S Licence Source Article

Entrée

Portrait généré par IA, doux et peu détaillé, d'une femme blonde souriante en haut de bikini sombre sur une plage ensoleillée, mer floue en arrière-plan, cadrage carré
* fichier

Portrait que vous souhaitez restaurer

nombre
(min 0, max 1)

Des valeurs plus faibles privilégient un rendu poli ; des valeurs plus élevées restent plus fidèles au visage d'origine.

Par défaut : 0.5

booléen

Nettoyer également les environs à l'aide de Real-ESRGAN

Par défaut : true

booléen

Renforcez encore la netteté des visages restaurés pour les images générées à haute résolution

Par défaut : true

entier

Facteur d'échelle appliqué à l'image finale

Par défaut : 2

{
  "image": ".../010.jpg",
  "codeformer_fidelity": 0.1,
  "background_enhance": true,
  "face_upsample": true,
  "upscale": 2
}

Appelez Codeformer depuis un script Node.js :

const out = await client.run(model, { input });

Appelez Codeformer depuis Python :

out = client.run(model, input=payload)

Envoyez la même charge utile via HTTP simple :

curl -X POST "$API_URL/predictions" -d @input.json

Prédisez localement avec Cog :

cog predict -i [email protected] -i upscale=2

Servez le conteneur sur votre propre GPU :

docker run --gpus=all -p 5000:5000 $IMAGE

Exécutez Codeformer sur votre propre photo

Importez un portrait et comparez le résultat côte à côte. Vous voulez d'abord des idées ? Parcourez les exemples ci-dessous.

Importez un portrait

Ouvre l'espace de travail partenaire
dans une nouvelle étape.

Sortie

Portrait restauré par Codeformer d'une femme blonde souriante sur une plage, avec des yeux, des dents et des mèches de cheveux nets, mer en flou doux Portrait de plage flou original d'une femme blonde souriante avant restauration Avant Après
{
  "status": "succeeded",
  "logs": "detect 1 faces",
  "output": ".../output.png"
}

Paramètres de l’exemple

Fidélité 0.1 · agrandissement 2×

détecter 1 visage

Cet exemple provient d’une version antérieure du modèle, sczhou/codeformer:7de2ea26.

Portrait de plage restauré en taille réelle d'une femme blonde souriante avec des détails faciaux nets
Deux diplômés souriants en toges académiques rouges et dorées et toques noires tenant un diplôme devant un fond bleu Portrait classique de l'ère du film d'une femme aux cheveux foncés en robe blanche à épaules dénudées dans une salle en pierre, détail restauré Gros plan d'une jeune femme brune parmi des feuilles vertes tenant un éventail doré orné, yeux nets après restauration Photogramme de film d'une jeune femme asiatique souriante en chemise blanche regardant quelqu'un hors cadre, tons chauds Femme blonde souriante en haut de bikini bleu marine sur une plage de sable, visage restauré net Jeune femme avec un bandeau de fleurs jaunes et un châle floral éclatant debout dans une jungle tropicale sombre, lumière cinématographique atmosphérique

Matériel et environnement d'exécution

Codeformer est open source, donc en plus de l'appeler dans le cloud, vous pouvez l'héberger vous-même avec Docker. Le temps de traitement dépend de la taille de l'image, du nombre de visages détectés et du facteur d'agrandissement choisi.

Dans le cloud, cette version de Codeformer s'exécute sur du matériel GPU Nvidia L40S. Les portraits individuels sont généralement rapides ; les photos de groupe avec amélioration de l'arrière-plan prennent plus de temps.

Readme

Logo du projet Codeformer : accolade noire et points pixel rouges au-dessus du logotype CODEFORMER sur fond blanc

Article Codeformer : restauration aveugle de visages via un codebook appris (NeurIPS 2022) Article | Page du projet | Vidéo

Badge de compteur de visiteurs

Cette démo est destinée à la recherche et aux tests. Vous pouvez également exécuter le code de Codeformer sur votre propre machine ou dans un notebook hébergé.


☕️ Codeformer est un restaurateur de visages robuste pour les photographies anciennes et les portraits générés. 🚀 Associez Codeformer à la sortie de stable-diffusion pour des visages plus nets et plus naturels !

Vous avez trouvé Codeformer utile ? Donnez une ⭐ au projet sur son dépôt source. Merci beaucoup !

Badge du nombre d'étoiles du dépôt

📋 Licence — Le projet Codeformer est publié sous la S-Lab License 1.0. La redistribution et l'utilisation non commerciale doivent respecter ses conditions, et la version API hébergée ne peut pas être utilisée à des fins commerciales.

📝 Citation — Si le modèle soutient vos recherches, veuillez le référencer comme suit :

@inproceedings{zhou2022codeformer,
    author = {Zhou, Shangchen and Chan, Kelvin C.K. and Li, Chongyi and Loy, Chen Change},
    title = {Towards Robust Blind Face Restoration with Codebook Lookup TransFormer},
    booktitle = {NeurIPS},
    year = {2022}
}

Modèle publié Septembre 2022

Commencer maintenant
Commencer maintenant