Codeformer
Avatar redondo del autor de codeformer: pequeño retrato ilustrado sobre un fondo circular oscuro sczhou / codeformer

Codeformer restaura rostros perdidos en escaneos antiguos y retratos con IA

Codeformer recupera los ojos, la textura de la piel y el cabello en fotografías descoloridas, selfies comprimidos e imágenes generadas, manteniendo reconocible a la persona.

Listo Público Código abierto L40S Licencia Fuente Artículo

Entrada

Retrato suave y de bajo detalle generado por IA de una mujer rubia sonriente con un top de bikini oscuro en una playa soleada, mar desenfocado detrás de ella, encuadre cuadrado
* archivo

Retrato que quieres restaurar

número
(mín. 0, máx. 1)

Los valores más bajos favorecen un aspecto pulido; los valores más altos se mantienen más fieles al rostro original.

Predeterminado: 0.5

booleano

También limpia los alrededores usando Real-ESRGAN

Predeterminado: true

booleano

Aumenta aún más la nitidez de los rostros restaurados para imágenes generadas de alta resolución

Predeterminado: true

entero

Factor de escala aplicado a la imagen final

Predeterminado: 2

{
  "image": ".../010.jpg",
  "codeformer_fidelity": 0.1,
  "background_enhance": true,
  "face_upsample": true,
  "upscale": 2
}

Llama a Codeformer desde un script de Node.js:

const out = await client.run(model, { input });

Llama a Codeformer desde Python:

out = client.run(model, input=payload)

Envía el mismo payload por HTTP simple:

curl -X POST "$API_URL/predictions" -d @input.json

Predice localmente con Cog:

cog predict -i [email protected] -i upscale=2

Sirve el contenedor en tu propia GPU:

docker run --gpus=all -p 5000:5000 $IMAGE

Ejecuta Codeformer en tu propia foto

Sube un retrato y compara el resultado lado a lado. ¿Quieres ideas primero? Explora los ejemplos a continuación.

Sube un retrato

Abre el espacio de trabajo del socio
en un nuevo paso.

Salida

Retrato restaurado con codeformer de una mujer rubia sonriente en una playa con ojos, dientes y mechones de cabello nítidos, mar con enfoque suave Retrato de playa borroso original de una mujer rubia sonriente antes de la restauración Antes Después
{
  "status": "succeeded",
  "logs": "detect 1 faces",
  "output": ".../output.png"
}

Configuración de la muestra

Fidelidad 0.1 · escalado 2×

detectar 1 rostros

Esta muestra proviene de una compilación anterior del modelo, sczhou/codeformer:7de2ea26.

Retrato de playa restaurado a tamaño completo de una mujer rubia sonriente con detalle facial nítido

Ejemplos

Más muestras
Dos graduados sonrientes con togas académicas rojas y doradas y birretes negros sosteniendo un diploma frente a un fondo azul Retrato clásico de la era del cine de una mujer de cabello oscuro con un vestido blanco de hombros descubiertos dentro de una sala de piedra, detalle restaurado Primer plano de una joven morena entre hojas verdes sosteniendo un abanico dorado ornamentado, ojos nítidos tras la restauración Fotograma de película de una joven asiática sonriente con camisa blanca mirando a alguien fuera de cuadro, tonos cálidos Mujer rubia sonriente con top de bikini azul marino en una playa de arena, rostro restaurado nítido Joven con diadema de flores amarillas y chal floral brillante de pie en una selva tropical oscura, luz cinematográfica atmosférica

Hardware y entorno de ejecución

Codeformer es de código abierto, así que además de llamarlo en la nube puedes alojarlo tú mismo con Docker. El tiempo de procesamiento depende del tamaño de la imagen, de cuántas caras se detecten y del factor de escalado que elijas.

En la nube, esta compilación de Codeformer se ejecuta en hardware de GPU Nvidia L40S. Los retratos individuales suelen ser rápidos; las fotos de grupo con mejora del fondo tardan más.

Léame

Logotipo del proyecto codeformer: llave rizada negra y puntos de píxel rojos sobre el logotipo tipográfico CODEFORMER sobre blanco

Artículo de Codeformer: restauración ciega de rostros mediante un libro de códigos aprendido (NeurIPS 2022) Artículo | Página del proyecto | Vídeo

Insignia de contador de visitas

Esta demostración está pensada para investigación y pruebas. También puedes ejecutar el código de Codeformer en tu propia máquina o dentro de un notebook alojado.


☕️ Codeformer es un restaurador de rostros robusto para fotografías antiguas y retratos generados. 🚀 ¡Combina Codeformer con la salida de stable-diffusion para obtener rostros más limpios y naturales!

¿Te ha resultado útil Codeformer? Dale al proyecto una ⭐ en su repositorio de código fuente. ¡Se agradece mucho!

Insignia del número de estrellas del repositorio

📋 Licencia — El proyecto Codeformer se publica bajo la S-Lab License 1.0. La redistribución y el uso no comercial deben respetar sus términos, y la versión alojada de la API no puede usarse para trabajo comercial.

📝 Cita — Si el modelo respalda tu investigación, haz referencia a él de la siguiente manera:

@inproceedings{zhou2022codeformer,
    author = {Zhou, Shangchen and Chan, Kelvin C.K. and Li, Chongyi and Loy, Chen Change},
    title = {Towards Robust Blind Face Restoration with Codebook Lookup TransFormer},
    booktitle = {NeurIPS},
    year = {2022}
}

Modelo publicado Septiembre de 2022

Comenzar ahora
Comenzar ahora