Kolors-IP-Adapter-Plus
Proporcionamos los pesos de IP-Adapter-Plus y el código de inferencia basado en Kolors-Basemodel. Los ejemplos de resultados de Kolors-IP-Adapter-Plus son los siguientes: Nuestras mejoras incluyen un extractor de características de imagen más fuerte. Empleamos el modelo Openai-CLIP-336 como codificador de imagen, lo que nos permite preservar más detalles en las imágenes de referencia. Además, utilizamos datos de entrenamiento más diversos y de alta calidad, construyendo un conjunto de datos de entrenamiento a gran escala y alta calidad inspirado en las estrategias de datos de otros trabajos. Creemos que los datos de entrenamiento emparejados pueden mejorar efectivamente el rendimiento.
Como usar
Requisitos
Las dependencias y la instalación son básicamente las mismas que las de Kolors-BaseModel.
Clonación del repositorio e instalación de dependencias
apt-get install git-lfs
git clone https://github.com/Kwai-Kolors/Kolors
cd Kolors
conda create --name kolors python=3.8
conda activate kolors
pip install -r requirements.txt
python3 setup.py install
Enlace de descarga de pesos:
huggingface-cli download --resume-download Kwai-Kolors/Kolors-IP-Adapter-Plus --local-dir weights/Kolors-IP-Adapter-Plus
o
git lfs clone https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-Plus weights/Kolors-IP-Adapter-Plus
Inferencia:
python ipadapter/sample_ipadapter_plus.py ./ipadapter/https://raw.githubusercontent.com/junqiangwu/Kolors/master/ipadapter/asset/test_ip.jpg "穿着黑色T恤衫,上面中文绿色大字写着“可图”"
python ipadapter/sample_ipadapter_plus.py ./ipadapter/https://raw.githubusercontent.com/junqiangwu/Kolors/master/ipadapter/asset/test_ip2.png "一只可爱的小狗在奔跑"
La imagen se guardará en "scripts/outputs/"
Funcionalidades
- Extractor de características de imagen más fuerte
- Modelo Openai-CLIP-336 como codificador de imagen
- Datos de entrenamiento más diversos y de alta calidad
- Conjunto de datos de entrenamiento a gran escala y alta calidad
Casos de uso
- Generación de imágenes con detalles precisos
- Utilización de prompts en chino para la generación de imágenes