par huanngzh
Open source · 17k downloads · 61 likes
Le modèle MV-Adapter est un outil innovant conçu pour transformer des modèles de génération d'images à partir de texte en générateurs multi-vues, permettant ainsi de créer des images haute fidélité en plusieurs angles de vue. Il excelle avec divers modèles personnalisés comme DreamShaper ou Animagine, ainsi qu'avec des techniques comme LCM ou ControlNet, offrant une grande flexibilité d'utilisation. Grâce à sa capacité à générer des images multi-vues à partir de texte ou d'images, il facilite la reconstruction 3D ou la génération de textures 3D avec des indications géométriques. Son atout majeur réside dans sa capacité à produire des vues arbitraires, répondant ainsi à des besoins variés en création visuelle et en modélisation 3D.
Project Page | Paper (ArXiv) | Paper (HF) | Code | Gradio demo
Create High-fidelity Multi-view Images with Various Base T2I Models and Various Conditions.
MV-Adapter is a creative productivity tool that seamlessly transfer text-to-image models to multi-view generators.
Highlights:
| Model | Base Model | HF Weights | Demo Link |
|---|---|---|---|
| Text-to-Multiview | SD2.1 | mvadapter_t2mv_sd21.safetensors | |
| Text-to-Multiview | SDXL | mvadapter_t2mv_sdxl.safetensors | General / Anime |
| Image-to-Multiview | SD2.1 | mvadapter_i2mv_sd21.safetensors | |
| Image-to-Multiview | SDXL | mvadapter_i2mv_sdxl.safetensors | Demo |
| Text-Geometry-to-Multiview | SDXL | mvadapter_tg2mv_sdxl.safetensors | |
| Image-Geometry-to-Multiview | SDXL | mvadapter_ig2mv_sdxl.safetensors | |
| Image-to-Arbitrary-Views | SDXL |
Refer to our Github repository.
If you find this work helpful, please consider citing our paper:
@article{huang2024mvadapter,
title={MV-Adapter: Multi-view Consistent Image Generation Made Easy},
author={Huang, Zehuan and Guo, Yuanchen and Wang, Haoran and Yi, Ran and Ma, Lizhuang and Cao, Yan-Pei and Sheng, Lu},
journal={arXiv preprint arXiv:2412.03632},
year={2024}
}