ace gguf
par calcuis
Open source · 976 downloads · 29 likes
1.8
(29 avis)AudioAPI & LocalÀ propos
Le modèle ACE GGUF est une version optimisée et quantifiée du modèle ACE-Step, spécialement conçue pour fonctionner avec ComfyUI. Il intègre un encodeur, un VAE et le modèle de base dans un format GGUF, permettant une utilisation immédiate sans configuration complexe. Ce modèle se distingue par sa légèreté et sa rapidité de chargement, tout en conservant des performances élevées grâce à une gestion optimisée des tenseurs clés. Il est particulièrement adapté à la génération audio et à la synthèse de voix, offrant une alternative efficace aux versions traditionnelles en safetensors. ACE GGUF est idéal pour les utilisateurs cherchant à exploiter des modèles audio performants dans des environnements comme ComfyUI, avec une intégration simplifiée et des ressources réduites.
Documentation
gguf quantized ace-step-v1-3.5b
- base model from ace-step
- full set gguf (model+encoder+vae) works right away
setup (once)
- drag ace-step to >
./ComfyUI/models/diffusion_models - drag umt5-base to >
./ComfyUI/models/text_encoders - drag pig to >
./ComfyUI/models/vae
workflow
- drag json or demo audio below to browser for workflow
| Prompt | Audio Sample |
|---|---|
female singing pop music electronic beats fennec corecute fennec girlmassive fennec earsbig fluffy taillong blonde wavy hairlarge blue eyesI love fennec girl | 🎧 ace-step |
female singing pop music electronic beats fennec corecute pinky pigmassive pinky earsbig fluffy taillong cutie wavy hairlarge blue eyesI love pinky pig | 🎧 ace-audio |
review
- note: as need to keep some key tensors (in f32 status) to make it works; file size might not decrease that much; but load faster than safetensors checkpoint in general (no last minute bottle neck problem)
- rebuilding umt5-base tokenizer logic applied successfully; upgrade your node to the latest version for umt5-base encoder support; hence, safetensors checkpoint is no longer needed (removed here; if you want it still, you could get it from comfyui-org)
- get more umt5-base encoder here
bonus: fp8/16/32 scaled stable-audio-open-1.0 with gguf quantized t5_base encoder
- base model from stabilityai
- note: this is a different model; don't mix it up; also powerful and lite weight
setup (once)
- drag t5-base to >
./ComfyUI/models/text_encoders - drag safetensors to >
./ComfyUI/models/checkpoints - drag pig to >
./ComfyUI/models/vae
| Prompt | Audio Sample |
|---|---|
| heaven church electronic dance music | 🎧 stable-audio |
review
- note: the safetensors checkpoint in this repo is an extracted version; only contains model and condition switch tensors (extremely lite weighted); no clip and vae inside; should use it along with separate clip (text encoder) and vae
- opt to get fp8/16/32 scaled checkpoint with model and vae embedded here
- get more t5-base encoder here
reference
- comfyui from comfyanonymous
- pig architecture from connector
- gguf-node (pypi|repo|pack)
Liens & Ressources