post-training-quantization

4 proyectos comparten este topic de GitHub

Las líneas conectan a los miembros que están mediblemente relacionados entre sí. El tamaño de los puntos refleja las estrellas.

🧬 Miembros

neural-compressor

SOTA low-bit LLM quantization (INT8/FP8/MXFP8/INT4/MXFP4/NVFP4) & sparsity; leading model compression…

Awesome-Model-Quantization

A curated collection of papers, benchmarks, surveys, and tools for model quantization, covering low-bit…

[ICML 2024] SqueezeLLM: Dense-and-Sparse Quantization

[ICCV 2023] Q-Diffusion: Quantizing Diffusion Models.

🔗 Familias relacionadas

quantization 41 quantization-aware-training 4 efficient-inference 11 model-compression 11 awq 4 fp4 4 knowledge-distillation 15 pruning 5

Medido a partir de los temas de GitHub compartidos por ambos proyectos, ponderado por cuán raros son cada uno de los temas.