small-models

4 proyectos comparten este topic de GitHub

Las líneas conectan a los miembros que están mediblemente relacionados entre sí. El tamaño de los puntos refleja las estrellas.

🧬 Miembros

Bonsai-demo

Bonsai Demo

★ 2.1k

SqueezeLLM

[ICML 2024] SqueezeLLM: Dense-and-Sparse Quantization

★ 722

Bonsai-Image-Demo

Generate images locally

★ 518

KVQuant

[NeurIPS 2024] KVQuant: Towards 10 Million Context Length LLM Inference with KV Cache Quantization

★ 430

Medido a partir de los temas de GitHub compartidos por ambos proyectos, ponderado por cuán raros son cada uno de los temas.