small-models

4 projetos partilham este topic do GitHub

Linhas conectam membros que estão mensuravelmente relacionados entre si. O tamanho do ponto reflete estrelas.

🧬 Membros

[ICML 2024] SqueezeLLM: Dense-and-Sparse Quantization

[NeurIPS 2024] KVQuant: Towards 10 Million Context Length LLM Inference with KV Cache Quantization

🚀🚀 A 0.8B JEV-like multimodal model playing GUI games directly from raw pixels.

★ 56 · GitHub ↗

🔗 Familias relacionadas

efficient-inference 11 localllm 6 model-compression 11 quantization 41 text-generation 17 transformer 60 llamacpp 27 mlx 37

Medido a partir dos tópicos do GitHub compartilhados por ambos os projetos, ponderado pela raridade de cada tópico.