localllm

6 Projekte teilen dieses GitHub-Topic

Linien verbinden Mitglieder, die messbar miteinander verwandt sind. Die Punktgröße spiegelt die Sterne wider.

🧬 Mitglieder

Find the local LLM that actually runs and performs best on your hardware. Ranked by real, recency-aware…

Run local LLMs like llama, deepseek-distill, kokoro and more inside your browser

A generalized information-seeking agent system with Large Language Models (LLMs).

[ICML 2024] SqueezeLLM: Dense-and-Sparse Quantization

[NeurIPS 2024] KVQuant: Towards 10 Million Context Length LLM Inference with KV Cache Quantization

Open-source, local-first desktop AI agent for voice, gesture, gaze, browser and system automation with…

🔗 Verwandte Familien

efficient-inference 11 model-compression 11 quantization 41 small-models 4 text-generation 17 transformer 62 llm-inference 80 local 17

Gemessen anhand der von beiden Projekten geteilten GitHub-Themen, gewichtet nach der Seltenheit jedes Themas.