Home› Progetti› llama.cpp-v100
llama.cpp-v100
C++

llama.cpp-v100

llama.cpp optimized for NVIDIA Tesla V100 (SM70). Qwen3.8-Flash-Next (MoE) with MTP on 1/2/3/6x V100-16GB at 262K context (6 GPUs: prefill 3402 tok/s at 200K; 2 GPUs on one socket: 2152 tok/s). Qwen3.8-27B with DFlash2 on 1-6 GPUs, up to 512K context. Multimod

di 1115714829 · GitHub
Stelle
Fork
Licenza
Creato
Ultimo commit
Categoria
Lingua
Probabile
Auto-ospitato
cudaggufllama-cppGPL-3.0C++Auto-ospitato
Visualizza su GitHub
In parole semplici

Run large AI models on NVIDIA Tesla V100 GPUs for advanced tasks.

✓ Rivendicata dal suo manutentore
Cosa faA llama. cpp inference framework specifically designed for V100 graphics cards
Per chiA llama. cpp inference framework specifically designed for V100 graphics cards
Cosa non faA llama. cpp inference framework specifically designed for V100 graphics cards

Scritto da chi mantiene questo progetto, verificato tramite il repository.

llama.cpp-v100 — GitHub preview card
📈 Storia delle stelle
7445
2026-10-222026-11-15
📈 Segui llama.cpp-v100

Ricevi un avviso via email alla prossima release o quando decolla — non perderti nulla.

Gratis · senza carta · disdici quando vuoi
Ricevi avvisi via email →
📄 Informazioni

llama.cpp optimized for NVIDIA Tesla V100 (SM70). Qwen3.8-Flash-Next (MoE) with MTP on 1/2/3/6x V100-16GB at 262K context (6 GPUs: prefill 3402 tok/s at 200K; 2 GPUs on one socket: 2152 tok/s). Qwen3.8-27B with DFlash2 on 1-6 GPUs, up to 512K context. Multimod

llama.cpp-v100 ha 74 stelle su GitHub. È stato forkato 14 volte. llama.cpp-v100 è scritto principalmente in C++. È in sviluppo attivo dal 2026. llama.cpp-v100 è disponibile con licenza GPL-3.0. I suoi temi principali sono: cuda, gguf, llama-cpp, llm-inference.

❓ Frequently asked questions

Che cos'è llama.cpp-v100?

llama.cpp optimized for NVIDIA Tesla V100 (SM70). Qwen3.8-Flash-Next (MoE) with MTP on 1/2/3/6x V100-16GB at 262K context (6 GPUs: prefill 3402 tok/s at 200K; 2 GPUs on one socket: 2152 tok/s). Qwen3.8-27B with DFlash2 on 1-6 GPUs, up to 512K context. Multimod

llama.cpp-v100 è open source?

llama.cpp-v100 è un progetto open source. È rilasciato con licenza GPL-3.0.

llama.cpp-v100 è gratuito?

Sì. llama.cpp-v100 è gratuito e open source: puoi usarlo, modificarlo e ospitarlo autonomamente. La sua licenza GPL-3.0 è copyleft: ogni versione modificata che distribuisce deve restare sotto la stessa licenza.

Con quale licenza è llama.cpp-v100?

llama.cpp-v100 è disponibile con licenza GPL-3.0.

In quale linguaggio è scritto llama.cpp-v100?

llama.cpp-v100 è scritto principalmente in C++.

🏅 Manutentore di questo progetto?
olud.ai badge — llama.cpp-v100

Aggiungi questo badge live al tuo README — le tue stelle GitHub e il ranking della directory, aggiornati quotidianamente.

[![olud.ai](https://olud.ai/badge.php?tool=1115714829-llama-cpp-v100)](https://olud.ai/project/1115714829-llama-cpp-v100.html)
Altre opzioni di badge →
🧬 Condivide il DNA con🧬 Vedi la mappa del DNA →

Misurato dai topic GitHub comuni a entrambi i progetti, ponderati per la loro rarita.