LMCache
LMCache: Acelere Seu LLM com a Camada de Cache KV Mais Rápida
Acelere o desempenho de grandes modelos de linguagem com um sistema de cache especializado.
Reivindique a sua pagina: indexada seja qual for a posicao, traduzida em seis linguas e enriquecida com as suas palavras.
Receba um alerta por e-mail no próximo lançamento ou quando começar a bombar.
Grátis · sem cartão · cancele quando quiserLMCache: Acelere Seu LLM com a Camada de Cache KV Mais Rápida
LMCache tem 10.9k estrelas no GitHub. Foi bifurcado 1.6k vezes. LMCache é escrito principalmente em Python. Está em desenvolvimento ativo desde 2024. LMCache está disponível sob a licença Apache-2.0. Os seus principais temas são: amd, cuda, fast, inference.
O que é LMCache?
LMCache: Acelere Seu LLM com a Camada de Cache KV Mais Rápida
LMCache é de código aberto?
LMCache é um projeto de código aberto. É distribuído sob a licença Apache-2.0.
LMCache é gratuito?
Sim. LMCache é gratuito e de código aberto — você pode usá-lo, modificá-lo e hospedá-lo por conta própria.
Sob que licença está LMCache?
LMCache está disponível sob a licença Apache-2.0.
Em que linguagem LMCache está escrito?
LMCache é escrito principalmente em Python.
Adicione este badge ao vivo ao seu README — suas estrelas do GitHub e classificação no diretório, atualizadas diariamente.
[](https://opensourceai.tech/project/lmcache-lmcache.html)
Medido a partir dos topics do GitHub comuns aos dois projetos, ponderados pela sua raridade.