Run MoE models bigger than your RAM. Frontier-size MoE on a phone, laptop, edge. Lossless, on stock llama.cpp. An adaptive streaming optimizer. Any hardware, any OS, any model, any quantization, behind a local OpenAI-compatible server.
Run large AI models on any device by streaming data as needed, regardless of memory limits.
Rivendica la sua pagina: indicizzata qualunque sia il rango, tradotta in sei lingue e arricchita con le tue parole.
Ricevi un avviso via email alla prossima release o quando decolla — non perderti nulla.
Gratis · senza carta · disdici quando vuoiRun MoE models bigger than your RAM. Frontier-size MoE on a phone, laptop, edge. Lossless, on stock llama.cpp. An adaptive streaming optimizer. Any hardware, any OS, any model, any quantization, behind a local OpenAI-compatible server.
BigMoeOnEdge ha 840 stelle su GitHub. È stato forkato 92 volte. BigMoeOnEdge è scritto principalmente in C++. È in sviluppo attivo dal 2026. BigMoeOnEdge è disponibile con licenza Apache-2.0. I suoi temi principali sono: android, cpp, edge-ai, gemma.
Run MoE models bigger than your RAM. Frontier-size MoE on a phone, laptop, edge. Lossless, on stock llama.cpp. An adaptive streaming optimizer. Any hardware, any OS, any model, any quantization, behind a local OpenAI-compatible server.
BigMoeOnEdge è un progetto open source. È rilasciato con licenza Apache-2.0.
Sì. BigMoeOnEdge è gratuito e open source: puoi usarlo, modificarlo e ospitarlo autonomamente.
BigMoeOnEdge è disponibile con licenza Apache-2.0.
BigMoeOnEdge è scritto principalmente in C++.
Aggiungi questo badge live al tuo README — le tue stelle GitHub e il ranking della directory, aggiornati quotidianamente.
[](https://olud.ai/project/helldez-bigmoeonedge.html)
Misurato dai topic GitHub comuni a entrambi i progetti, ponderati per la loro rarita.