Home Progetti Craw4LLM
Craw4LLM
Python

Craw4LLM

Repository ufficiale per "Craw4LLM: Efficient Web Crawling for LLM Pretraining"

di cxcscmu · GitHub
Stelle
Fork
Licenza
Creato
Ultimo commit
Categoria
Lingua
crawlercrawlinglarge-language-modelsMITPython
Visualizza su GitHub
In parole semplici

Imposta un web crawler per raccogliere dati per addestrare modelli di linguaggio di grandi dimensioni in modo efficiente.

Mantieni questo progetto?

Rivendica la sua pagina: indicizzata qualunque sia il rango, tradotta in sei lingue e arricchita con le tue parole.

Rivendica questa pagina →
Craw4LLM — GitHub preview card
📈 Storia delle stelle
664660
2026-07-202026-08-31
📈 Segui Craw4LLM

Ricevi un avviso via email alla prossima release o quando decolla — non perderti nulla.

Gratis · senza carta · disdici quando vuoi
Ricevi avvisi via email →
📄 Informazioni

Repository ufficiale per "Craw4LLM: Efficient Web Crawling for LLM Pretraining"

Craw4LLM ha 663 stelle su GitHub. È stato forkato 60 volte. Craw4LLM è scritto principalmente in Python. È in sviluppo attivo dal 2025. Craw4LLM è disponibile con licenza MIT. I suoi temi principali sono: crawler, crawling, large-language-models, llm.

Frequently asked questions

Che cos'è Craw4LLM?

Repository ufficiale per "Craw4LLM: Efficient Web Crawling for LLM Pretraining"

Craw4LLM è open source?

Craw4LLM è un progetto open source. È rilasciato con licenza MIT.

Craw4LLM è gratuito?

Sì. Craw4LLM è gratuito e open source: puoi usarlo, modificarlo e ospitarlo autonomamente.

Con quale licenza è Craw4LLM?

Craw4LLM è disponibile con licenza MIT.

In quale linguaggio è scritto Craw4LLM?

Craw4LLM è scritto principalmente in Python.

🏅 Manutentore di questo progetto?
olud.ai badge — Craw4LLM

Aggiungi questo badge live al tuo README — le tue stelle GitHub e il ranking della directory, aggiornati quotidianamente.

[![olud.ai](https://olud.ai/badge.php?tool=cxcscmu-craw4llm)](https://olud.ai/project/cxcscmu-craw4llm.html)
Altre opzioni di badge →
🧬 Condivide il DNA con🧬 Vedi la mappa del DNA →

Misurato dai topic GitHub comuni a entrambi i progetti, ponderati per la loro rarita.