Scrapling
🕷️ Ein adaptives Web-Scraping-Framework, das alles von einer einzelnen Anfrage bis zu einem umfassenden Crawl verarbeitet!
Scrapen Sie Daten von Websites einfach, egal ob es sich um eine einzelne Seite oder eine große Website handelt.
Aus der README
pip install scrapling
- 🕷️ Scrapy-like Spider API: Define spiders with starturls, async parse callbacks, and Request/Response objects.
- ⚡ Concurrent Crawling: Configurable concurrency limits, per-domain throttling, and download delays.
- 🔄 Multi-Session Support: Unified interface for HTTP requests, and stealthy headless browsers in a single spider - route requests to different sessions by ID.
- 💾 Pause & Resume: Checkpoint-based crawl persistence. Press Ctrl+C for a graceful shutdown; restart to resume from where you left off.
Auszüge aus der Projekt-README zu GitHub. Das Urheberrecht und die Lizenzen verbleiben bei den jeweiligen Autoren.
Beanspruchen Sie die Seite: indexiert unabhangig vom Rang, in sechs Sprachen ubersetzt und mit Ihren eigenen Worten erganzt.
Erhalten Sie eine E-Mail-Benachrichtigung beim nächsten Release oder wenn es durchstartet.
Kostenlos · ohne Karte · jederzeit abbestellbar🕷️ Ein adaptives Web-Scraping-Framework, das alles von einer einzelnen Anfrage bis zu einem umfassenden Crawl verarbeitet!
Scrapling hat 77.4k Sterne auf GitHub. Es wurde 7.8k-mal geforkt. Scrapling ist hauptsächlich in Python geschrieben. Es wird seit 2024 aktiv entwickelt. Scrapling ist unter der BSD-3-Clause-Lizenz verfügbar. Die Hauptthemen sind: ai, ai-scraping, automation, crawler.
Was ist Scrapling?
🕷️ Ein adaptives Web-Scraping-Framework, das alles von einer einzelnen Anfrage bis zu einem umfassenden Crawl verarbeitet!
Ist Scrapling Open Source?
Scrapling ist ein Open-Source-Projekt. Es wird unter der BSD-3-Clause-Lizenz veröffentlicht.
Ist Scrapling kostenlos?
Ja. Scrapling ist kostenlos und Open Source — Sie können es nutzen, anpassen und selbst hosten.
Unter welcher Lizenz steht Scrapling?
Scrapling ist unter der BSD-3-Clause-Lizenz verfügbar.
In welcher Sprache ist Scrapling geschrieben?
Scrapling ist hauptsächlich in Python geschrieben.
Fügen Sie dieses Live-Abzeichen zu Ihrem README hinzu — Ihre GitHub-Sterne und Verzeichnisrang, täglich aktualisiert.
[](https://olud.ai/project/d4vinci-scrapling.html)
Ermittelt aus gemeinsamen GitHub-Topics beider Projekte, gewichtet nach ihrer Seltenheit.