Crawly McCrawlface
Websites crawlen, Inhalte extrahieren, Übersetzungen exportieren
Crawle komplette Websites mit einem Klick. Crawly durchsucht automatisch Sitemaps und Links, extrahiert sauberen Text und liefert dir exportfertige Inhalte – perfekt für SEO-Analyse, Content-Audits und professionelle Übersetzungsprojekte.
Was Crawly kann:
- Automatische Seitenentdeckung über Sitemap und Link-Verfolgung
- Saubere Textextraktion – Navigation, Cookie-Banner und Scripts werden automatisch entfernt
- SEO-Metadaten auf einen Blick: Meta-Descriptions, Open Graph, Twitter Cards, hreflang-Tags
- XLIFF-Export für professionelle Übersetzungsworkflows
- Textexport als Einzeldatei oder eine Datei pro Seite
- Detailliertes Crawl-Log mit HTTP-Status, Antwortzeiten und Wortanzahl
Ich arbeite als freiberuflicher Übersetzer und muss regelmäßig komplette Website-Texte für Lokalisierungsprojekte extrahieren. Bisher war das immer ein mühsamer Copy-Paste-Marathon.
Volle Kontrolle über jeden Crawl:
- Drei Geschwindigkeitsstufen: Höflich, Normal und Schnell
- Sprachfilter – crawle nur Seiten in bestimmten Sprachen
- Subdomain-Steuerung und Tiefenbegrenzung
- Bis zu 5.000 Seiten pro Crawl
- robots.txt wird respektiert
- HTTP Basic Auth für geschützte Websites
Für wen ist Crawly gemacht?
- SEO-Profis – Website-Audits und Metadaten-Analyse im Handumdrehen
- Übersetzer & Lokalisierungsteams – XLIFF-Export direkt aus der Website
- Content-Manager – Komplette Textinhalte einer Website auf Knopfdruck
- Entwickler – Schnelle Bestandsaufnahme von Webprojekten
Dass die App komplett offline läuft und keine Daten in irgendeine Cloud schickt, ist bei sensiblen Kundenprojekten ein echtes Plus. Einziger Wunsch: Ein CSV-Export wäre noch die Kirsche auf der Torte.
Mac