Screaming Frog
Definition: Screaming Frog SEO Spider ist ein Desktop-basierter Website-Crawler des britischen Unternehmens Screaming Frog Ltd., der Websites wie ein Suchmaschinen-Bot durchsucht und dabei umfassende technische SEO-Daten erfasst. Er gilt als Standard-Tool für technische SEO-Audits und identifiziert Probleme wie defekte Links, fehlende Meta-Tags, Redirect-Chains, Duplicate Content und Indexierungsprobleme schnell und vollständig.
Erläuterung
Screaming Frog funktioniert wie ein lokaler Suchmaschinen-Crawler: Es folgt allen internen Links einer Website, erfasst alle gefundenen URLs und analysiert sie auf technische SEO-Parameter. Der Vorteil gegenüber cloudbasierten Tools: Der Crawler läuft lokal auf dem eigenen Rechner, ist sehr schnell und liefert vollständige Daten ohne Einschränkungen durch API-Limits.
Was Screaming Frog erfasst
- HTTP-Statuscodes: Alle 200, 301, 302, 404, 500 etc. – mit Source-URL für gebrochene Links
- Title Tags und Meta Descriptions: Länge, fehlende, doppelte
- H1–H6-Tags: Fehlende H1, mehrfache H1, leere H-Tags
- Canonicals: Canonical-Tags und ob sie korrekt gesetzt sind
- Robots-Direktiven: noindex, nofollow, X-Robots-Tag-Header
- Hreflang-Attribute: Internationale SEO-Implementierung prüfen
- Bilder: Alt-Texte (fehlend/vorhanden), Bildgrössen
- Interne und externe Links: Linkstruktur, Anchor Texts
- Seitenladezeiten: Response Time pro URL
Erweiterte Funktionen
- JavaScript-Rendering: Dynamische Websites mit JavaScript-Content crawlen (wie Googlebot)
- Custom Extraction: Beliebige Seitenelemente per XPath oder CSS-Selektor extrahieren
- Custom Search: Nach bestimmten Texten oder Elementen auf allen Seiten suchen
- GSC- und GA4-Integration: Performance-Daten mit technischen Crawl-Daten zusammenführen
- XML-Sitemap-Generierung: Automatisch XML-Sitemaps erstellen
- Crawl-Vergleich: Zwei Crawls vergleichen um Veränderungen zu identifizieren
Kostenmodell
- Freie Version: Crawlt bis zu 500 URLs – ausreichend für kleine Websites und erste Tests
- Lizenz (kostenpflichtig): Unbegrenzte Crawl-Tiefe; alle erweiterten Funktionen; Jahresgebühr
- Als Desktop-App für Windows, macOS und Linux verfügbar
Typische Einsatzszenarien
- Technischer SEO-Audit vor und nach Website-Relaunches
- Redirect-Überprüfung nach Domain-Migrationen oder URL-Änderungen
- Thin-Content-Identifikation per Wortanzahl-Export
- Duplicate-Content-Erkennung über doppelte Title Tags oder Meta Descriptions
- Vollständige interne Linkstruktur visualisieren