Screaming Frog
Was ist Screaming Frog?
Screaming Frog ist ein lokal installiertes SEO-Tool, das Websites automatisiert crawlt und technische sowie inhaltliche Seiteneigenschaften auswertet. Der sogenannte SEO Spider folgt internen Links, erfasst URLs und macht unter anderem Statuscodes, Weiterleitungen, Canonical Tags, Meta-Daten, Überschriften und Indexierungsangaben prüfbar.
Screaming Frog bildet die Struktur einer Website ähnlich wie ein Suchmaschinen-Crawler ab. Der vollständige Produktname lautet Screaming Frog SEO Spider. Das Programm wird auf einem Computer installiert und liefert nach einem Crawl eine nach URLs gegliederte Datengrundlage für technische SEO-Analysen, Relaunches und Website-Audits.
Screaming Frog als SEO-Tool
Screaming Frog gehört zur Kategorie der Website-Crawler. Ein Crawler ruft eine Startadresse auf, liest die dort gefundenen Links aus und folgt ihnen nach festgelegten Regeln. Dadurch entsteht ein Verzeichnis der erreichbaren Seiten und Ressourcen. Ein Crawl zeigt deshalb primär, was über die gewählte Ausgangsadresse und Konfiguration auffindbar ist.
Das ist eine wichtige Abgrenzung: Screaming Frog bildet nicht automatisch den vollständigen Google-Index einer Domain ab. Eine URL kann bei Google indexiert sein, obwohl sie beim Crawl fehlt, etwa weil kein interner Link zu ihr führt. Umgekehrt kann der Crawler URLs finden, die Google wegen eines Noindex-Tags, einer robots.txt-Regel oder eines Canonical Tags nicht indexiert.
Typische Einsatzbereiche des SEO-Tools sind:
Eine Einordnung weiterer Crawler, Plattformen und Analyseprogramme findest du im Vergleich verschiedener SEO-Tools. Die Auswahl sollte sich danach richten, ob du eine einmalige Tiefenanalyse, ein laufendes Monitoring oder eine zentrale Plattform für mehrere SEO-Bereiche benötigst.
So funktioniert ein Screaming-Frog-Crawl
Im Spider-Modus startet Screaming Frog mit einer eingegebenen URL und folgt den erreichbaren Links. Welche Inhalte der Crawler erfasst, hängt unter anderem von Crawl-Grenzen, ausgeschlossenen Verzeichnissen, robots.txt-Einstellungen, dem gewählten User-Agent und der Behandlung von Parametern ab. Zwei Nutzer können deshalb für dieselbe Domain unterschiedliche Ergebnisse erhalten.
Im List-Modus verarbeitet Screaming Frog dagegen eine vorgegebene URL-Liste. Dieser Modus eignet sich beispielsweise zur Kontrolle einer XML-Sitemap, einer Weiterleitungsliste oder ausgewählter Canonical-Ziele. Der List-Modus folgt nicht zwingend der gesamten internen Linkstruktur, sondern konzentriert sich auf die importierten Adressen und die konfigurierte Prüftiefe.
| Modus | Ausgangspunkt | Geeigneter Anwendungsfall |
|---|---|---|
| Spider | Eine Start-URL und gefundene Links | Website-Struktur, interne Verlinkung und technische Bestandsaufnahme |
| List | Importierte URL-Liste | Sitemaps, Redirect-Mappings, Canonical-Ziele und definierte Seitengruppen |
Die Crawl-Ergebnisse werden in Reitern und Filtern gegliedert. Ein Statuscode 404 weist beispielsweise darauf hin, dass die angeforderte Ressource nicht gefunden wurde. Erst die Spalte mit der verlinkenden Ausgangsseite zeigt jedoch, wo der fehlerhafte interne Link korrigiert werden muss. Die reine Anzahl eines Fehlertyps reicht für eine belastbare Priorisierung nicht aus.
Welche Fehler findet Screaming Frog?
Screaming Frog kann HTTP-Statuscodes wie 200, 301, 302, 404 und 5xx erfassen. Ein 200-Code bestätigt zunächst nur, dass der Server eine erfolgreiche Antwort liefert. Der Statuscode sagt nicht, ob die Seite indexierbar ist, einen korrekten Canonical besitzt oder den gewünschten Inhalt ausgibt. Ein technisches Audit muss diese Signale deshalb gemeinsam bewerten.
Bei Weiterleitungen zeigt Screaming Frog sowohl die Ausgangs-URL als auch das Ziel. Mehrere aufeinanderfolgende Weiterleitungen verlängern den Abrufweg und erschweren die Wartung. Prüfe bei einer Weiterleitungskette, ob die erste Adresse direkt auf das endgültige Ziel verweisen kann und ob interne Links bereits die Ziel-URL verwenden.
Canonical Tags lassen sich URL für URL exportieren und kontrollieren. Ein Canonical ist für Suchmaschinen ein Signal zur Auswahl der bevorzugten URL, keine verbindliche Anweisung. Zeigen Canonical, interne Verlinkung, Weiterleitungen und XML-Sitemap auf verschiedene Adressen, kann Google eine andere kanonische URL bestimmen. Prüfe deshalb nicht nur, ob ein Canonical vorhanden ist, sondern auch dessen Ziel und Erreichbarkeit.
Bei Meta-Daten erkennt der Crawler unter anderem fehlende, mehrfach verwendete oder auffällig lange Seitentitel und Meta-Descriptions. Ein doppelter Seitentitel beweist jedoch keinen Duplicate Content. Zwei Seiten können denselben Titel und trotzdem unterschiedliche Inhalte besitzen. Nutze solche Filter als Ausgangspunkt für eine manuelle Prüfung der Suchintention und Seitenfunktion.
Screaming Frog richtig auswerten
Ein häufiger Analysefehler besteht darin, jeden angezeigten Hinweis als gleich dringenden SEO-Fehler zu behandeln. Eine fehlende Meta-Description auf einer nicht indexierbaren Filterseite benötigt meist keine Bearbeitung. Ein interner Link auf eine nicht erreichbare Verkaufsseite betrifft dagegen Nutzer, Crawler und möglicherweise Umsatz. Priorisiere Befunde nach Seitentyp, Indexierbarkeit, interner Verlinkung und geschäftlicher Bedeutung.
Für einen strukturierten Audit kannst du die Ergebnisse in vier Gruppen aufteilen:
Bei einem SEO-Audit sollten Crawl-Daten außerdem mit Rankings, organischem Traffic und Seitentypen verbunden werden. Erst diese Kombination beantwortet, welche technischen Auffälligkeiten tatsächlich relevante URLs betreffen. Ein Export mit vielen Zeilen ist noch keine Handlungsempfehlung.
Screaming Frog und laufendes Monitoring
Der Unterschied zwischen Screaming Frog und einem Monitoring-System liegt im Prozess. Screaming Frog liefert einen definierten Datenstand zum Zeitpunkt des Crawls. Ein laufendes Monitoring wiederholt Prüfungen automatisch, speichert Entwicklungen und meldet neue Auffälligkeiten. Für Relaunch-Kontrollen und Detailanalysen ist ein manueller Crawl sinnvoll, während geschäftskritische Landingpages in kurzen Intervallen überwacht werden sollten.
Messbar ist das zum Beispiel so: Lege für jeden Crawl einen vergleichbaren Umfang fest und dokumentiere die Zahl indexierbarer URLs, interner 4xx-Ziele, Weiterleitungsketten und widersprüchlicher Canonicals. Der Technik-Crawler der Performance Suite ergänzt solche Stichproben durch mehr als 100 SEO-Checks pro URL, wiederkehrende Prüfungen und Alerts. Dadurch wird aus der Einzelanalyse ein kontrollierbarer Technikprozess.
Ein kostenloser Schnelltest kann eine erste Bestandsaufnahme liefern, ersetzt aber keine vollständig konfigurierte Crawl-Analyse. Prüfe Technik, Meta-Daten, Ladezeiten und Backlinks mehrerer Unterseiten mit dem kostenlosen SEO-Check.
Relevanz für SEO, SEA und GEO
Für SEO macht Screaming Frog sichtbar, ob Suchmaschinen wichtige Seiten erreichen und deren technische Signale eindeutig interpretieren können. Der Crawler bewertet jedoch nicht automatisch, ob eine Seite die passende Suchintention erfüllt oder genügend Autorität besitzt. Technische Fehlerfreiheit ist eine Grundlage für organische Rankings, kein alleiniger Ranking-Faktor.
Für SEA kann Screaming Frog Zielseiten auf fehlerhafte Statuscodes, Weiterleitungen, Canonicals und fehlende Seitenelemente prüfen. Eine Anzeigen-URL mit Serverfehler oder unerwarteter Weiterleitung beeinträchtigt die Nutzbarkeit einer Kampagne unmittelbar. Deshalb sollten bezahlte Landingpages auch dann in technische Prüfungen einbezogen werden, wenn sie nicht über die Navigation verlinkt sind.
Für GEO, also Generative Engine Optimization, liefert Screaming Frog keine Messung von Markenerwähnungen in ChatGPT, Perplexity, Gemini oder Grok. Der Crawl unterstützt GEO indirekt: Gut erreichbare, eindeutig strukturierte und intern verlinkte Inhalte erleichtern Suchmaschinen und anderen abrufenden Systemen die Verarbeitung. Ob eine Marke tatsächlich in KI-Antworten erscheint, muss separat gemessen werden.
Häufige Fragen zu Screaming Frog
Ist Screaming Frog kostenlos nutzbar?
Screaming Frog bietet eine eingeschränkte kostenlose Variante und eine kostenpflichtige Lizenz mit erweitertem Funktionsumfang. Für kleine Websites und erste Tests kann die kostenlose Nutzung ausreichen. Größere Crawls und professionelle Audit-Funktionen erfordern je nach Umfang eine Lizenz.
Kann Screaming Frog meine Website beschädigen?
Ein normal konfigurierter Crawl verändert keine Inhalte, erzeugt aber Serveranfragen. Eine zu hohe Crawl-Geschwindigkeit kann schwächere Server belasten. Begrenze deshalb parallele Anfragen und beobachte die Serverreaktion, besonders bei Shops, Buchungssystemen und großen Archiven.
Warum findet Screaming Frog nicht alle Seiten?
Screaming Frog findet im Spider-Modus hauptsächlich URLs, die über die gewählte Startseite und interne Links erreichbar sind. Verwaiste Seiten, gesperrte Bereiche, nicht verlinkte Landingpages oder ausschließlich über Formulare erreichbare URLs können fehlen. Ergänze den Crawl bei Bedarf um Sitemaps und importierte URL-Listen.
Kann Screaming Frog Duplicate Content erkennen?
Screaming Frog kann identische oder sehr ähnliche Seitenelemente und Inhalte als Prüfhinweis erfassen. Die Daten zeigen mögliche Überschneidungen, entscheiden aber nicht abschließend, ob zwei Seiten dieselbe Suchintention bedienen. Vergleiche betroffene URLs deshalb manuell und berücksichtige Rankings sowie Seitentypen.
Eignet sich Screaming Frog für Anfänger?
Screaming Frog kann von Einsteigern genutzt werden, setzt für eine korrekte Bewertung aber Kenntnisse zu Statuscodes, Indexierung, Canonicals und interner Verlinkung voraus. Beginne mit einem begrenzten Crawl und prüfe wenige klar definierte Fehlergruppen, statt sämtliche Exporte gleichzeitig auszuwerten.
Ist Screaming Frog ein Ersatz für die Google Search Console?
Screaming Frog und die Google Search Console beantworten unterschiedliche Fragen. Der Crawler untersucht eine Website aus technischer Sicht, während die Search Console Daten zu Google-Suchanfragen, Impressionen, Klicks und der von Google erkannten Indexierung liefert. Für einen vollständigen Audit werden beide Datenarten kombiniert.
Wenn du technische Crawls, wiederkehrende Kontrollen und weitere SEO-Daten in einem System verbinden möchtest, kannst du einen kostenlosen Zugang mit SEO-Audit anlegen.
Sie haben noch Fragen?
